본문 바로가기

Machine Learning

연구프로젝트 샘플

반응형

데이터셋은 카이스트오디오북데이터셋(링크)을 사용했습니다.

모델의 학습은 ESPNet(링크)와 ParallelWaveGAN(링크)을 사용했습니다.

학습이 제대로 되진 않았지만 학습이 완료된 모델을 다운 받으시려면 여기서 확인해주세요. 

Tacotron2와 HiFiGAN, Finetuned HiFiGAN입니다.

Ground Truth, baseline, augment 순입니다. 생성된 음성은 15 db씩 볼륨을 키운 상태입니다.

Seen Speaker Same Utterance

Text : 혼자 노래하면서 언덕에 올라서서 땀을 닦고 있을 바로 그때였어요.

Text : 더 생동감 있는 표현이 됩니다.

Text : 위태로운 상태에 있었다.

Text : 해당 시민단체 측이 폭행을 가한 이들을 경찰에 고소한 사실이 뒤늦게 알려졌습니다.

Text : 수지가 춘화의 눈앞에 얼굴을 들이밀며 비웃었다.

Text : 합리적인 결정을 내리는 데 큰 도움이 된다.

Text : 엄마는 심장병 걸리셨고요,

Text : 이에 심철재 원내대표는 오늘인 십삼일 성명을 통해 총선을 코앞에 두고.

Text : 복희가 우는 소리를 내자, 진희가 장미를 손가락으로 쿡쿡 찔렀다.

Text : 그리고 채령이의 손을 잡고 마을 회관을 벗어났어요.

 

Seen Speaker Different Utterance

Text : 빨리 종강했으면 좋겠는데 과제가 남아있다.

Text : 햇빛이 선명하게 나뭇잎을 핥고 있었다.

Text : 제후들이 전쟁을 일삼고 패권을 다투던 당시는 온 천하가 굉장히 불안한 상태였다.

Text : 누군가가 내 학점을 훔친 게 분명해

 

Unseen Speaker Same Utterance

Text : 채령이는 속상한 마음에 더 이상 아무 말도 하지 않고 방문을 쾅 닫고 들어가 이불을 꺼내 덮고 누웠어요.

Text : 분명 방금 전까지 동굴이 보였는데 감쪽같이 사라져 버린 거에요.

Text : 해로, 조금만 기다려.

Text : 여기에 누가 있다는 거야?

Text : 채령이는 속상한 마음에 더 이상 아무 말도 하지 않고 방문을 쾅 닫고 들어가 이불을 꺼내 덮고 누웠어요.

Unseen Speaker Different Utterance

Text : 남들과 같은 것은 절대 참을 수 없다.

Text : 화면 아래 왼쪽을 살펴보시면 안내문구가 나와 있습니다.

Text : 패스트 푸리에 변환은 정말 어려운 알고리즘이야.

Text : 안녕하세요, 반가워요. 오늘도 좋은 하루 되세요.

Text : 이에 학생들은 종강이 더 이상 미뤄지는 것은 있을 수 없는 일이라고 답했습니다.

Text : 날마다 새로우며 깊어지고 넓어진다.

Text : 천하의 안정을 취하려면 하는 일마다 신중해야 한다.

Text : 내이름은 코난 탐정이지.

반응형