AI기술에 의해 진짜로 인간과 구별할 수 없는 노랫 소리로 부르는 버추얼 가수 개발!

AI기술에 의해 진짜로 인간과 구별할 수 없는 노랫 소리로 부르는 버추얼 가수 개발!

주식회사 테크노스 피치와 국립 대학 법인 나고야 공업대학국제음성언어기술연구소는, 이번 인간 목소리질·버릇·노래 부르는 방법을 지금까지 없는 고정밀도로 재현할 수 있는 노랫 소리 합성 기술을 개발했습니다.

　　

테크노스 피치와 나고야 공업대학은 공동으로 음성합성·노랫 소리 합성 기술 연구·개발에 열을 올리고 있어, 지금까지 업무용 노래방 기계기 「JOYSOUND」나 음성창작 소프트웨어 「CeVIO Creative Studio」등에 음성합성·노랫 소리 합성 기술 도입을 진행시켜 왔습니다. 본연구는, 특정한 가창자의 약2시간 노랫 소리 데이터베이스에 대하여, 심층학습 등 AI기술을 적용하는 것에 의해, 가창자 목소리질·버릇·노래 부르는 방법을 학습했습니다. 합성의 즈음은, 임의의 가사가 딸린 악보를 입력하는 것만으로 고품질의 노랫 소리를 합성할 수 있습니다.

언어:일본어, 영어, 중국어

합성 음성 샘플:새기술(믹스, 아카펠라), 현행 기술(아카펠라)

현대 기술

AI歌声合成システム　技術革新前（ベタ打ち・未調整）

새 기술

AI歌声合成システム　技術革新後（ベタ打ち・未調整）

새 기술 (믹스)

AI歌声合成システム Demo

凄いな。また初音ミク登場時のようなDTMブームが来る?

"特定の歌唱者の約2時間の歌声データベースに対して、深層学習等のAI技術を適用することにより、歌唱者の声質・癖・歌い方を学習"

2018年12月14日 株式会社テクノスピーチ AI技術により超高精度な歌声合成を実現 https://t.co/73GoDN2DK8 pic.twitter.com/7rlRXYLGXI

— tetsu (@metatetsu) 2018년 12월 14일