이제 가수 보컬도 Ai가 머지 않았다, 신디사이저V

음악을 Ai로 작곡하는 기능과 그림을 Ai로 그려내는 특이점을 넘어서 이제는 보컬도 가능할 것으로 보인다.

 

이제 가수 보컬도 Ai가 머지않았다

해당 프로그램은 Synthesizer V (신디사이저V)라는 프로그램이다. Ai에 관심을 많이 가지고 있던 차에 사용해 본 것은 작곡 관련된 부분이었고, 보컬은 아직 Ai 기계적인 느낌을 지울 수 없었다. 하지만 이 프로그램으로 제작된 데모들을 보고 놀라지 않을 수 없었다. 비록 아직은 영어와 일본어에 최적화된 느낌이지만, 머지않아 한글도 나오지 않을까 싶다.

 

신디사이저V

나무위키에서 해당 정보를 조회해 보면 자세히 다루고 있으며, 예상보다 개발을 시작한 지 꽤나 되었다는 것을 알 수 있다. 갑자기 나타난 프로그램이 아니라는 것이다.

 

Synthesizer V (신디사이저 V, 약칭 SynthV)는 화칸루라는 중국인 프로그래머가 개발한 음성 합성 엔진이다. 현재 윈도우 및 리눅스에서 사용할 수 있으며 지원하는 언어는 영어, 일본어, 중국어(정체자, 간체자)이다. 한국어 지원에 관한 루머가 있으나 현재로서는 계획되어 있지 않다.

한국에서는 신스비, 신스븨 등으로 불리며 일본에서는 SynthV를 그대로 읽은 シンスV와 シンセサイザーV(신시사이저 V)를 줄인 シンセV 둘 중 하나로 불린다.

 

개발자인 Kanru Hua가 중학교 시절 하츠네 미쿠를 접하고서 중국어로도 이러한 음성합성 소프트를 만들어 보고 싶다고 느낀 것이 프로젝트의 시작이다. 실제로 SynthV 개발 이전에도 중국어 음성합성 소프트웨어를 만들어 본 적이 있으며, 고등학교와 대학교 재학 시절에도 음성 합성 소프트웨어에 대한 열망은 식지 않아서, 틈틈이 관련 논문을 읽어가면서 SHIRO, Moresampler 등을 개발했다.

이후 일리노이 대학교 어바나 섐페인 재학 시절 스웨덴에 음성 합성에 대한 학회에 참가했고, 그곳에서 알게 된 야마하 관계자와의 인연으로 1개월간 야마하 하마마츠 본사에서 인턴십을 하게 된다. 이때 1개월간의 일본 생활과 일본인들과의 교류에서 큰 감명을 받았다고 한다.

그렇게 2018년 인턴 종료 이후 대학에 복귀하기보다는 SynthV 프로젝트에 전념하기로 결정해서, 상하이의 본가로 돌아가서 7년간의 작업, 5번의 개정판의 종지부를 찍은 것이 바로 Synthesizer V다. 첫 번째 음성 데이터베이스인 엘리노어 포르테와 함께 2018년 8월 18일 체험판 다운로드가 시작되었으며 둘 다 무료로 제공되었다.

이후 조금 더 본격적으로 프로젝트를 전개해 보고자 관련 사업을 시도했고, 일본 생활에서 관계자들에게 받았던 좋은 인상과 더불어, 일본은 이미 왕성했던 VOCALOID 문화 덕에 음성 합성 관련 업계 활동이 가장 활발한 축에 드는 시장이었기에 일본으로 가서 Dreamtonics를 차리고 본격적인 사업을 시작하게 된다. 유통 등에 있어서 AHS에게 도움을 받기 시작한 시기도 이때 즈음부터이다. 

-이상 나무위키-

 

나무위키에 기록되어 있는 업데이트된 정보는 2023년 5월 10일이니 상당히 최신정보라 할 수 있겠다. 한 가지 없는 정보가 있다면 맥북도 지원한다는 것이다. 영어로만 지원한다. 윈도우에서는 한글도 지원한다.

그렇다면 대표적인 사례 음원을 들어보자, 해당 음원은 가필(Ga_Feel)이라는 국내 유튜버가 제작한 커버곡이다. 어쿠스틱으로 편곡하고 신시사이저 V의 솔라리아라는 보컬을 사용하여 부른 에코스미스의 Cool kids이다. 재미있는 사실은 영상에 나오는 그림도 미드저니(Midjourney Ai 그림제작)를 활용하여 팬아트 느낌으로 제작한 것이다.

 

먼저 원곡이다.  Echosmith - Cool Kids [Official Web Video]

https://youtu.be/UXTlczyWJ-Y?si=Nbhz-POaML0ojboF

위에 공식웹비디오로 원곡을 감상해 보고 어쿠스틱으로 편곡된 영상을 보자.

 

신디사이저V로 편곡 제작된 음원

https://youtu.be/P1iT3zxboYA?si=cVwuFTc2ngJsnoem

솔라리아라는 Ai 보컬을 활용하여 어쿠스틱으로 편곡된 음원이다. 놀랍지 않은가? 너무 자연스럽다. 구매 충동이 일어날 정도로 잘 만들어졌다. 한국보컬 지원만 가능하다면 당장 구매하고 싶다.

 

개발자가 중국인이라 늦게 나올 수도 있겠다. 

 

공식사이트 https://dreamtonics.com/synthesizerv/

Synthesizer V | Dreamtonics株式会社

기본 베이직으로 위 편곡 영상 같은 퀄리티를 만들어내긴 힘들지만, 무료이니 한번 사용해 보겠다면 공식 사이트에서 다운로드하면 된다.

 

Ai를 사용한 그림 그리기에 이어서 움직이는 영상까지 나오고 있고, 작곡에 이어 보컬까지 나오고 있으니 Ai로 인하여 가장 먼저 일자리를 잃게 되는 직종이 작화가와 작곡가인 건가?

 

아무튼 놀랍다. Ai를 빠르게 익히고 배워야 함을 더욱 느끼게 된다.