이 캐나다인 프로듀서가 AI를 활용하여 아티스트가 다양한 언어로 노래할 수 있도록 하는 방법

캐나다 프로듀서, 조던 영이 AI 음성 클론 기술을 괴롭히기 시작했을 때, 결국 카니에 웨스트에 똑같이 들리는 가짜 카니에 웨스트의 노래를 만들 때 그는 즉시이 기술의 윤리적 의미에 대해 생각하게 되었습니다.

“그것을 만들자마자 생각하기 시작했습니다 … 누군가가 누구의 목소리로 음악을 만들 수 있다면, 이것은 아티스트에게 무엇을 의미합니까? 이것은 음악에 무엇을 의미합니까? 비욘세, BTS, 듀아리파와 일을 해온 영 씨는 이렇게 말했다.

그와 그의 회사 Hooky는 최근 아티스트가 모국어와 다른 언어로 노래하는 것처럼 들리는 기술을 개발했습니다.

이 말은 당시 한국 투어를 마쳤고 팬들에게 감사를 전하는 의미있는 방법을 찾고 싶었던 미국 팝 가수 라우브의 마음에 울렸다.그의 노래의 새로운 버전을 개발해 보지 않겠습니까? 그렇게 사랑해한국어로 연주하는 것처럼 들리도록 변환하셨습니까?

이 과정은 영회사가 영어와 한국어에 능통한 한국의 싱어송 라이터, 케빈우에게 이 곡을 다시 써 새로운 언어로 노래 받는 것으로 시작되었다. 그 해석은 한국어의 뉘앙스를 포착해야 한다고 영 씨는 설명했다.

왼쪽에서 조던 영, 라우브, 케빈 우. 영씨의 회사는 AI를 활용해 라우브씨의 곡의 한국어판 제작에 K팝 아티스트인 우씨를 기용했다. (후키)

“번역 사이트에 던져질 뿐만 아니라 거기에서 내뿜는 것이 무엇이든, 그것은 당신의 노래입니다. 그것에 대해 예술적이어야 합니다”라고 영은 말했다.

녹음도 음악적으로 일치해야 했습니다. 예를 들어, 라우브가 몇 마디로 팔셋에서 노래를 했다면, 우는 한국어 데모에서 같은 일을 했다.

인공지능에 진입합니다.

이 기술은 영의 말을 빌리면 라우브의 목소리의 “모퉁이까지”, 즉 최고 주파수와 톤에서 최저음에 이르기까지 훈련되고 그의 보컬의 포괄적인 모델을 구축합니다.

Woo가 쓰고 노래한 한국어 데모는 Lauv의 목소리의 AI 모델과 결합되어 Lauv가 노래하는 것처럼 들리는 한국어 노래가 만들어집니다.

보기 | LAUV의 “Love U Like That”의 한국어 버전 :

올해는 크리에이티브 산업에 있어서 인공지능과 격투하는 해가 되었다.

특히 음악 업계에서는 바이럴 트랙 등 세계에서 가장 인기 있는 아티스트처럼 들리도록 만들어진 AI 생성곡의 폭발적인 증가를 볼 수 있다. 하트 온 마이 슬리브드레이크와 더 위크엔드처럼 들리는 컴퓨터 생성 보컬이 특징이었습니다.

일부 아티스트는 파인팅 자신의 목소리나 초상을 허가 없이 사용하는 반면, 다른 사람들은 글라임스존 레전드와 데미 로버트는 기술을 수락 다양한 정도로.

토론토 출신의 영 씨는 “적어도 아티스트가 자신의 목소리가 어떻게 사용되는지를 제어할 수 있도록 해야 한다”고 말하고 AI를 사용하여 언어를 변경한다는 아이디어는 거기에서 태어났다고 지적 했다.

“그것은 인공 지능이 완전히 그것을 파괴 할 수있는 세계에서 아티스트가 자신의 초상화를 관리 할 수 ​​있도록 제어 메커니즘을 만드는 것이 었습니다.”

다른 기업들은 음악과 번역에 중점을 둔 기술에 종사하고 있습니다.

AudioShake, 샌프란시스코 오디오 분리를 전문으로 하는 회사로 음악에서 노래의 보컬 트랙을 분리하고, AI를 사용하여 노래를 글자화 및 번역하며, 원래 영어와 새로운 언어를 매핑하는 기술을 구축하여 팬이 원래 노래의 가사를 따라갈 수 있습니다. 언어. 팝 가수의 시아는 중 하나 그들의 고객들.

반면 한국에서 가장 큰 레코드 레이블 HYBE는 AI 기술을 사용하여 MIDNATT로 알려진 소속 아티스트인 Lee Hyun이 자신의 노래를 녹음할 수 있게 했습니다. 매스커레이드 영어, 한국어, 스페인어, 일본어, 중국어, 베트남어 등 6개국어로 제공됩니다.

가수는 자신의 노래를 각국어로 녹음하고 네이티브 스피커가 가사를 읽는 데모와 결합했다. 현은 한국어와 한정된 영어와 중국어를 사용합니다.

“사람들이 충분히 이해하지 못하는 것은 무서운 일입니다. AI는 한 장 바위처럼 그려지기 쉽지만 실제로는 그렇지 않습니다.”라고 영 씨는 말합니다.

“AI는 실제로 다양한 방법으로 결합할 수 있는 다양한 기술입니다.”

이미 해외팬들에게 다가가려는 아티스트

빌보드지의 크리스틴 로빈슨에 따르면 올해 AI가 최전선에 등장하기 전부터 아티스트들은 이미 팬을 타겟팅하기 위해 다양한 언어를 사용하려고 했다고 한다.

그녀가 가리키는 것은 데스파 시트는 푸에르토리코의 가수 루이스 폰시와 푸에르토리코의 래퍼 다디 양키의 2017년 곡으로 저스틴 비버를 피처한 리믹스 버전이 대히트했다.

“저스틴 비버에게 라틴계 노래를 선보여달라고 전혀 예상하지 못했습니다. 했다.”

그러나 이미 성공을 거두고 있는 이러한 추세에 AI가 통합된 것으로, 사람들은 프로세스의 “신뢰성”에 대해 복잡한 감정을 안고 있을 가능성이 높다고 로빈슨은 말합니다.

녹색과 회색의 디테일이 베풀어진 체크 무늬의 재킷을 입은 여성이, 한 손을 뺨에 대고, 다른 팔을 교차시키고 있습니다.
빌보드 매거진의 음악 출판 담당 기자인 크리스틴 로빈슨은 이 기술이 등장하기 전부터 아티스트들은 다양한 언어를 사용해 국제적인 팬층을 타겟으로 하려고 했다고 말한다. (케이티 크로네)

이 유형의 음악이 받아 들여질지 여부는 아직 모른다. 로빈슨은 윤리적으로나 문화적으로 적절한 방식으로 기술을 사용하는 것이 대화의 중요한 부분이라고 말한다.

그것은 라우브의 한국어판에 대한 온라인 반응의 일부에도 반영되고 있다. 사랑해.

일부 팬들은 새 버전에 ‘몹시 빠져 있다’고 말했지만 백인 아티스트가 기술을 이용해 한국인 아티스트가 노래하는 곡에 자신의 목소리를 삽입한다는 행위에 의문을 품는 팬도 있었다 . 또 다른 사람들은 라우브와 우를 같은 트랙에서 노래하는 또 다른 방법을 제안했습니다.

언어의 “뉘앙스”를 이해하는 것이 중요합니다 : 토론토 아티스트

토론토 재즈보컬리스트 겸 송 라이터인 재클린 테씨는 가족의 언어인 복건성의 중국 방언인 복건어를 장래의 프로젝트에 도입하고 싶다. 다국어 아티스트로서 그녀는 AI를 사용하여 다양한 언어로 노래를 만드는 장점과 단점을 이해합니다.

그녀는 이 기술이 처음에는 흥미로운 것처럼 보였고, 아티스트에게 다른 언어에 접근하기 위한 ‘훌륭한 출발점’이 될 수 있다고 덧붙였다.

그러나 아티스트에게는 신용과 대행사가 매우 중요하며, 그녀에게는 처음 언어와 자신의 언어와 다른 언어를 사용하는 사람과의 잠재적 관계 사이에 AI가 개입하기를 원하지 않습니다. , 그녀는 말한다.

듣기 | 음악의 AI는 아티스트에게 실존적인 질문을 만듭니다.

전면 버너29:01비틀즈와 AI 음악의 미래

추천 동영상존 레논은 사망하기 전에 신곡 ‘Now and then’의 데모를 카세트에 녹음했다. 그의 비틀즈의 밴드 동료는 나중에 이 곡을 재이용해 릴리스하려고 했지만, 목소리의 질이 나빴던 것도 있어 프로젝트를 포기했다. 이번 주 폴 맥카트니는 레논의 사후 43년을 거쳐 AI 기술 덕분에 이 곡이 사라질 것이라고 밝혔다. 이것은 음악 업계에서 인공 지능의 존재감이 증가하고 있다는 최신 예입니다. 가짜 드레이크의 노래, AI가 생성한 카니에의 커버, 그리고 사후의 비기와의 콜라보레이션은, 저작권에 대한 경계감을 높여, 곡 만들기나 창조성에 대한 실존적인 의문을 일으키고 있다. 오늘 살로하 코에료는 Vulture 포드캐스트 ‘Switched on Pop’의 호스트인 찰리 하딩과 음악 업계와 아트 자체에 있어서 기술이 무엇을 의미하는지에 대해 이야기합니다. 이 시리즈의 트랜스크립트는 https://www.cbc.ca/radio/frontburner/transcripts를 참조하십시오.

“언어에는 매우 많은 뉘앙스가 있고, 속어도 많고, 기술만으로는 실제로는 번역할 수 없는 것이 많이 있다고 생각합니다.” 보다 의미 있는 것이 된다고 말했다.

그녀는 아티스트가 AI를 사용하여 팬이나 다른 아티스트와 의미있는 관계를 구축하는 데 필요한 노력을 피하지 않는 한 “기술을 이용하여 액세스 할 수있는 것들이 많이 있습니다”라고 말합니다.

프로듀서 영은 새로운 번역 프로젝트를 진행하고 있으며 캐나다 아티스트와 협력할 수 있습니다. 그는 마신이 병에서 나온 지금 업계가 기술을 올바른 방향으로 이끌 수 있는 방법을 찾아야 한다고 말합니다.

“창조적인 과정에서 인간을 배제하는 것들을 만들려고 하지 않을 것”이라고 그는 말했다. “그리고 현재 그것을 실현하려는 기업이 많이 있습니다.”


게시됨

카테고리

작성자

태그:

댓글

답글 남기기

이메일 주소는 공개되지 않습니다. 필수 필드는 *로 표시됩니다