AI 커버

최근 편집일시 :


1. 개요
2. 상세
2.1. 역사
2.2. 문제점
3. 예시



1. 개요[편집]


인공지능을 사용하여 기존 노래의 보컬을 다른 인물의 목소리로 바꾸는 것이다.


2. 상세[편집]



2.1. 역사[편집]


타인이 다른 사람의 노래를 커버하여 부르는 문화는 최소한 20세기 이전부터는 존재했으며 현재까지도 자신이 좋아하는 음악을 타인이 커버하는 것은 언제나 수요가 있었다. 하지만 노래를 잘 부르는 사람은 예나 지금이나 한정적이고, 자신이 좋아하는 목소리로 좋아하는 노래를 부르는 것을 듣는 것은 한정적일 수 밖에 없었다.

이 때문에 타인의 목소리를 이용해서 프로그램적으로 편집해서 노래를 만드는 시도가 존재했으며 이러한 문화는 21세기 00년대부터 존재했다. 대표적으로 보컬에 집중한 음원 제작 합성 DAW인 VOCALOID, 사람의 음절 하나하나를 잘라서 편집하는 인력VOCALOID 등이 있다.

많은 수요가 존재한 만큼 다양한 관련 문화와 기술은 계속 발전했다. 특히 VOCALOID의 경우[1] 동서양 막론하고 전세계적으로 다양한 목소리가 출시되었으며 단순히 노래를 넘어 호흡과 발성법까지 프로그래밍 할 수 있는 경지에 이르렀다. 그러나 아무리 많은 기능들이 추가되었다고 하더라도 결국 사람이 직접 세부적으로 세팅해주어야 했으므로 수 많은 경험을 가진 숙련자가 다뤄야만 했으며 만드는 데에도 상당한 시간 걸렸다. 그럼에도 불구하고 고도의 숙련자조차도 합성된 목소리에서 어색함을 지우는 것은 절대적으로 불가능했다. 인력VOCALOID는 말할 것도 없었다.

그러나 2022년부터 AI가 급격하게 성장하기 시작하며 다양한 AI들이 인간에 준하는 창작능력을 보유하게 되며 자연스럽게 음원 합성 프로그램에도 AI가 끼어들게 되었고, 그 결과가 AI 커버이다.

AI를 이용한 음원 합성은 기존의 모든 음성 합성 엔진을 단번에 도태시킬 정도로 혁명적인 발전이었다. 누구나 쉽게 접근할 수 있고, 누구나 자연스러운 목소리를 만들어낼 수 있으며, 제작 시간도 매우 짧다. AI 커버는 자신이 원하는 목소리로 원하는 노래를 부르게 한다는 희망을 단번에 해소시켜주며 순식간에 하나의 문화로 자리잡게 된다.

AI를 통한 음악 복원 사례는 2014년부터 이미 어느정도 현실화가 된 상태로 hide의 미완성 곡을 음성복원하여 발매한 것을 시작으로 2019년에는 일본 국민 가수인 미소라 히바리의 목소리를 AI로 딥러닝해 신곡을 만들기도 했고, 2020년 부터는 국내에서도 AI 음악 프로젝트 다시 한번,이나 세기의 대결: AI vs 인간, ALIVE, 아바드림 등을 통해 고인이 된 가수들의 목소리를 다시 재현하기 시작했다.

상단의 사례는 전부 전문가들의 추가 보정이 있었던 것이지만, 딥러닝의 원리에서 알 수 있듯이 그림 인공지능과 비슷하게 데이터만 쌓여 있으면 어렵지 않게 만들 수 있기 때문에 점점 대중화되기 시작하였고, 초기엔 디스코드 채널 기반으로 시작되었던 것이 현재는 AI 커버를 해주는 여러 사이트들까지 우후죽순 생겨났으며 패러디 대상도 비단 실존 가수뿐만 아니라 목소리가 존재하는 가상 캐릭터[2]들로 늘어가면서 기하급수적으로 커버 음악이 늘어나고 있다.

2022년부터 그림 인공지능의 발전사와 비슷하게, 노래 인공지능 또한 초창기엔 고음 부분을 제대로 처리하지 못해 노골적인 기계음이 나왔으나 몇달 되지 않아 실제 사람이 부른 원곡과 거의 차이 없을 정도로 높은 완성도를 보여주기 시작했다.

제작 과정 또한 상당히 단순화되어 팝콘AI, 소리소리AI[3], Musicfy, voicmyai등 복잡한 작업 없이도 누구든 직접 제작이 가능한 서비스가 국내외에서 생겨나고 있다.

한국에서도 여러 유명 가수들의 목소리로 아이돌 음악[4]을 커버하는 영상들이 나오기 시작하면서 유행을 타기 시작해 여러 트위치 스트리머들의 목소리를 입힌 AI 커버들이 상당한 고퀄리티로 주목 받으며 상당히 인기가 늘고 있다.

한국가수로는 박효신, 임재범, 딘 등의 목소리를 입힌 헤어지자말해요, 하입보이등이 인기를 끌었고, 인도네시아도 조코 위도도의 목소리를 입힌 AI 커버가 조회수 380만회를 찍기도 했고 스페인에선 호머 심슨의 목소리를 입힌 La Gata Bajo La Lluvia의 AI 커버가 260만회를 찍는 등[5] 세계적으로 유행을 타고 있다.

그리고 마치 음성 합성 엔진[6]이랑 음MAD 것처럼 유사한 점이 많다. 기술의 발전으로 인해 2020년대에서는 훨씬 자연스러워졌다. 언어의 장벽도 자연스럽게 넘어가서 원본 목소리의 인공지능 목소리가 다른 언어를 네이티브처럼 자유롭게 구사하는 수준. 짜집기를 통한 병맛에서 웃음 요소가 나오는 음MAD와 달리 2020년대의 AI커버 노래의 웃음 요소는 원곡의 갭과 클것같은 인물, 가수들이 해당 노래를 부르는 식으로 웃음을 유도하는 경우가 많다. 예를 들어서 프랭크 시나트라익스트림 메탈 노래를 커버한다든가 하는 식으로.

2023년 들어 아돌프 히틀러쇼와 덴노 같은 2차 세계대전 지도자들의 육성을 학습한 커버곡들이 늘어나고 있다(...).
그리고 스트리머들 역시 유명 스트리머의 학습한 커버곡들이 여러 스트리머 사이에서 스트리머 AI 커버 월드컵이 유행하기도 했다.

AI 커버들이 점점 많아지면서 이제 더 이상 실제 인물들이 아닌 칫솔#이나 문#같은 물건들의 커버곡들이 올라오고 있다(...).

아예 AI 목소리로 노래들을 만들기도 하는데 일부는 퀼리티가 엄청나서 빌보드 차트에 올라오는 음악들보다 좋다는 말이 많을정도다. ##


2.2. 문제점[편집]


그림 인공지능과 동일하게 저작권 논란이 있으며 갈수록 완성도가 높아지면서 수면 위로 떠오르고 있는 상황이다. 심지어 AI 보컬을 이용해 아예 신곡인 것처럼 꾸며서 큰 논란이 일기도 했다. 저작권 논란은 크게 '학습 과정에서 무단으로 이용하는 저작권 침해'와, '해당 인물의 동의를 받지 않고 결과물을 만들어내는 것'에 대한 논란으로 나눌 수 있다.

이는 이러한 문화의 전신인 인력VOCALOID에도 해당되는 문제점이지만 이쪽은 한 문장만 만드는데도 노가다를 거치고 각종 DAW의 구매비용, 학습시간을 요구하여 현재처럼 대량으로 쏟아낼 수도 없고, 퀄리티도 실력에 따라 천차만별에다 최고 수준이라 한들 원본이 아님을 일반인 수준에서 구분이 가능할 정도이므로 실제 커버로 날조하는 것이 불가능했고, 즐기는 인원도 소수 서브컬쳐 팬덤으로 제한되어 있어 크게 불거지지 않았다.

그러나 AI 커버가 상용화된 이후로는 목소리 학습만 성공적으로 완료되면 거의 양산형으로 찍어내는 것이 가능하고,[7] 더이상 만화 캐릭터나 인터넷 밈 수준에 한정하지 않고 여러 분야에서 이목을 끌게 되면서 훨씬 크게 불거지고 있다. 인력 보컬로이드의 평가를 그럭저럭 유지해주던 '노력추' 요소가 사라져 버린 것. 게다가 기시다 후미오 AI 딥페이크 동영상 사건처럼 AI 커버 기술이 범죄 등에 이용되는 경우도 폭증하고 있어, 타인의 목소리를 이용하는 행위에 대한 경각심이 유례없이 커져가는 분위기가 형성되고 있다.


성우들은 목소리가 저작권이라 모두 AI 커버를 좋아하지 않는다.

하지만 유튜브는 테러 같은 심각한 사안이 아닌 이상 수사에 협조하지 않기 때문에 유튜브에는 꾸준히 다양한 AI 커버가 업로드되고 있다.[8] 또한 허락받지않은 인터넷 방송인의 목소리를 무단으로 커버하는 경우도 있기에 문제가 되고 있다. 대부분은 팬심으로 하기도 하고 사전 허락을 받고 하기도 하지만 일체 거부하는 경우도 있다. 성우들도 AI 커버에 반대 목소리를 내고있지만 AI커버 곡들의 소스는 게임에서 나온 음성을 추출해서 사용하기에 저작권이 게임사에 있어 성우들은 AI 작곡가들에게 내 목소리를 AI에 쓰지 말아달라 정도밖에 할수없어 성우 개개인에게 대응책은 사실상 없다고 봐야한다.

결국 미국 테네시 주에서 아티스트의 저작권과 목소리를 AI 생성기에 학습시키는 행위를 위법화하는 이른바 '엘비스법'이 가결, 2024년 7월부터 효력을 가지게 된다.

3. 예시[편집]



임재범 목소리를 입힌 Hype Boy. 조회수는 2023년 10월 18일 기준 137만회.


저스틴 비버 목소리를 입힌 Nothing's Gonna Change My Love for You. 조회수는 2023년 11월 25일 기준 698만회.


조 바이든버락 오바마의 목소리를 입힌 Boy's a liar Pt.2. 조회수는 2023년 8월 13일 기준 224만회.


징징이 목소리를 입힌 My Way. 조회수는 2023년 7월 27일 기준 114만회.


프랭크 시나트라 목소리를 입힌 Five Nights at Freddy's 1 Song.[9] 조회수는 2023년 8월 13일 기준 319만회.[10]


DIO 목소리를 입힌 KICK BACK. 2023년 8월 13일 기준으로 조회수 526만회.


칸예 웨스트Playboi Carti 목소리를 입힌 Somebody That I Used To Know 조회수는 2023년 7월 27일 기준 179만회.


마인크래프트 주민 목소리를 입힌 Billie Jean. 조회수는 2023년 7월 27일 기준 163만회.


Five Nights at Freddy's 시리즈폰가이 목소리를 입힌 Cupid. 조회수는 2023년 8월 13일 기준 132만회.


박명수 목소리를 입힌 밤양갱. 조회수는 2024년 3월 23일 기준 38만회.

파일:크리에이티브 커먼즈 라이선스__CC.png 이 문서의 내용 중 전체 또는 일부는 2023-12-29 13:51:08에 나무위키 AI 커버 문서에서 가져왔습니다.

[1] 다만, 보컬로이드의 경우 처음에만 원래 있던 노래를 커버하는 정도였지만, 얼마 안 있어 오리지널 곡으로 기계에게 창작 노래를 부르게 하는 방향으로 문화가 발전했다.[2] 대표적으로 각종 버츄얼 유튜버; 홀로라이브, 마인크래프트 네모바지 스폰지밥의 등장인물, 호머 심슨, 죠죠의 기묘한 모험DIO블루 아카이브 등이있다. #[3] 한국어 서비스 제공[4] 그 외에도 J-POP이랑 영어팝도 거침없이 나온다.[5] 하지만 저작권 위반으로 삭제되었다. # 여전히 들을 수는 있다.[6] VOCALOID가 대표적.[7] 정말로 본인이 부르는 듯한 느낌을 위해서는 노래마다 여러 가창 데이터를 수집하는 시간이 필요하겠으나 일반적인 AI커버 이용자는 목소리 학습만 끝내고 가창 데이터는 잘 부른 한 곡만 넣어서 완성시키는 경우가 대부분이다.[8] 다만 유니버셜 뮤직 그룹이 저작권을 가지고 있는 커버들은 삭제되고 있다는 제보가 있다. 다른 회사는 별 말이 안 나오나 UMG는 대놓고 AI 커버에 불만을 표시했기 때문에 최대한 유튜브 업로드를 피하는게 좋다.[9] 정확히는 2020년에 Coda가 만든 Big Band 버전을 베이스로 한 것이다.[10] 같은 영상이 하나 더 올라와있는데 조회수는 2023년 8월 13일 기준 288만회.