인공지능(AI)이 창의성을 요구하는 예술 분야로까지 확대되면서 AI로 작사, 작곡을 하는 AI 음악 서비스도 속속 등장하고 있다.

이 분야의 국내 선두 기업인 포자랩스는 딥러닝과 자연어처리 기술을 활용해 작곡 및 작사를 하는 AI 솔루션을 개발해 주목을 받고 있다.

허원길 포자랩스 대표는 "일반인들을 대상으로 AI가 무료로 작사를 해주는 '플로우박스(FlowBox)' 서비스를 제공해왔으며, 최근에는 유튜브 크리에이터를 대상으로 AI가 작곡한 BGM(배경음악)을 서비스하는 '멜리(Mely)'를 운영하고 있다"고 밝혔다.



최근 인기 직업으로 떠오른 유튜브 크레이이터들이 무료로 제공되는 곡을 BGM으로 사용하다 보니 영상을 보다보면 획일적이라는 느낌을 받게 된다.

"유튜브에서 무료 음악이 3000곡 정도 제공되지만 10명 이상 구독자를 보유한 유튜버가 4000만명에 이르고, 하루에 수십만개, 1분에 400시간 분량의 콘텐츠가 올라오다 보니 곡이 겹치는 경우가 많아요. 크리에이터들은 자신만의 곡을 만들고 싶지만 비용이 비싸 부담이 되며, 곡을 만드는 데 오랜 시간이 걸려 엄두를 못 내요." '멜리'의 BGM은 싼 가격으로 누구나 부담 없이 접근할 수 있고, 저작권 문제가 없어진다는 것.

허 대표가 음악 AI 사업을 시작한 것은 연세대학교 컴퓨터과학과 재학 시절부터 인공지능에 관심이 많았고, '인공지능 사업을 해야겠다'는 생각을 쭉 해왔기 때문이다.

"재미없고 어려운 문제도 AI로 하면 쉽고 재미있게 할 수 있다는 생각이 들었어요. 일상 속으로 들어온다는 측면에서 예술에 관심을 가졌고, 제가 음악 밴드에서 작곡도 했기 때문에 음악 분야에서 사업을 시작할 수 있었어요. 친한 학부 동기이자 밴드를 같이 하던 정구봉 최고기술책임자(CTO)도 랩 가사를 쓰던 친구라 '같이 하자'고 뜻을 모았어요."



그는 대학 시절 마지막 학기를 연장하면서 AI 개발에 나섰다. 2017년 한국콘텐츠진흥원이 SM엔터테인먼트와 함께 '음악 인공지능을 켜다'라는 융합 콘텐츠 공모전을 개최해 참여했는데, 포자랩스팀이 높은 점수를 받으면서 '사업성이 있다'는 확신이 들었다. 친구들과 AI 스터디 모임으로 출발했지만, 사업성이 있다고 판단해 다음해 1월 회사를 설립했다. 이후 중소벤처기업부의 '팁스' 지원도 받을 수 있었다.

그는 "제작년 미국 오스틴에서 열린 음악축제 '사우스바이사우스웨스트(SXSW)'에서도 AI 작사·작곡 프로그램 '뮤직쿠스'를 소개해 큰 호응을 얻었다"고 설명했다.

지난해 웹과 모바일에 출시한 AI 작사 프로그램 '플로우박스'는 팝, 록, 영화 주제곡 등 1000곡 정도를 학습시켜 서비스를 제공하고 있다. 플로우박스에 '사랑', '이별' 등 키워드를 입력하면 AI가 만든 문장을 선택할 수 있다. 또 원하는 단어를 지정해 라임을 선택하고 리터치를 클릭하면 대체할 수 있는 문장도 추천해줘 가사가 금세 완성되는 것.

"작사에 어려움이 있는 분들을 대상으로 서비스를 선보였지만 작곡이 안 되는 이상 AI 작사만으로는 수익모델을 찾기 힘들었어요. 현재는 수익을 낼 수 있는 '멜리' 서비스를 주력으로 하고 있어요."

AI를 통해 작곡한 BGM들을 유튜브 채널에 올려 반응도 보고 있는데, 5점 만점에 4.5점 정도로 BGM로 사용하기에, 만족스러운 수준으로 평가되고 있다.



하지만 아직은 AI가 혼자서 BGM을 작곡하지 못하고, 작곡가의 손을 거쳐야 한다. AI 학습을 위한 데이터를 만드는 것부터, 악기 세팅을 하고, 길이를 조정하고, 비트를 넣고 편곡해 최종적으로 음악으로 만드는 작업을 작곡가가 담당한다. 다만 AI가 작곡을 도와주다보니 작곡가에게 들어가는 노동비용을 낮출 수 있다.

"인터넷에 있는 MP3 파일 등은 AI에 학습을 시키지 못해 AI에 적합한 미디 데이터가 필요해요. 작곡가가 직접 학습용 미디 파일을 만드는 작업을 해요. 작곡을 의뢰한 사람이 원하는 장르가 힙합인지 EDM(일렉트로닉 댄스 뮤직)인지, 몇 분짜리인지, 게임 영상에 쓸 건지 여행 영상에 쓸 건지 작곡가에게 알려주면 적합한 음악을 만들게 되요. 곡을 만들면서 데이터가 쌓이면 AI가 더 정확하게 원하는 음악을 만들 수 있어요."

허 대표는 "AI가 음악에서 돋보이는 것은 '고정관념이 없어 자가 표절이 없다는 것"이라고 설명했다. 한 작곡가들의 음악을 보면 생성하는 것이 유사하지만 AI는 새로운 것을 계속 만들어낼 수 있기 때문이다.

"유튜버들에게 아직은 '음악은 무료다'는 인식이 있어서 올해는 '음악을 산다'는 개념을 인식시키는 것이 중요해요. 지금까지 40~50명의 유튜버들이 저희 BGM을 사용했는데, 올해는 몇 천명까지 늘리는 게 목표예요. 대형 멀티채널네트워크(MCM)들과 협력을 추진해 소속 크리에이터들에게 BGM을 공급할 계획이예요."

그렇다면 작곡가와 협업이 아닌 AI가 단독으로 작사·작곡을 한 곡이 보급되는 것은 언제쯤 가능해질까. "아직은 AI가 곡을 만들 수 있지만 퀄리티가 부족해 '무료라면 몰라도 돈을 주고는 사용하지 못하겠다'는 반응이 많아요. 하지만 근시일 내에 AI가 단독으로 BGM을 만들 수 있을 것으로 봅니다."