KAIST와 카네기멜론대가 음악 창작 과정에서 창작자를 실질적으로 돕는 상호작용형 AI 기반 작곡 지원 시스템 ‘어뮤즈(Amuse)’를 공동 개발했다.
KAIST(총장 이광형)는 전기및전자공학부 이성주 교수 연구팀이 개발한 어뮤즈가 4월 26일부터 5월 1일까지 일본 요코하마에서 열린 인간-컴퓨터 상호작용 분야 최고 권위 국제학술대회인 CHI에서 최우수 논문상(Best Paper Award)을 수상했다고 7일 밝혔다.
어뮤즈 시스템은 텍스트, 이미지, 오디오 등 다양한 형식의 창작 영감을 입력하면 이를 화성 구조, 즉 코드 진행으로 변환해 제안하는 기술이다. 예를 들어 사용자가 ‘따뜻한 여름 해변의 기억’ 같은 텍스트나 이미지를 입력하면 어뮤즈는 이에 어울리는 음악적 코드 진행을 자동으로 생성한다.
기존 생성 AI와 달리 어뮤즈는 창작자의 흐름과 주도권을 존중하며, 창작 과정에서 AI의 제안을 유연하게 통합하거나 수정할 수 있는 상호작용 방식을 채택한 것이 특징이다. 연구팀은 대형 언어 모델(LLM) 기반의 코드 생성과 실제 음악 데이터를 활용한 AI 모델을 결합한 하이브리드 방식을 적용해 자연스러운 음악 창작 지원이 가능하게 했다.
연구팀은 실제 뮤지션을 대상으로 한 사용자 평가에서 어뮤즈가 단순한 음악 생성기가 아니라 사람과 AI가 함께 협업할 수 있는 ‘공동 창작 동료(Co-Creative AI)’로서의 가능성을 입증했다.
이번 연구는 KAIST 전기및전자공학부 이성주 교수, 박사과정 김예원 연구원과 카네기멜론대 크리스 도너휴(Chris Donahue) 교수가 공동으로 참여했다.
이성주 교수는 “생성형 AI가 저작권 침해나 창작자의 의도를 무시한 일방적 생성 문제로 우려를 낳고 있다”며 “어뮤즈는 창작자가 실제 필요로 하는 협력적 AI 시스템을 설계해 창작자 중심의 상호작용을 강조한 것이 특징”이라고 말했다. 이어 “향후 음악 창작 도구와 AI 기술 발전에 있어 창작자 친화적 방향성을 제시할 것으로 기대한다”고 밝혔다.
