전혀 다른 두 가지 문제

"AI로 만든 악보"라고 하면 보통 한 가지를 떠올립니다. 오디오 파일을 모델에 넣고 어떤 음이 연주되고 있는지 추측하게 하는 방식이죠. 이건 정말 어려운 작업입니다 — AI는 파형만 보고 음높이, 리듬, 타이밍을 추론해야 하는데, 이는 사람 채보자가 녹음을 듣고 들리는 대로 받아 적는 것과 똑같은 과정입니다. 본질적으로 근사치일 수밖에 없고, 풀 믹스나 왜곡된 악기, 복잡한 화음이 섞이면 난이도가 급격히 올라갑니다.

MIDI를 악보로 바꾸는 건 완전히 다른, 훨씬 쉬운 문제입니다. MIDI 파일에는 모든 이벤트의 정확한 음, 정확한 타이밍, 정확한 벨로시티가 이미 담겨 있습니다 — 추론할 게 없죠. 이걸 표준 악보로 변환하는 건 채보가 아니라 번역에 가깝습니다. 이미 정확한 데이터를 오선지 위에 배치하는 작업일 뿐이니까요. 추측도, "이 정도면 됐다"도, "초안이니 감안해 달라"는 단서도 필요 없습니다.

MIDI를 직접 생성한다면 왜 중요한가

텍스트 프롬프트로, Infinite 엔진으로, 또는 MIDI Lab의 생성기로 만든 AI 생성 MIDI로 작업하고 있다면, 정확한 음표 데이터는 이미 파일 안에 들어 있는 셈입니다. 트랙이 MIDI 형태로 존재하는 순간, 악보 작업은 탐지의 문제가 아니라 형식을 갖추는 작업이 됩니다. 이는 그 MIDI가 AI로 생성됐든, MIDI 컨트롤러로 녹음한 연주든, 피아노 롤 에디터에서 손으로 직접 만든 파트든 마찬가지입니다.

해석의 문제를 따지기 전부터, MIDI를 악보로 바꾸는 쪽이 오디오를 악보로 바꾸는 쪽보다 결과물이 깔끔한 경향이 있는 이유도 여기 있습니다. 결정론적 변환에는 컨디션 난조란 게 없습니다. 단순한 멜로디보다 여러 음이 겹치는 구간에서 더 헤매는 일도 없죠. 정확도의 상한선 자체가 더 높습니다. 어떤 음이 언제 연주됐는지 파악하는, 가장 어려운 부분이 MIDI가 존재하는 순간 이미 해결돼 있으니까요.

악보 소프트웨어가 MIDI 파일에서 실제로 필요로 하는 것

MuseScore, Sibelius, Finale, Dorico 같은 표준 악보 소프트웨어는 MusicXML이라는 포맷을 읽습니다 — 오디오를 악보로 바꾸는 도구들도 과정의 마지막 단계에서 결국 같은 교환 포맷으로 출력합니다. MIDI에서 MusicXML로 넘어가려면, 원본 MIDI 데이터에는 명시적으로 담겨 있지 않지만 악보 소프트웨어가 중요하게 여기는 몇 가지를 해결해야 합니다.

조표(Key signature) — MIDI 파일 자체에는 조성 정보가 태그로 붙어 있지 않습니다. 사용된 음들을 보고 추론해야 하는데, 이는 사람이 파트를 듣고 귀로 조성을 파악하는 것과 같은 과정입니다.
박자표(Time signature)와 박자 그룹화 — 노트온/노트오프 타임스탬프가 마디, 박, 세분박에 어떻게 대응되는지를 정하는 작업.
이명동음 표기 — 특정 음을 샵으로 쓸지 플랫으로 쓸지는 조성과 주변 음들에 따라 결정되지, 단순한 피치 번호만으로는 정해지지 않습니다.
리듬 표기 — 정확한 밀리초 단위 타임스탬프를 사람이 연주한 느낌을 잃지 않으면서 읽기 쉬운 음가(4분음표, 8분음표 셋잇단, 점음표 리듬 등)로 양자화하는 작업.

이 중 어느 것도 무언가를 듣는 과정이 필요하지 않습니다. 구조화된, 규칙 기반의 작업이죠 — 바로 이런 문제가 근사치가 아니라 확실하게 풀 수 있는 유형의 문제입니다.

실제 활용 사례

오디오를 악보로 바꾸는 작업을 가치 있게 만드는 것과 같은 활용 사례들이 여기에도 그대로 적용되며, 대체로 결과는 더 좋습니다.

세션 뮤지션에게 파트를 전달할 때 — 귀로 연주하기보다 악보를 읽는 연주자에게.
생성되거나 프로그래밍된 트랙을 라이브 밴드용으로 편곡할 때 — 모든 연주자에게 실제 파트가 필요한 상황.
교육 — MIDI 연습곡이나 예시를 인쇄된 악보로 바꿀 때.
작곡물을 보관할 때 — 특정 DAW의 전용 프로젝트 포맷에 묶이지 않고, 어떤 악보 소프트웨어에서도 열 수 있는 형태로.

MIDI Lab에서는 어떻게 맞물리는가

MIDI Lab은 이미 세션을 오디오와 MIDI를 첨부파일로 담을 수 있는 하나의 스레드로 다루며, 파일 유형별로 모드를 나누기보다 "가진 걸 넣고, 원하는 걸 설명하라"는 방식으로 작곡 도구를 설계했습니다. 악보 기능은 같은 아이디어의 자연스러운 확장입니다. 음악적 아이디어를 앱 밖으로 꺼내 다른 사람이 읽고 연주할 수 있는 형태로 전달하는 또 하나의 방법인 셈이죠.

AI가 실제로 듣고 추론해야 하는 오디오 쪽 이야기가 궁금하다면 AI 채보가 할 수 있는 것과 할 수 없는 것을 참고하세요.