스템이란 무엇이고, 완성된 곡을 정말 되풀 수 있나
스튜디오에서 스템은 믹스보다 먼저 있습니다. 이미 섞인 파일에서 그것을 꺼내는 것은 완전히 다른 일이고, 실제로 손에 쥐게 되는 것이 무엇인지 알아 둘 값어치가 있습니다.
수정
원래 뜻의 스템
스템은 나머지와 분리해 둔 갈래별 묶음입니다. 드럼은 드럼끼리, 보컬은 보컬끼리 한 파일에 담깁니다. 마스터링 엔지니어나 리믹서, 공연 음향 담당자가 나머지를 건드리지 않고 한 갈래만 손볼 수 있게 하려고 존재합니다.
진짜 스템은 그저 누군가 남겨 둔 파일입니다. 그것을 갖고 있다면 추정할 것이 없습니다 — 애초에 합쳐진 적이 없기 때문입니다.
분리는 그것과 다른 일입니다
믹스가 끝나면 모든 갈래가 두 채널의 소리로 더해집니다. 그 덧셈은 되돌릴 수 없습니다. 개별 갈래는 파일 어디에도 더는 존재하지 않습니다.
그래서 분리 모델은 그것을 되찾는 것이 아닙니다. 추정합니다 — 이 섞인 소리가 주어졌을 때 각 갈래는 혼자서 어떻게 들렸을까. 음악을 충분히 많이 들어 그 추측을 아주 잘하지만, 추측인 것은 변하지 않습니다.
결과에 특유의 성격이 생기는 이유가 그것입니다. 갈래마다 따로 들으면 대개 그럴듯하고, 다른 갈래의 흔적이 옅게 남아 있으며, 소리가 빽빽한 대목에서는 물속 같고 번진 느낌이 납니다. 고쳐야 할 결함이 아니라 추정의 소리입니다.
무엇이 나오나
네 갈래입니다. 보컬·드럼·베이스, 그리고 나머지 전부. 마지막 것은 모델의 실수가 아니라 기타·건반·현악·신스처럼 앞의 셋이 아닌 모든 것을 담는 칸입니다. 피아노가 중심인 곡이라면 피아노는 '나머지' 에 들어 있습니다.
스템은 전부 원곡과 같은 길이이고 시간이 정확히 맞습니다. 편집 프로그램에 그대로 얹으면 어긋나지 않습니다.
얼마나 잘 되는지 숫자로 확인했습니다
"돌았고 파일 네 개가 나왔다" 는 아무것도 증명하지 않습니다. 그럴듯한 죽 네 덩어리도 똑같아 보일 테니까요. 그래서 재료를 정확히 아는 소리를 만들어 넣었습니다 — 말소리, 베이스 자리의 60Hz 사인파, 드럼 자리의 짧은 잡음 박. 그러고는 나온 스템 각각을 아는 재료 각각과 상관계수로 비교했습니다.
각 스템은 제 재료와 거의 정확히 1.0, 나머지와는 거의 정확히 0으로 나왔습니다. 드럼 스템에는 잡음 박이 들어 있고 사실상 그것뿐이며, 베이스 스템에는 사인파가 들어 있고 사실상 그것뿐이었습니다.
이 시험은 분리가 실제로 일어나고 배선이 맞다는 것을 증명합니다. 어떤 곡이든 깨끗하게 갈라진다는 것을 증명하지는 않습니다 — 실제 음악은 합성 소리보다 훨씬 어렵고, 겹이 두껍거나 마스터링에서 세게 눌린 곡은 더 어렵습니다.
느립니다. 그것은 방법에 관한 사실입니다
분리는 파형 전체를 신경망에 통과시킵니다. 7.8초짜리 소리를 처리하는 데 15.1초가 걸리는 것을 실측했습니다 — 실시간의 약 두 배입니다. 그러니 한 곡을 통째로 넣으면 6분이 넘습니다.
그래서 도구는 30초 미리듣기로 돌고, 브라우저 탭에서 6분짜리 작업을 몰래 시작해 놓고 사용자가 남아 있기를 바라는 대신 누르기 전에 그 숫자를 말합니다.
분리했다고 쓸 권리가 생기지는 않습니다
상업 음반에서 보컬을 꺼냈다고 그 녹음의 권리자가 바뀌지 않습니다. 반주에 맞춰 연습하거나 편곡을 공부하거나 혼자 쓸 것을 만드는 것과, 결과물을 공개하거나 배포하는 것은 다른 이야기이고 분리는 거기에 아무 영향을 주지 않습니다.
여기 올린 것은 기기를 떠나지 않습니다 — 다만 그것은 개인정보에 관한 말이지 라이선스에 관한 말이 아닙니다.
업로드 없이 지금 해 보기
곡에서 반주(MR)를 만들 수 있나요?
됩니다. 보컬을 뺀 나머지 스템을 다시 합치면 됩니다. 소리가 빽빽한 대목에서는 보컬의 흔적이 옅게 남을 수 있습니다. 모델이 추정하는 것이라, 목소리가 큰 악기와 겹치는 자리는 완전히 갈라내지 못합니다.
스템이 원곡만큼 좋은 소리인가요?
다시 합치면 원곡에 아주 가깝습니다. 헤드폰으로 따로 들으면 흔적이 들립니다 — 주로 살짝 물속 같은 느낌과 다른 갈래의 잔향입니다. 각 스템은 뽑아낸 것이 아니라 다시 지어낸 것입니다.
왜 30초만 되나요?
브라우저에서 실시간의 약 두 배 속도로 처리되기 때문입니다. 한 곡이면 탭을 열어 둔 채 6분이 넘습니다. 미리듣기로 내 곡에서 분리가 쓸 만한지 먼저 듣고 판단하시라는 뜻입니다.
읽어 둘 만한 글
- HEIC 파일이란 무엇이고, 왜 안 열릴까
- PNG·JPG·WebP·AVIF — 무엇을 골라야 할까
- PDF 용량이 큰 이유 — 그리고 실제로 줄이는 것
- MOV와 MP4 — 실제로 무엇이 다른가
- 배경 제거는 실제로 어떻게 동작하나 — 그리고 언제 실패하나
- AI 업스케일은 없던 세부를 되살릴까
- SRT와 VTT — 어느 자막 파일이 필요한가
- PDF가 안 열립니다 — 왜일까요
- CSV와 엑셀 — 실제로 무엇이 다른가
- AI 요약을 믿어도 될까
- WAV와 MP3 — 실제로 어느 쪽이 필요한가
- 코덱이란 무엇이고, MP4와는 어떻게 다른가
- 제 영상은 왜 옆으로 누워 있을까