728x90
반응형

유튜브나 인스타그램 영상 편집을 하다 보면 음악은 그대로 두고 사람 목소리나 노래 보컬만 제거하고 싶은 경우가 있습니다.

반대로 음악은 필요 없고 가수의 목소리만 따로 추출해 음성 편집이나 개인적인 AI 음성 테스트에 사용하고 싶을 때도 있죠.

예전에는 Audacity 같은 프로그램에서 특정 주파수나 중앙 채널을 줄이는 방식으로 보컬을 제거했는데, 이 방법은 보컬과 같은 위치에 있는 드럼이나 악기 소리까지 함께 손상되는 경우가 많았습니다.

요즘은 AI가 음원의 특징을 분석해 Vocals(보컬)과 Instrumental(반주)을 각각 분리하는 Stem Separation 방식을 사용하기 때문에 결과가 훨씬 자연스럽습니다.

🎧 이 글에서 사용하는 프로그램

Ultimate Vocal Remover GUI, 줄여서 UVR 또는 UVR5라고 부르는 무료 오픈소스 AI 음원 분리 프로그램입니다. 인터넷 서버에 음원을 업로드해서 처리하는 방식이 아니라 PC에서 직접 처리할 수 있고, 보컬·반주뿐만 아니라 사용하는 모델에 따라 드럼, 베이스 등 여러 Stem으로 나누는 작업도 가능합니다.

Ultimate Vocal Remover UVR5 공식 홈페이지 보컬 반주 분리 프로그램 화면
Ultimate Vocal Remover 공식 홈페이지에서 안내하는 UVR5 프로그램 화면

노래에서 목소리 제거하면 정말 MR만 남을까?

결론부터 말하면 가능합니다.

UVR은 단순히 음량을 줄이는 프로그램이 아니라 AI Source Separation 모델을 이용해 하나의 음원을 여러 소리로 분리합니다.

원하는 결과 UVR에서 필요한 출력 활용 예
목소리 제거 Instrumental MR·노래방 반주·영상 BGM
목소리만 추출 Vocals 보컬 편집·음성 분석
악기별 분리 Vocals / Drums / Bass / Other 믹싱·리믹스·연주 분석
보컬 리버브 감소 Dry / No Reverb 계열 깔끔한 목소리 확보

다만 AI라고 해서 모든 노래가 완벽하게 분리되는 것은 아닙니다. 보컬에 강한 리버브가 들어가 있거나 코러스와 신스가 겹쳐 있으면 목소리의 흔적이 반주에 약간 남을 수 있습니다.

제 경우라면 처음부터 복잡한 옵션을 건드리기보다는 MDX-Net 계열에서 먼저 Vocals + Instrumental을 분리해보고, 결과가 부족할 때 다른 모델이나 Ensemble Mode를 적용하는 순서로 작업할 것 같습니다.

Ultimate Vocal Remover UVR5 장점

💰

무료 오픈소스

별도의 월 구독료 없이 사용할 수 있습니다.

🎤

보컬·반주 분리

MR과 보컬을 각각 별도 파일로 만들 수 있습니다.

🥁

여러 Stem 분리

Demucs 계열을 이용하면 악기를 세분화할 수 있습니다.

🖥️

로컬 PC 처리

대용량 음원을 웹사이트에 매번 업로드하지 않아도 됩니다.

UVR5 설치 전 PC 사양 확인

Ultimate Vocal Remover는 AI 연산을 사용하기 때문에 일반적인 음악 재생 프로그램보다 PC 성능의 영향을 많이 받습니다.

⚠ UVR 공식 안내 기준

  • 64비트 운영체제 사용
  • Windows 설치본은 Windows 10 이상을 대상으로 제공
  • NVIDIA GPU 변환 최소 기준은 GTX 1060 6GB
  • VRAM 8GB 이상 NVIDIA GPU 권장
  • 변환 속도는 CPU·GPU·모델·Segment 설정에 따라 크게 달라짐
  • AMD Radeon·Intel Arc는 DirectML 지원 버전을 검토

CPU만으로 처리되는 환경도 있지만 AI 모델 특성상 시간이 상당히 오래 걸릴 수 있습니다. 가능하다면 GPU 가속을 사용하는 편이 좋습니다.

특히 예전 글에서 GTX 1050 Ti에서도 실행됐다는 사용 사례를 볼 수 있지만, 이를 공식 최소 사양이라고 생각하면 안 됩니다. 현재 공식 GitHub에서 안내하는 GPU 변환 최소 기준은 GTX 1060 6GB입니다.

Ultimate Vocal Remover 무료 다운로드

UVR은 공식 홈페이지에서 GitHub 다운로드 페이지로 연결됩니다. 검색 광고에 나오는 비슷한 이름의 프로그램보다는 공식 홈페이지 또는 공식 GitHub를 이용하는 것이 좋습니다.

공식 배포본에는 UVR 인터페이스뿐만 아니라 Python과 PyTorch 등 실행에 필요한 구성요소가 함께 포함되어 있어 일반 사용자는 수동으로 Python 환경을 구성할 필요가 없습니다.

Windows 사용자는 가능하면 공식 안내에 따라 C: 드라이브에 설치하는 것을 권장합니다. 공식 문서에서도 보조 드라이브 설치 시 불안정할 수 있다고 안내하고 있습니다.

노래 목소리 제거 및 MR 추출 방법

STEP 1. UVR5 설치 후 실행

설치가 끝나면 Ultimate Vocal Remover를 실행합니다.

처음 보면 옵션이 많아서 복잡해 보이지만 MR을 만들 목적이라면 실제로 자주 만지는 부분은 Select Input, Select Output, Process Method, Model, GPU Conversion 정도입니다.

Ultimate Vocal Remover UVR5 설치 완료 후 실행 화면
UVR5 설치 후 실행 화면

STEP 2. Select Input에서 음악파일 불러오기

먼저 Select Input에서 보컬을 제거할 MP3·WAV 등의 음악파일을 선택합니다.

그 다음 Select Output에서는 분리된 파일을 저장할 폴더를 지정합니다.

파일 경로나 입력 파일 인식에 문제가 있다면 Verify Inputs 기능을 이용해 입력 파일이 정상적으로 읽히는지 확인해보는 것이 좋습니다.

UVR5 Select Inputs Verify Inputs 음악파일 확인 설정
Select Input에서 음악파일을 불러온 뒤 입력 상태를 확인합니다.

STEP 3. Process Method 선택

UVR에서는 여러 AI 분리 방식을 선택할 수 있습니다.

방식 특징 추천 용도
MDX-Net 보컬·반주 분리에 많이 사용하는 방식 MR 만들기, 보컬 추출
Demucs 여러 악기 Stem으로 분리 가능 Vocals·Drums·Bass·Other 분리
VR Architecture 특정 보컬·리버브 계열 모델 활용 추가 보정
Ensemble Mode 여러 모델의 결과를 조합 한 모델 결과가 만족스럽지 않을 때

처음 사용하는 경우라면 MDX-Net부터 시작하는 것이 이해하기 쉽습니다.

STEP 4. MDX-Net 기본 설정

보컬 제거 목적이라면 우선 아래처럼 설정해봅니다.

Process Method : MDX-Net

Segment Size : 처음에는 Default

Overlap : 처음에는 Default

GPU Conversion : 지원 GPU 사용 시 체크

출력 형식 : 편집용 WAV 권장 / 간편 저장은 MP3

Ultimate Vocal Remover MDX-Net Segment Size Overlap 기본 설정
처음에는 Segment Size와 Overlap을 기본값으로 두고 테스트하는 편이 편합니다.

STEP 5. Vocals Only와 Instrumental Only 차이

여기서 가장 헷갈리는 부분이 Vocals Only와 Instrumental Only입니다.

🎤 Vocals Only = 사람 목소리 위주 파일만 저장

🎹 Instrumental Only = 목소리를 제거한 반주·MR 파일만 저장

즉 노래에서 목소리를 없애고 MR만 필요하다면 Instrumental 출력을 사용하면 됩니다.

보컬과 반주를 둘 다 확인하고 싶다면 모델과 모드에 따라 두 개의 출력이 생성되도록 설정할 수 있습니다. 버전에 따라 메뉴 이름과 체크 방식이 조금 달라질 수 있으므로 출력 파일명을 함께 확인하세요.

UVR5 GPU Conversion Vocals Only Instrumental Only 출력 설정
GPU Conversion과 보컬·반주 출력 옵션

UVR 모델이 없을 때 다운로드 방법

UVR을 처음 설치하면 모든 AI 모델이 미리 설치되어 있는 것은 아닙니다.

프로그램의 Settings / Download Center에서 필요한 모델을 추가로 내려받을 수 있습니다. 공식 릴리스에서도 추가 모델과 패치를 프로그램에서 받을 수 있다고 안내하고 있습니다.

Ultimate Vocal Remover Download Center MDX-Net AI 모델 다운로드 방법
Download Center에서 필요한 MDX-Net 계열 모델을 추가합니다.

어떤 UVR 모델을 선택해야 할까?

UVR의 어려운 점은 프로그램 사용법보다 모델 종류가 너무 많다는 점입니다.

처음부터 모든 모델을 받을 필요는 없습니다. 목적에 맞는 모델 몇 개만 테스트하는 편이 효율적입니다.

모델·방식 사용 목적 특징
Kim Vocal 1 / 2 보컬·반주 분리 기존 UVR 사용자에게 많이 알려진 보컬 계열 모델
UVR-MDX-NET Inst 계열 반주 추출 Instrumental 결과 비교용으로 사용하기 좋음
UVR-MDX-NET Karaoke 2 보컬·코러스 계열 분리 테스트 곡에 따라 코러스 처리 결과가 달라질 수 있음
Reverb HQ 리버브 감소 보컬에 남아 있는 공간감·잔향을 추가 분리할 때 활용
Demucs v4 다중 Stem 분리 Vocals·Drums·Bass·Other 등 세분화 작업에 유리
Ensemble Mode 최종 결과 개선 여러 모델 결과를 조합하지만 처리시간이 증가

제가 MR 추출을 한다면

처음에는 MDX-Net 계열 한 가지로 빠르게 분리해보고, 보컬 잔상이 많이 남는 노래만 다른 모델 또는 Ensemble Mode로 다시 처리할 것 같습니다. 곡마다 믹싱 방식이 다르기 때문에 특정 모델 하나가 모든 음악에서 가장 좋다고 보기는 어렵습니다.

보컬에 리버브가 많이 남는 경우

보컬 파일을 추출했는데 목소리 뒤로 '웅~' 하는 공간감이나 잔향이 많이 붙어 있으면 일반적인 Vocals / Instrumental 분리만으로는 깔끔하지 않을 수 있습니다.

이럴 때는 먼저 보컬을 분리한 뒤 분리된 Vocal 파일을 다시 Reverb 계열 모델에 입력하는 방식으로 한 번 더 처리할 수 있습니다.

다만 리버브 역시 원래 보컬 신호와 섞여 있기 때문에 너무 강하게 제거하면 목소리가 금속성으로 변하거나 일부 발음이 손상될 수 있습니다.

작업 완료 후 로그 확인

설정이 끝났다면 Start Processing을 눌러 음원 분리를 시작합니다.

처리가 정상적으로 끝나면 프로그램 아래쪽 로그에서 모델 로딩과 음원 변환 과정 및 완료 여부를 확인할 수 있습니다.

UVR5 Start Processing 보컬 반주 음원 분리 완료 로그
UVR 음원 분리 작업 완료 로그

WAV FLAC MP3 어떤 형식으로 저장할까?

UVR에서 결과물을 저장할 때 음질을 중요하게 생각한다면 가능하면 WAV 또는 FLAC을 사용하는 것을 추천합니다.

포맷 특징 추천 용도
WAV 무압축·파일 용량 큼 추가 편집·AI 처리
FLAC 무손실 압축 음질 유지 + 용량 절감
MP3 손실 압축·용량 작음 간단한 감상·공유

특히 UVR → 리버브 제거 → 다른 편집 프로그램처럼 여러 번 후처리할 예정이라면 중간 파일을 MP3로 계속 압축하기보다는 WAV로 유지하는 편이 좋습니다.

UVR 오류가 발생할 때 확인할 설정

CUDA Out of Memory · 메모리 부족

고해상도 모델이나 큰 Segment 값을 사용하면 GPU VRAM이 부족해질 수 있습니다.

이 경우에는 Segment 또는 Window Size를 낮춰서 다시 실행해보세요. UVR 공식 문서에서도 메모리 할당 오류가 발생할 경우 이 값을 줄이는 방법을 안내하고 있습니다.

GPU Conversion을 체크했는데 CPU만 사용되는 경우

  • NVIDIA 그래픽 드라이버 업데이트
  • GPU Conversion 체크 여부 확인
  • 사용 중인 UVR 버전 및 패치 확인
  • 노트북이라면 UVR이 외장 GPU로 실행되는지 Windows 그래픽 설정 확인
  • AMD·Intel GPU라면 DirectML 지원 버전 검토

MP3 파일에서 오류가 나는 경우

UVR은 비-WAV 오디오 처리에 FFmpeg를 사용합니다.

수동 설치 버전을 사용했거나 프로그램 구성파일이 손상된 경우 MP3 등의 입력에서 오류가 발생할 수 있으므로 공식 설치본을 다시 설치하거나 FFmpeg 구성을 확인해보는 것이 좋습니다.

모델 선택 목록이 비어 있는 경우

Settings의 모델 다운로드 메뉴로 이동해 MDX-Net 또는 필요한 모델을 먼저 내려받습니다.

모델 다운로드 후에도 목록에 나오지 않는다면 UVR을 재실행해보세요.

UVR과 Audacity AI 음원 분리 차이

반드시 UVR만 사용할 필요는 없습니다. Audacity에도 AI 기반 음원 분리 기능을 추가해 사용할 수 있습니다.

이미 Audacity로 오디오 편집을 많이 한다면 한 프로그램에서 작업할 수 있다는 장점이 있고, 여러 AI 모델을 바꿔가며 결과를 비교하고 싶다면 UVR 쪽이 편한 편입니다.

유튜브·인스타그램 영상 음악을 사용할 때 주의

UVR을 이용해 목소리를 제거했다고 해서 원래 음악의 저작권이나 이용 조건까지 사라지는 것은 아닙니다.

직접 만든 음악이나 이용 허가를 받은 음원, 저작권이 만료됐거나 사용 가능한 라이선스가 명확한 음원을 대상으로 작업하는 것이 안전합니다.

특히 유튜브나 인스타그램에서 발견한 다른 사람의 음악을 다운로드해 보컬만 지운 뒤 다시 영상 BGM이나 상업 콘텐츠로 사용하는 것은 원곡의 이용 조건을 별도로 확인해야 합니다.

보컬 제거 결과가 깨끗하지 않은 이유

같은 UVR 설정을 사용해도 곡마다 결과는 크게 다릅니다.

  • 보컬에 리버브와 딜레이가 강하게 걸린 곡
  • 기타·신스와 사람 목소리 주파수가 많이 겹치는 곡
  • 메인 보컬과 코러스가 좌우로 넓게 배치된 곡
  • 이미 MP3 등으로 강하게 압축된 저음질 음원
  • 라이브 공연처럼 관객 소리와 보컬이 섞인 음원

따라서 첫 결과가 마음에 들지 않는다고 UVR 자체가 성능이 떨어진다고 판단하기보다는 다른 모델을 한두 개 비교해보는 것이 중요합니다.

다만 Segment나 Overlap 값을 무조건 높인다고 음질이 비례해서 좋아지는 것도 아닙니다. 처리시간과 메모리 사용량부터 증가할 수 있으므로 우선 Default로 테스트한 뒤 필요한 경우에만 조정하는 것이 좋습니다.

Ultimate Vocal Remover 사용법 요약

  1. Ultimate Vocal Remover 공식 홈페이지에서 설치파일 다운로드
  2. UVR 실행 후 Select Input에서 음악파일 선택
  3. Select Output에서 저장위치 지정
  4. 처음에는 MDX-Net 방식 선택
  5. 필요한 모델이 없다면 Download Center에서 추가
  6. 지원 GPU가 있다면 GPU Conversion 사용
  7. 목소리만 필요하면 Vocals
  8. 목소리를 제거한 MR이 필요하면 Instrumental
  9. Start Processing으로 음원 분리
  10. 결과가 부족하면 다른 모델이나 Ensemble Mode 비교

자주 묻는 질문 FAQ

노래에서 목소리만 완전히 제거할 수 있나요?

대부분의 음원은 상당 부분 분리가 가능하지만 100% 동일한 품질을 보장할 수는 없습니다. 리버브, 코러스, 신스 등이 보컬과 겹치면 흔적이 남을 수 있습니다.

MR만 만들려면 어떤 파일을 저장해야 하나요?

Instrumental 출력 파일을 저장하면 됩니다. Vocals는 목소리 쪽 결과입니다.

그래픽카드가 없으면 UVR을 사용할 수 없나요?

GPU 가속을 사용하지 않는 환경에서도 작업 자체는 가능할 수 있지만 모델에 따라 처리시간이 크게 늘어날 수 있습니다. AI 음원 분리를 자주 한다면 GPU를 사용하는 편이 효율적입니다.

GTX 1050 Ti에서도 실행되나요?

일부 환경에서는 실행 사례가 있을 수 있지만 공식 GPU 변환 최소 기준으로 보기는 어렵습니다. UVR 공식 GitHub는 NVIDIA GTX 1060 6GB를 최소 기준으로 안내하며 8GB 이상의 VRAM을 권장하고 있습니다.

NVIDIA가 아니라 AMD 그래픽카드인데 가능한가요?

공식 배포 페이지에서 AMD Radeon과 Intel Arc 사용자를 위한 DirectML 지원 버전을 별도로 안내하고 있으므로 해당 버전을 확인하는 것이 좋습니다.

보컬과 드럼, 베이스를 각각 분리할 수 있나요?

가능합니다. Demucs 계열 4-Stem 모델을 이용하면 Vocals, Drums, Bass, Other와 같이 여러 Stem으로 나눠볼 수 있습니다.

MP3보다 WAV로 작업하는 게 좋은가요?

추가 편집이나 여러 단계의 AI 처리를 할 예정이라면 WAV 또는 FLAC처럼 음질 손실을 최소화할 수 있는 형식을 사용하는 편이 좋습니다. 최종 감상이나 간단한 공유 목적이라면 MP3가 편합니다.

UVR은 인터넷 연결이 계속 필요한가요?

프로그램과 필요한 AI 모델이 준비된 뒤 실제 음원 분리는 PC에서 처리됩니다. 다만 최초 프로그램이나 추가 모델 다운로드, 업데이트를 할 때는 인터넷 연결이 필요합니다.

잡가이버 관련 오디오 편집 글

공식 참고자료

저작권 참고
음원에서 보컬을 제거하거나 Stem을 분리하는 기술과 해당 음원을 사용할 수 있는 권리는 별개의 문제입니다. 직접 제작했거나 사용 권한이 있는 음원을 대상으로 활용하고, 유튜브·인스타그램·상업 영상 등에 재사용할 경우에는 원본 콘텐츠와 음악의 라이선스를 확인하세요.

반응형
그리드형