ElevenLabs 보이스 클론 사용법: 한국어 AI 목소리 복제 전 꼭 볼 기준

안녕하세요. 여러분의 AI/AX 파트너
자본주의생존법 대표 최gpt(최성훈)입니다.

ElevenLabs 보이스 클론을 직접 써본 이유

이번에는 제 목소리를
AI로 직접 복제해봤습니다.

유튜브나 팟캐스트를 하다 보면
매번 직접 녹음하는 게 은근히 번거롭잖아요.

목 상태도 매일 다르고,
녹음 시간도 따로 잡아야 하고요.

그래서 ElevenLabs의
Professional Voice Clone 기능을
한국어 기준으로 직접 써봤습니다.

---

결과는 꽤 그럴듯했습니다

처음에는 AI 목소리 복제라고 해서
솔직히 반신반의했습니다.

그런데 직접 해보니
생각보다 훨씬 제 목소리처럼 들렸습니다.

다만 아무 파일이나 올린다고
바로 좋은 결과가 나오는 건 아니었습니다.
조건이 꽤 중요했습니다.

ElevenLabs 목소리 복제 방식 3가지

1) Voice Design
텍스트 프롬프트로 완전히 새로운 목소리를
만드는 방식입니다.

예를 들어 “젊고 따뜻한 한국 남성 목소리”처럼
입력해서 새 음성을 만드는 느낌입니다.

2) Instant Voice Clone
짧은 오디오만 있어도 빠르게 복제할 수 있습니다.
속도는 빠르지만 정밀도는 낮은 편입니다.

3) Professional Voice Clone
제가 이번에 쓴 방식입니다.
최소 30분 이상의 깨끗한 오디오가 필요합니다.

1시간 정도면 Better,
2시간 정도면 Best 등급에 가깝고
훈련에는 보통 2~6시간 정도 걸립니다.

조금 킹받는 포인트도 있습니다

Professional Voice Clone은
기본적으로 슬롯 제한이 있습니다.

무료 플랜이나 기본 플랜에서는
슬롯이 부족해서 막힐 수 있고,
필요하면 유료 플랜 확인이 필요합니다.

저도 진행하면서
No slots available 같은 메시지를 보고
살짝 멈칫했습니다.

Professional Voice Clone 실제 진행 순서

STEP 1.
ElevenLabs 접속 후
왼쪽 메뉴에서 Voices로 들어갑니다.

Explore 탭에서 오른쪽 상단
+ Create Voice 버튼을 누르면 시작됩니다.

STEP 2.
Create Voice 팝업에서
Professional Voice Clone을 선택합니다.

Voice Design, Instant Voice Clone,
Professional Voice Clone, Voice Remixing 중에서
원하는 방식을 고르는 단계입니다.

오디오 샘플과 한국어 설정 체크

오른쪽에는 샘플 길이에 따라
Good, Better, Best처럼 등급이 표시됩니다.

저는 처음에 짧은 파일만 올렸다가
추가 시간이 더 필요하다는 안내를 받았습니다.

결국 총 7개 파일,
약 1시간 19분 분량의 음성을 올렸습니다.

파일은 m4a로 올렸고,
배경 잡음과 에코가 없는 음성일수록 좋습니다.

한국어라면 Language 설정을 꼭 확인하세요

Voice name은 원하는 이름으로 정하고,
Language는 Korean으로 맞춰야 합니다.

언어 설정이 틀어지면
한국어 발음이 어색해질 수 있습니다.

이런 작은 설정이 결과물 퀄리티에
생각보다 크게 영향을 줍니다.

본인 목소리 인증 단계가 있습니다

다음 단계로 넘어가면
Verify your voice 화면이 나옵니다.

화면에 표시된 문장을 직접 읽고 녹음해서
본인의 목소리로 만드는 게 맞는지 확인하는 절차입니다.

Skip 버튼도 보이긴 하지만,
저는 그냥 인증까지 진행하는 쪽을 추천드립니다.

훈련 완료까지는 기다림이 필요합니다

업로드와 인증이 끝나면
Professional Voice Clone이 준비 중이라는
안내 화면이 나옵니다.

저는 대략 3~4시간 정도 기다렸고,
완료 후 My Voices에 클론 목소리가 등록됐습니다.

훈련이 끝나기 전에는
Text to Speech에서 바로 사용할 수 없습니다.

실제로 만든 제 AI 목소리입니다

아래는 ElevenLabs 커스터마이징으로 만든
제 AI 목소리 샘플입니다.

처음에는 전문 장비가 필요할 줄 알았는데,
생각보다 스마트폰 녹음 파일만으로도
진입장벽이 낮았습니다.

준비물은 이 정도면 됩니다

1) ElevenLabs 계정
무료 가입은 가능하지만 기능 제한은 확인해야 합니다.

2) Professional Voice Clone 슬롯
유료 플랜이 필요할 수 있습니다.

3) 내 목소리 오디오 30분 이상
가능하면 조용한 환경에서 길게 녹음하세요.

4) Language Korean 설정
한국어 발음을 위해 꼭 확인해야 합니다.

5) 기다릴 시간
훈련에는 보통 2~6시간 정도 걸립니다.

크리에이터에게 추천하는 활용 기준

콘텐츠 크리에이터, 유튜버, 팟캐스터라면
한 번쯤 테스트해볼 만한 도구입니다.

한 번 만들어두면 텍스트만 입력해도
내 목소리 느낌으로 음성이 나오니까
매번 녹음하지 않아도 되는 게 정말 편합니다.

물론 완전히 사람 녹음과 똑같다고
말하긴 어렵지만,
초안 제작이나 반복 콘텐츠에는 충분히 매력적입니다.

---

위 내용이 궁금하시거나
AI 목소리 복제가 막히는 부분이 있다면
언제든지 편하게 카카오 채널
‘자본주의생존법’ 을 추가하시고 연락 주세요.

지금까지 여러분의 AI/AX 파트너
자본주의생존법 대표 최gpt(최성훈)이었습니다 🙂

그리고 혼자 AI 공부하기 싫으시면
매달 AI레벨업 프로그램을 운영하니

아래 AI공부방 함께하기에서 확인하고
지원하세요.