AI로 나를 복제하는 방법: 텍스트, 음성, 영상 옵션

1나를 복제하는 세 가지 방법

‘나의 AI 클론’이 복제할 수 있는 것은 세 가지 중 하나예요. 글 쓰는 방식, 목소리, 또는 겉모습이에요. 두세 가지를 결합한 서비스도 있지만, 각 부분은 서로 다른 자료로 따로 만들어져요.

나처럼 생각하고, 기억하고, 결정하는 완전한 ‘디지털 나’는 존재하지 않아요. 더 거창한 약속들이 궁금하다면 AI 클론이란 무엇인지 다룬 글에서 그 한계를 있는 그대로 설명하고 있어요.

2시작하기 전에: 목적, 동의, 보안

• 클론의 용도를 정하세요. 또 다른 나와 대화하기, 가족에게 무언가를 남기기, 마케팅 영상 만들기는 각각 다른 방법이 필요해요.
• 나 자신만, 또는 분명히 동의한 사람만 복제하세요. 대부분의 음성 및 영상 서비스는 동의 여부를 확인하도록 요청하며, 실제로 검증하는 곳도 여럿 있어요.
• 내 자료가 어디로 가는지 읽어 보세요. 녹음이나 채팅이 서버에 저장되는지, 얼마나 오래 보관되는지, 모델 학습에 쓰이는지 확인하세요.
• 어떻게 표시할지 미리 정하세요. 클론이 만든 모든 결과물은 나인 척하지 말고 AI가 만든 것으로 표시해야 해요.

3방법 1: 메시지로 만드는 텍스트 클론

텍스트 클론은 성격을 가장 많이 담아내요. 수년간 주고받은 메시지에는 내 어휘와 농담, 그리고 내 삶 속 사람들이 담겨 있기 때문이에요. 만드는 방법은 두 가지예요.

빠른 방법은 내가 쓴 글 일부를 범용 챗봇에 붙여 넣고 나를 흉내 내 달라고 요청하는 거예요. 몇 번의 답장 동안은 말투를 잡아낼 수 있지만, 내 전체 기록을 보지는 못하고, 사적인 채팅을 클라우드 서비스에 붙여 넣는 데에는 그 나름의 대가가 따라요. 시도하기 전에 채팅을 AI에 업로드해도 안전한지 읽어 보세요.

꼼꼼한 방법은 채팅 내보내기 파일을 가져와 인덱싱하고 내 스타일을 학습하는 도구를 쓰는 거예요. 주요 단계는 다음과 같아요.

1. 내 채팅 내보내기WhatsApp, Messenger, Instagram, Discord 등에서 내가 글을 많이 쓴 대화를 다운로드하세요.
2. 메모 추가하기채팅에는 나오지 않는 사실을 짧은 메모로 적어 두세요. 자란 곳, 소중한 사람들, 자주 하는 이야기 같은 것들이요.
3. 가져오기와 발신자 확인내보낸 파일을 도구에 불러오고, 어느 발신자가 나인지 알려 주세요.
4. 솔직하게 테스트하기실제로 받았던 메시지에 답하게 한 다음, 그 답장을 내가 실제로 썼던 답장과 비교해 보세요.

전체 안내서인 나만의 AI 클론 만드는 방법에서 각 단계를 자세히 다뤄요.

4방법 2: 음성 클론

음성 클론은 내 목소리에 맞춰 조정한 텍스트 음성 변환(TTS) 모델이에요. 내가 글을 입력하면 내 목소리처럼 들리는 음성으로 읽어 줘요. 많은 서비스가 짧은 샘플로 빠르게 만드는 버전과, 더 긴 녹음으로 품질을 높인 버전을 함께 제공해요.

잘 알려진 예로 ElevenLabs가 있어요. ElevenLabs 문서에 따르면 인스턴트 음성 복제(Instant Voice Cloning)에는 깨끗한 오디오 약 1~2분을 권장해요. 프로페셔널 음성 복제(Professional Voice Cloning)에는 최소 30분, 이상적으로는 2~3시간 분량을 권장하며, 그다음 짧은 문장을 읽어 서비스가 내 목소리가 맞는지 확인하는 음성 인증 단계를 거쳐요. Apple은 다른 방식을 택했어요. 최신 iPhone, iPad, Mac 시스템에 내장된 개인용 음성(Personal Voice) 기능은 일련의 문장을 읽게 한 뒤 기기 안에서 음성을 처리하며, 개인적이고 비상업적인 용도로 쓰도록 되어 있어요.

1. 조용한 방 고르기커튼, 러그, 소파 같은 부드러운 소재는 울림을 줄여 줘요. 선풍기, 음악, 알림은 꺼 두세요.
2. 괜찮은 마이크 사용하기마이크와 일정한 거리를 유지하고, 클론이 사용했으면 하는 말투로 자연스럽게 말하세요.
3. 녹음하고 업로드하기서비스가 안내하는 길이와 형식을 따르고, 내 목소리가 맞다는 것을 확인하세요.
4. 인증 완료하기많은 서비스가 샘플과 대조할 수 있도록 실시간으로 문구를 읽어 달라고 요청해요.
5. 결과물 보호하기공유할 분명한 이유가 없다면 음성은 비공개로 두세요.

음성 클론만으로는 개성이 없어요. 주어진 텍스트를 그대로 읽을 뿐이에요. 음성 클론과 텍스트 클론 비교 글에서 각각이 무엇을 보존할 수 있는지 설명해요.

5방법 3: 영상 아바타

영상 아바타는 화면에서 대본을 전달하는, 움직이는 나의 모습이에요. 복제한 목소리와 함께 쓰이는 경우가 많아요. 널리 쓰이는 두 서비스를 보면 일반적인 과정을 알 수 있어요. HeyGen에 따르면 맞춤형 아바타는 내 모습을 담은 짧은 클립(약 15초라고 홍보해요)과, 카메라 앞에서 신원을 확인하는 동의 코드로 시작해요. Synthesia의 개인 아바타는 웹캠이나 휴대전화로 촬영할 수 있고, 동의 영상 녹화가 필수이며, 내 목소리 클론도 포함돼요.

1. 조명과 구도 맞추기고른 조명 아래에서 카메라를 정면으로 바라보고, 배경은 단순하게, 얼굴은 또렷하게 보이도록 하세요.
2. 영상 촬영하기서비스가 요청하는 길이만큼 자연스럽게 말하고 몸짓을 하세요.
3. 동의 단계 녹화하기영상에 나오는 본인이 직접 카메라 앞에서 동의 문구나 코드를 읽으세요.
4. 대본 작성 후 생성하기아바타가 말할 내용을 입력하고, 결과를 검토해 어색하게 보이거나 들리는 부분을 고치세요.

영상 아바타는 발표용으로 만들어져요. 대본 외에는 나에 대해 아무것도 알지 못해요.

6보안: 음성 사기와 딥페이크

목소리와 얼굴은 신원 확인에 쓰이기 때문에, 이런 클론은 범죄자들에게 매력적인 표적이 돼요. 미국 연방거래위원회(FTC)는 사기범이 ‘가족 응급 상황’ 전화에서 가족의 목소리를 흉내 내는 데 짧은 음성 클립 하나면 충분할 수 있으며, 그 클립은 온라인에 올라온 영상에서 가져온 것일 수도 있다고 경고해요.

• 가까운 가족과 비밀 암호를 정해 두고, 급하게 돈을 요구하는 연락을 받으면 행동하기 전에 이미 알고 있는 번호로 다시 전화해 확인하세요.
• 필요하지 않다면 길고 깨끗한 내 목소리 녹음을 공개적으로 올리지 마세요.
• AI가 생성한 오디오와 영상에는 그 사실을 분명히 표시하세요. EU에서는 AI법에 따라 딥페이크가 인공적으로 생성되거나 조작된 것임을 밝혀야 해요.

음성, 초상, AI에 관한 법률은 나라마다 다르며, 이 내용은 일반 정보일 뿐 법률 자문이 아니에요. AI 클론의 법적, 윤리적 측면에 관한 가이드에서 동의를 더 깊이 다루고 있으며, 다른 사람이 관련되어 있다면 누군가를 복제하기 전 윤리 체크리스트가 도움이 될 거예요.

7클론으로 할 수 있는 일

클론을 만들었다면, 중요한 건 어떻게 쓰느냐예요. 텍스트 클론은 성찰을 위한 거울이 될 수 있어요. AI 버전의 나와 대화하는 방법을 살펴보거나, 과거의 나에게 문자 보내기를 해 보거나, AI로 미래의 내가 보내는 편지를 써 보세요. 무엇을 만들든 클론은 틀릴 수 있고, 듣기 좋은 말만 할 수도 있으며, 사람이나 전문적인 도움을 대신할 수 없어요.

8Memory Clone의 위치

Memory Clone은 텍스트 방법만 다뤄요. 현재 알파 버전인 Windows 데스크톱 앱으로, 직접 내보낸 채팅(WhatsApp, Messenger, Instagram, Discord)과 메모로 프라이빗 AI 시뮬레이션을 만들어요. 관계마다 스타일을 따로 학습하고, 가져온 원본과 메모리 인덱스는 PC에 보관해요.

• 클라우드 처리는 클론별로 직접 켜기 전까지 꺼져 있어요. 켜면 답장을 쓰는 데 필요한 만큼 제한된 분량의 발췌문만 선별해 전송해요. 내 콘텐츠는 모델 학습에 사용되지 않아요.
• 현재는 음성 메시지, 사진, 영상을 사용하지 않으며 목소리도 복제하지 않아요. 오디오와 영상 지원은 계획되어 있고, 음성 복제는 연구 과제예요.
• 만 18세 이상이어야 하며, 살아 있는 다른 사람을 복제하려면 허용되는 사용 정책에 따라 그 사람의 허락이 필요해요.