8 min read
금요일 오후 4시 40분입니다. 전화벨이 울리고, 가장 큰 고객의 목소리가 들립니다. 피곤한지까지 알아챌 만큼 잘 아는 목소리입니다. 지금 비행기에 타는 중이고, 거래 은행이 바뀌어 새 계좌 정보를 이메일로 보냈으니 5시 전에 그쪽으로 환불해 줄 수 있느냐고 묻습니다. 목소리는 맞습니다. 살짝 웃는 소리도 맞습니다. 틀린 것은 단 하나, 그 고객은 당신에게 전화한 적이 없다는 사실입니다.
이 장면은 지어낸 것이지만, 그 안의 기술은 실제로 존재하고 비용도 저렴하며, 직접 쓸 계획이 없더라도 알아둘 가치가 있습니다. 바로 AI 음성 복제입니다. 이 가이드는 아주 기초부터 시작합니다. 음성 복제가 무엇인지, 1인 사업에 어떻게 정직하게 도움이 되는지, 범죄자들이 어떻게 악용하는지, 그리고 당신을 지켜 주는 한 가지 습관을 알게 될 것입니다. 기술 지식은 필요 없습니다.
쉽게 풀어 본 음성 복제
음성 복제 소프트웨어는 한 사람의 녹음을 듣고 그 목소리를 알아보게 만드는 특징을 학습합니다. 음높이, 리듬, 억양, 특정 소리를 내는 방식 같은 것들입니다. 학습을 마치면 그 사람이 한 번도 말한 적 없는 문장까지 포함해 어떤 글이든 매우 비슷한 목소리로 읽어 낼 수 있습니다.
자주 혼동되는 세 가지를 구분해 두면 도움이 됩니다.
- 텍스트 음성 변환은 특정한 누구의 것도 아닌 기성 합성 음성으로 글을 읽어 줍니다. 지도 앱이 하는 일이 바로 이것입니다.
- 음성 복제는 특정한 사람의 목소리를 그대로 본뜹니다.
- 딥페이크는 실제 인물을 그럴듯하게 흉내 낸 AI 제작 음성, 이미지, 영상을 아우르는 더 넓은 말입니다.
복제하려면 음성이 얼마나 필요할까요? 대부분의 예상보다 적습니다. 미국 연방거래위원회(FTC)에 따르면 사기꾼에게는 짧은 음성 클립 하나면 충분하며, 이는 온라인에 올라온 콘텐츠에서 얻을 수도 있습니다. 팟캐스트나 환영 영상, 음성 사서함 인사말이 있다면 그 클립은 이미 존재합니다. 그렇다고 숨어야 할 이유로 받아들이지는 마세요. 목소리를 들려주는 것도 마케팅의 일부입니다. 이제부터 익숙한 목소리를 신원의 증거로 여기지 않을 이유로 삼으세요.
정직한 1인 사업에 도움이 되는 곳
믿을 만한 도구로, 스스로 동의한 상태에서 자기 자신의 목소리를 복제하는 데에는 합리적인 쓰임새가 있습니다. 내 목소리를 가진 녹음 도우미라고 생각해 보세요.
- 작은 실수 고치기. 20분짜리 강의를 녹음했는데 가격을 한 번 잘못 말했다고 해 봅시다. 일부 오디오 편집기는 내 목소리로 문장 하나만 바꿔 줄 수 있어 다시 녹음하지 않아도 됩니다.
- 교육 자료를 최신으로 유지하기. 단계 하나가 바뀌면 대본을 고치고 한 단락만 다시 생성하면 됩니다.
- 글로 된 가이드의 오디오 버전 제공하기. 듣기를 더 좋아하는 고객에게 좋습니다.
써 보신다면 네 가지 규칙을 지키세요. 자신의 목소리, 또는 목소리의 주인이 특정 용도에 서면으로 동의한 목소리만 복제합니다. 무엇이든 업로드하기 전에 음성 모델이 누구의 소유인지, 어떻게 삭제하는지 읽어 봅니다. AI로 만든 녹음이라면 듣는 사람에게 알립니다. 그리고 고객에게 남기는 개인 음성 메시지처럼, 사람들이 당연히 당신이 직접 말한다고 믿을 만한 곳에는 절대 쓰지 않습니다. 조금 서툴더라도 진짜 목소리로 전하는 짧은 감사 인사가 훨씬 더 값집니다.
범죄자들은 같은 도구를 어떻게 쓸까
FBI 산하 인터넷 범죄 신고 센터는 생성형 AI와 금융 사기에 관한 공개 경고를 발표하며 음성 복제를 실제로 쓰이는 수법 중 하나로 꼽았습니다. 2025년 5월의 별도 경고에서는 범죄자들이 문자 메시지와 미국 고위 공직자를 사칭한 AI 생성 음성 메시지를 보낸 뒤, 악성 링크로 피해 대상을 다른 메신저로 유인하려 한 사례를 설명했습니다.
공직자를 흉내 낼 수 있다면 꽃집의 거래처도 흉내 낼 수 있습니다. 1인 사업자에게 일어날 법한 일은 평범하고 조용한 모습입니다.
- ‘고객’이 전화해 환불이나 결제 계좌를 바꿔 달라고 합니다.
- 아는 ‘거래처’가 계약금이 연체되었다는 음성 메시지를 남깁니다.
- ‘가족’이 하필 가장 바쁜 순간에 급히 돈이 필요하다고 합니다.
- 누군가 당신의 목소리로 당신의 고객에게 연락합니다.
이들의 공통점을 눈여겨보세요. 목소리가 속임수의 전부인 경우는 드뭅니다. 목소리는 경계심을 꺼뜨리는 역할을 할 뿐이고, 그 사이 진짜 도구인 긴박함과 돈이 오가는 방식의 변경이 제 할 일을 합니다. 이것은 좋은 소식입니다. 완벽한 귀가 필요한 것이 아니라 패턴만 알아차리면 되니까요.
차이를 들을 수 있을까?
때로는 가능하지만, 거기에 안전을 맡기지는 마세요. 어색한 멈춤, 밋밋한 감정, 이상한 배경음은 단서가 될 수 있고, FBI도 주의 깊게 들으라고 권합니다. 하지만 통화 품질이 나쁘면 이런 단서는 모두 묻히고, 도구는 계속 좋아지고 있습니다.
탐지 기술도 있습니다. FTC는 음성 복제 공모전(Voice Cloning Challenge)을 열었고, 수상 아이디어에는 합성 음성을 찾아내는 소프트웨어, 2초 단위로 실제 사람이 말하는 흔적을 확인하는 소프트웨어, 들리지 않는 워터마크를 넣어 복제를 방해하는 소프트웨어가 포함되었습니다. 모두 유망합니다. 그래도 금요일 오후 전화벨이 울릴 때 그중 하나가 작동하고 있으리라 기대해서는 안 됩니다.
효과 있는 습관: 이미 가지고 있는 번호로 다시 걸기
방어법 전체를 한 문장으로 말하면 이렇습니다. 돈을 옮기거나, 결제 정보를 바꾸거나, 인증 코드를 알려 달라는 모든 요청은 그 요청이 오기 전부터 신뢰하던 경로로 확인합니다.
실제로는 전화를 끊고 연락처에 저장된 번호, 예전 청구서에 있는 번호, 또는 공식 웹사이트에 있는 번호로 전화한다는 뜻입니다. 메시지에 적힌 번호나 방금 걸려 온 번호는 쓰지 마세요. 진짜 고객이라면 2분쯤 늦어져도 개의치 않습니다. 이를 막으려는 사람은 당신이 알아야 할 것을 스스로 알려 준 셈입니다.
FBI는 가족과 비밀 단어나 문구를 정해 두라고도 권합니다. 이 방법은 사업에도 잘 맞습니다. 큰 금액을 보내는 고객 두세 명, 장부를 맡은 사람, 주요 거래처와 각각 하나씩 정해 둘 수 있습니다. 온라인 어디에도 나오지 않는 것을 고르세요. 반려동물 이름이나 거리 이름은 피해야 합니다.
처음 30분 동안 할 일
모든 것을 할 필요는 없습니다. 아래 다섯 가지를 순서대로 하면 비슷한 규모의 사업체 대부분보다 앞서게 됩니다.
- 규칙 하나를 적어 붙여 두기(5분). “나는 전화, 음성 메시지, 문자, 이메일 때문에 결제 정보를 바꾸거나 돈을 보내지 않는다. 먼저 저장된 번호로 다시 전화한다.”
- 고객에게 나의 원칙 알리기(10분). 청구서 하단에 두 줄을 추가하세요. “저희 은행 정보는 전화나 이메일로 변경되지 않습니다. 그런 요청을 받으시면 이미 알고 계신 번호로 전화해 주세요.”
- 가족 암호 정하기(5분). 오늘 저녁 직접 만나서 정하세요.
- 저장된 번호 확인하기(5분). 가장 중요한 고객과 거래처 열 곳이 확실히 진짜인 번호로 연락처에 있는지 확인하세요.
- 인증 코드 지키기(5분). 이메일과 은행 계정에 2단계 로그인을 켜고, 아무리 익숙한 목소리라도 누구에게도 코드를 읽어 주지 않겠다고 스스로 약속하세요.
이미 일이 벌어졌다면 먼저 서둘러 은행에 전화하고, 그다음 경찰이나 자국의 사기 신고 기관에 신고하세요. 미국에서는 IC3.gov와 ReportFraud.ftc.gov입니다. 부끄러워할 일이 아닙니다. 이런 사기가 조심스러운 사람에게도 통하는 것은 바로 믿을 만한 사람을 흉내 내기 때문입니다.
이제 당신은 오늘 전화를 받을 사람들 대부분보다 이 문제를 더 잘 알고 있습니다. 주변에도 전해 주세요. 이번 주에 어떤 고객이나 가족과 가장 먼저 암호를 정하고 싶으신가요? 그 대화부터 시작해 보세요.



