AI 더빙 번역 수정하는 법: 더빙 전 검수와 용어집으로 번역 정확도 높이기

AI 더빙에는 잘 드러나지 않는 약점이 있습니다. 목소리가 자연스럽고 타이밍이 정확해도, 한 문장이 잘못 번역되거나 제품 이름이 3편에서 다르게 나오거나 강의 중간에 전문 용어가 바뀌면 영상 전체가 어색해집니다.

AI 더빙에서 사람들은 주로 목소리 품질을 이야기합니다. 하지만 실제로 쓸 수 있는 더빙인지 아닌지는 번역에서 결정됩니다.

이 글에서는 음성을 만들기 전에 번역을 바로잡는 작업 흐름을 정리합니다. 번역문 검수, 용어집으로 용어 고정, 여러 화자 처리, 자막 분리까지 순서대로 다룹니다. 최근 AI Video Translator에 추가한 검수 기능을 기준으로 설명하지만, 원칙은 어떤 더빙 작업에도 적용할 수 있습니다.

AI 더빙 번역이 틀리는 지점

대부분의 AI 더빙 도구는 번역과 음성 합성을 한 번에 처리합니다. 영상을 올리고 기다렸다가 결과를 듣는 방식이라, 어색한 문장은 음성이 다 만들어진 뒤에야 발견됩니다. 고치려면 더빙을 처음부터 다시 돌려야 하죠.

틀리는 지점은 대체로 정해져 있습니다.

• 이름과 브랜드: 사람 이름이나 제품명이 직역되거나 편마다 표기가 달라짐

• 용어 흔들림: 같은 용어가 1편과 3편에서 다르게 번역됨

• 말투 불일치: 편한 브이로그가 딱딱해지거나, 격식 있는 강의가 지나치게 가벼워짐

• 관용 표현과 농담: 원어에서는 자연스러운 표현이 직역되어 의미가 통하지 않음

한국어로 옮길 때는 여기에 외래어 표기와 존댓말 문제가 더해집니다. 자주 틀리는 유형은 해외 영상을 한국어로 번역할 때 틀리기 쉬운 5가지에 정리해 두었습니다.

이 문제들은 모두 목소리가 아니라 번역의 문제입니다. 그리고 음성보다 텍스트 단계에서 잡는 것이 훨씬 빠르고 쌉니다.

1단계: 더빙 전에 번역문을 한 문장씩 검수하기

AI 더빙 번역 정확도를 높이는 가장 확실한 방법은, 음성을 만들기 전에 검수 단계를 넣는 것입니다.

AI Video Translator에서는 이제 더빙을 시작하기 전에 번역문이 한 문장씩 표시됩니다. 원문과 나란히 보면서 바로 고칠 수 있습니다.

검수할 때는 이 순서로 보시면 좋습니다.

1. 고유명사: 사람 이름, 브랜드, 제품명, 지명

2. 숫자와 단위: 가격, 날짜, 길이·무게 단위, 버전 번호

3. 말투: 화자와 영상 성격에 맞는 어조인지

4. 관용 표현: 소리 내어 읽었을 때 어색한 문장은 없는지

말투는 한국어 더빙에서 특히 자주 흔들립니다. 같은 인물이 장면마다 존댓말과 반말을 오가지 않는지 확인해 주세요. 판단 기준은 영상 번역에서 존댓말과 반말이 어려운 이유를 참고하시면 됩니다.

고친 문장은 원래 길이와 비슷하게 맞추는 것이 좋습니다. 번역된 음성은 원래 원본보다 길어지기 쉬운데, 문장이 크게 늘어나면 같은 시간 안에 넣기 위해 말이 빨라질 수 있습니다. 원리는 AI 더빙이 원본보다 길어지는 이유에서 다뤘습니다. 설명을 덧붙이기보다 비슷한 길이로 다듬는 쪽을 권합니다.

2단계: 용어집으로 더빙 용어 고정하기

검수는 영상 한 편의 실수를 잡아 줍니다. 용어집은 같은 실수가 다음 편에서 다시 나오지 않게 막아 줍니다.

더빙 용어집은 원문 용어와 원하는 번역을 짝지어 둔 목록입니다. 한 번 등록해 두면 그 용어는 항상 같은 번역으로 나옵니다.

이런 것들을 넣어 두면 좋습니다.

• 제품명과 기능 이름

• 분야별 전문 용어

• 채널에서 반복해서 쓰는 표현이나 코너 이름

• 번역하지 않고 그대로 둘 이름

한국어 더빙이라면 외래어 표기를 용어집으로 고정해 두는 것도 효과적입니다. "디플로이"로 쓸지 "배포"로 쓸지, "콘텐츠"인지 "컨텐츠"인지 한 번 정해 두면 시리즈 전체가 같은 표기로 나옵니다.

용어집은 CSV 가져오기·내보내기를 지원합니다.

• 첫 영상에서 만든 용어집을 저장해 두고, 이후 편마다 가져와서 쓰기

• 팀원들이 같은 파일을 공유해서 같은 기준으로 작업하기

• 시리즈나 고객사별로 용어집을 따로 관리하기

간단한 기준이 하나 있습니다. 검수할 때 같은 단어를 두 번 이상 고치고 있다면, 그 단어는 용어집에 넣을 차례입니다.

3단계: 화자마다 각자의 목소리 유지하기

인터뷰, 팟캐스트, 패널 토론, 강의 녹화본에는 대부분 두 명 이상이 나옵니다. 예전에는 많은 더빙에서 모든 사람이 같은 목소리로 나와서, 시청자가 누가 말하는지 따라가기 어려웠습니다.

AI Video Translator는 이제 여러 화자를 구분해서, 더빙 음성에서도 각자의 원래 목소리를 유지합니다. 진행자는 진행자 목소리로, 게스트는 게스트 목소리로 나옵니다.

이 기능은 번역 검수에도 도움이 됩니다. 문장마다 화자가 붙어 있으니, 강사가 수강생에게 말할 때와 동료끼리 대화할 때처럼 관계에 맞는 존댓말·반말이 쓰였는지 확인하기 쉬워집니다.

출연자 목소리를 복제하는 만큼, 게스트가 나오는 영상이라면 해외용 더빙본을 만든다는 사실을 미리 알리고 동의를 받아 두는 것이 안전합니다. 관련 쟁점은 AI 더빙과 목소리 복제, 법적으로 괜찮을까?에 정리해 두었습니다.

화자 구분은 출연자들이 차례대로 말할 때 가장 정확합니다. 말이 많이 겹치거나 아주 짧은 리액션이 많은 구간은 더빙 후 한 번 들어 보시길 권합니다.

4단계: SRT 자막을 따로 받기

이제 더빙 영상마다 별도의 SRT 파일이 제공되고, 자막을 영상에 입힐지 말지 선택할 수 있습니다.

영상과 자막을 따로 받으면 이런 점이 좋습니다.

• 유튜브: 깨끗한 영상을 올리고 YouTube 스튜디오에서 SRT를 따로 업로드하면, 시청자가 자막을 켜고 끌 수 있습니다

• 강의 플랫폼: 많은 학습 플랫폼이 영상과 함께 자막 파일 업로드를 지원합니다. 지원 형식은 플랫폼마다 확인해 주세요

• 간편한 수정: 게시 후 오타를 발견해도 SRT만 고쳐서 다시 올리면 됩니다. 영상은 그대로 둡니다

쇼츠나 SNS 클립처럼 자막 파일을 따로 올리기 번거로운 곳이라면 자막을 입힌 버전이 여전히 편합니다.

SRT는 검수를 마친 번역을 기준으로 만들어지기 때문에, 1단계에서 고친 내용이 자막에도 그대로 반영됩니다. 자막만 필요한지 더빙까지 필요한지 고민된다면 자막 생성 기능도 함께 살펴보세요.

활용 사례: 사내 교육·온라인 강의 영상

이 작업 흐름은 교육·강의 영상에 특히 잘 맞습니다. 정확성과 일관성이 가장 중요한 콘텐츠이기 때문입니다.

• 용어가 곧 내용입니다. 소프트웨어 튜토리얼이나 컴플라이언스 교육에서 용어가 잘못 번역되면 어색한 수준이 아니라 틀린 내용을 가르치게 됩니다. 용어집이 모든 강의에서 핵심 용어를 똑같이 유지해 줍니다.

• 강의는 긴 시리즈입니다. 수십 강을 몇 달에 걸쳐 녹화하는 경우가 많습니다. 같은 용어집 CSV를 매 강의에 가져오면 1강과 40강의 용어가 같아집니다.

• 검수는 처음에 한 번, 텍스트로. 내용 전문가가 더빙을 일일이 듣는 대신 번역문을 텍스트로 검토하면 훨씬 빠릅니다.

• 화자가 여럿인 경우가 많습니다. 강사와 수강생의 질의응답, 패널 토론, 인터뷰형 강의 모두 화자별 목소리 유지가 도움이 됩니다.

• 자막이 필수인 경우가 많습니다. SRT를 따로 받으면 학습 플랫폼에 자막을 올리고, 나중에 영상을 다시 만들지 않고도 수정할 수 있습니다.

교육 시리즈라면 이렇게 진행하시면 됩니다.

1. 첫 강의를 더빙하면서 모든 문장을 꼼꼼히 검수합니다

2. 고친 용어들로 용어집을 만듭니다

3. 용어집을 CSV로 내보냅니다

4. 새 강의마다 가져와서 쓰면, 검수가 전체 수정이 아니라 빠른 확인으로 바뀝니다

5. 학습 플랫폼용으로 깨끗한 영상과 SRT를 받습니다

한눈에 보는 체크리스트

마치며

AI 더빙에서 가장 눈에 띄는 실수는 목소리가 아니라 말에서 나옵니다. 더빙 전에 번역을 검수하고 용어를 용어집으로 고정해 두면 대부분의 실수가 사라지고, 두 번째 영상부터는 작업 시간도 크게 줄어듭니다.

이번 기능들은 사용자분들의 피드백에서 시작됐습니다. 특히 긴 시리즈와 강의 영상을 더빙하시는 크리에이터와 팀에서 많은 의견을 주셨습니다. 요청해 주신 모든 분께 감사드립니다.

다음 더빙은 만들기 전에 먼저 검수해 보세요 →