영어가 모국어가 아닌 사람의 전사 정확도를 높이려면, 먼저 선명하게 녹음한 후 전사 언어와 어휘 옵션을 확인하고, 그 결과를 오디오와 대조해 검토하세요. 오류가 계속되면 동일한 샘플에 다른 지원 모델이나 설정을 적용해 테스트해 보세요. 도구가 사용자의 음성, 회의 또는 주제를 얼마나 잘 처리할지 예측해 주는 단일 정확도 수치는 없습니다.
억양은 배경 소음, 목소리 겹침, 생소한 이름, 언어 전환과 함께 살펴봐야 할 요인 중 하나입니다. 중요한 것은 어떤 오류가 녹음본에서 반복되는지, 그리고 어떤 변경 사항이 이를 줄여주는지 파악하는 것입니다.
화자와 녹음본에 따라 정확도가 달라지는 이유
연구에 따르면 억양에 따라 인식 성능이 달라질 수 있습니다. 2022년 대화형 영어 음성 연구에서는 미국식 억양보다 테스트된 비미국식 억양에서 더 낮은 성능이 나타났습니다. 일부 억양 그룹에서는 가장 우수한 인식기도 서로 달랐습니다. 이 결과는 해당 연구의 녹음본과 시스템을 설명하는 것이며, 영어를 제2외국어로 사용하는 모든 사람에게 적용되는 점수가 아닙니다.
말하기 방식도 중요합니다. 2025년 비모국어 영어 음성에 관한 사전 공개 논문에서는 읽기 문장과 즉흥적인 이야기하기를 별도로 평가하여, 시스템이 추임새, 반복, 수정 사항을 처리하는 방식에 차이가 있음을 발견했습니다. 따라서 잘 준비된 대본을 사용한 세련된 시연은 회의 중 발생하는 중단과 자기 수정에 대해 거의 알려주지 못할 수 있습니다.
전사 결과가 좋지 않은 원인을 진단할 때는 녹음본에서 들리는 내용과 소프트웨어가 작성한 내용을 구분하세요. 오디오 자체가 이해하기 어렵다면 먼저 녹음 품질을 개선하세요. 청취자에게는 명확하게 들리는데 반복적으로 잘못 전사되는 단어가 있다면 선택한 모델, 언어 설정, 어휘 지원을 확인하세요.
설정을 변경하기 전에 반복되는 오류를 찾으세요
전사가 필요한 대화 유형이 담긴 짧은 녹음본을 선택하세요. 전사본을 읽으면서 오디오를 듣고, 각 오류에 타임스탬프를 표시하세요. 아래 표를 참고해 첫 번째 테스트를 선택하세요. 패턴은 단서일 뿐, 개별 화자에 대한 진단이 아닙니다.
| 관찰되는 현상 | 확인할 사항 | 실질적인 첫 번째 테스트 |
|---|---|---|
| 누군가 멀리 앉으면 많은 단어가 사라집니다 | 마이크 위치, 실내 소음 및 녹음 레벨 | 마이크를 더 가까이 두고 새로 녹음하세요. 왜곡 없이 더 선명하게 들리는지 확인하세요. |
| 사람들이 서로 말을 끊는 부분에서 오류가 집중됩니다 | 목소리 겹침 또는 개별 트랙을 결합하는 방식 | 한 번에 한 사람의 음성만 들어보며 해당 부분을 비교하세요. 도구가 화자별 채널을 지원하는지 확인하세요. |
| 일상적인 단어는 읽을 수 있지만, 이름과 전문 용어가 틀립니다 | 어휘 지원 및 기대되는 정확한 용어 | 지원되는 경우 관련 용어집을 추가한 후 동일한 클립을 다시 실행하세요. |
| 언어가 전환되는 부분에서 오류가 발생합니다 | 지원 언어 및 다국어 전사 동작 | 동일한 언어 쌍과 문장 내 실제 언어 전환이 포함된 클립을 테스트하세요. |
| 명확한 음성임에도 한 화자의 말이 반복적으로 잘못 대체됩니다 | 선택한 인식기가 해당 음성을 처리하는 방식 | 동일한 오디오와 참조 텍스트를 사용하여 지원되는 설정 또는 모델을 비교하세요. |
| 단어는 맞지만 화자 레이블이 틀립니다 | 화자 지정 | 오디오의 음성과 소개를 바탕으로 레이블을 확인하세요. |
원본 녹음본과 초기 전사본을 보관하세요. 변경 사항이 도움이 되었는지 확인할 수 있도록 한 번에 하나의 설정만 변경하세요.
녹음 전: 마이크가 무엇을 수음하는지 확인하세요
말할 장소에서 짧게 재생 테스트를 시작하세요. 멀리서 들리는 목소리, 실내 울림, 음성 왜곡 및 간섭음을 확인하세요. 마이크를 옮기거나 소음을 줄인 후 다시 녹음하세요. 마이크의 안내와 실제 재생 결과를 바탕으로 위치를 결정하세요. 하나의 거리가 모든 기기나 회의 배치에 적합하지는 않습니다.
Google Cloud의 녹음 안내에서는 선명하고 적절한 위치에 놓인 마이크 사용을 권장하며, 과도한 소음, 울림 및 동시 발화가 인식 성능을 저하시킬 수 있다고 경고합니다. 또한 불필요한 재샘플링보다는 원본 오디오 특성을 유지하는 방식을 권장합니다. 이는 유용한 시작점이지만, API별 설정은 해당 서비스의 문서를 따라야 합니다.
다음 준비 사항을 확인해 보세요:
- 테스트 중 각 참가자가 평소 앉는 자리에서 평소 목소리 크기로 말하게 하세요.
- 불필요한 중단을 줄이고, 중요한 의사 결정 시 교대로 말할 방법을 미리 정하세요.
- 음질 개선 또는 소음 제거를 시도할 때는 결과를 비교할 수 있도록 원본 오디오를 보관하세요.
녹음 준비에 대해 더 자세히 알아보려면 AI 전사 정확도 개선 가이드를 참조하세요.
설정 중: 언어 및 어휘 지원 확인
도구가 현재 말하는 언어로 설정되어 있는지 확인하고, 녹음본에 적합한 모델 또는 모드를 제공하는지 확인하세요. 지역별 영어 옵션이 제공되는 경우, 인터페이스 레이블이 더 나은 인식을 보장한다고 가정하는 대신 오디오에 해당하는 옵션을 비교하세요.
언어가 전환되는 대화의 경우, 특정 언어 쌍과 녹음본 내 언어 전환에 대한 지원 여부를 확인하세요. 지원 언어 목록만으로는 해당 워크플로가 어떻게 작동하는지 알 수 없습니다. 영어와 다른 언어를 각각 별도의 파일에서 평가하기보다는 테스트에 실제 언어 전환 사례를 포함하세요. 관련 기사에서 코드 스위칭과 전사에 대해 설명합니다.
사용자 지정 어휘나 문구 힌트를 사용할 수 있는 경우, 세션에서 실제로 사용되는 용어부터 시작하세요. 참가자 이름, 프로젝트 이름, 약어 및 전문 용어 등입니다. 예를 들어 Google Cloud의 모델 적응 문서에서는 제공된 단어와 문구에 맞춰 인식을 편향시키는 방법을 설명합니다. 또한 지원 여부는 모델에 따라 다르며 요청 한도가 적용된다고 명시합니다. 모든 앱이 동일한 목록이나 프롬프트를 수용한다고 가정하지 말고, 해당 도구의 한도를 확인하세요.
용어집을 사용한 경우와 사용하지 않은 경우를 모두 테스트하세요. 의도한 용어가 개선되는지, 관련 없는 단어가 잘못 변경되는지 모두 확인하세요. 설정 필드를 채웠다고 해서 개선되었다고 단정하기보다는 녹음본에서 더 나은 성능을 보이는 버전을 사용하세요.
대화 중: 중요한 세부 사항을 쉽게 검토할 수 있도록 하세요
편안한 말하기 속도를 유지하세요. 급하게 말한 부분이 반복적으로 누락되는 경우, 조금 더 느린 버전으로 말해보고 비교해 보세요. 모든 화자에게 과장된 발음이나 소위 이상적인 리듬을 강요하지 말고, 녹음본을 들어보며 무엇이 도움이 되는지 판단하세요.
나중에 중요하게 작용할 세부 사항은 대화 중에 명확히 하세요. 생소한 이름은 철자를 말하고, 약어는 처음 사용할 때 풀어서 말하며, 중요한 수치는 단위나 통화와 함께 다시 말하세요. 스스로 말을 정정할 때는 최종 버전을 명확하게 말하세요. 이는 오류율을 줄여준다는 약속이 아니라 실질적인 의사소통 습관입니다.
회의에서는 다음으로 넘어가기 전에 결정을 다시 읽어주는 것도 도움이 됩니다. 조치 사항, 담당자, 마감 기한을 말하세요. 그러면 전사본을 검토하는 사람이 오디오에서 명시적으로 찾을 수 있는 내용이 됩니다.
전사 후: 문구를 다듬기 전에 의미를 확인하세요
오류로 인해 다음 행동이 달라질 수 있는 부분을 검토하세요. 이름, 수량, 날짜, 부정 표현, 결정 사항 및 조치 담당자를 우선적으로 확인하세요. 의심스러운 각 부분을 녹음본과 비교한 후, 화자 지정이 중요한 경우 레이블을 확인하세요.
AI 편집 도구는 철자 수정을 제안하거나 일관되지 않은 용어를 식별할 수 있습니다. 이러한 제안을 검토 대상으로 취급하세요. 텍스트만으로 다시 쓴 결과로는 불분명한 오디오 구간에서 실제로 무슨 말이 나왔는지 확인할 수 없으므로, 단지 매끄럽게 읽힌다는 이유만으로 그럴듯한 대체어를 수용하지 마세요. 타임스탬프를 유지하고, 녹음본이나 화자를 통해 해결할 수 없다면 해당 단어를 불분명하다고 표시하세요.
전사본을 편집된 회의록과 분리하세요. 읽기 좋은 회의록을 만들 때는 추임새를 생략할 수 있습니다. 발화를 그대로 보존하려는 전사본의 경우, 추임새, 반복 단어, 자기 수정을 어떻게 처리할지 미리 합의하세요. 결과물을 검토하거나 도구를 비교할 때 해당 원칙을 일관되게 적용하세요.
본인의 오디오에서 정확도를 측정하는 방법
대표적인 녹음본으로 작은 평가 세트를 만드세요. 다양한 화자, 자주 사용하는 어휘, 실제로 발생하는 소음 또는 언어 전환을 포함하세요. 주의 깊게 듣고, 불확실한 부분을 확인하며, 일관된 전사 원칙을 적용해 참조 전사본을 만드세요. 다른 테스트에서도 재현할 수 있도록 오디오, 참조 전사본, 설정을 함께 보관하세요.
단어 오류율(WER)은 참조 전사본의 단어 수 대비 대체, 삭제, 삽입 횟수를 계산합니다:
WER = (대체 + 삭제 + 삽입) ÷ 참조 단어 수
예시로, 5회의 대체, 3회의 삭제, 2회의 삽입이 있는 100단어 참조 전사본의 WER은 10%입니다. 이는 산술적인 예시일 뿐, 억양이 포함된 음성에 대한 예상 결과가 아닙니다.
일치 오류율(MER)은 정렬된 일치, 대체, 삭제와 함께 삽입을 포함하는 다른 분모를 사용합니다. JiWER 구현은 두 지표를 별도로 계산합니다. MER 결과를 WER로 다시 표시하거나 단일 정확도 비교로 합치지 마세요. 위의 예시 수치로 계산하면 MER은 10 ÷ 102로 약 9.8%가 됩니다.
WER은 서로 매우 다른 결과를 초래할 수 있는 단어 오류에 동일한 가중치를 부여합니다. 중요한 세부 사항 목록을 추가해 보완하세요. 어떤 이름, 금액, 날짜 또는 결정이 틀렸나요? 수용 가능한 전사본을 만드는 데 얼마나 걸렸는지도 기록하세요. 남은 오류가 결과물을 업무에 적합하지 않게 만든다면 전체 오류 수가 적다는 것만으로는 충분하지 않습니다.
결과를 비교할 때는 오디오와 참조 전사본을 변경하지 않은 상태로 유지하세요. 도구 또는 모델 버전, 언어 선택, 용어집, 구두점, 대문자, 숫자 또는 추임새에 대한 규칙을 기록하세요. 평균이 한 참가자의 좋지 않은 경험을 가리지 않도록 각 화자의 결과와 전체 결과를 모두 비교하세요.
자주 묻는 질문
영어가 모국어가 아닌 사람에게 적합한 전사 정확도는 어느 정도인가요?
모든 음성과 녹음본에 적용되는 보편적인 목표치는 없습니다. 대표적인 오디오를 확인된 참조 전사본과 비교한 후, 남은 오류와 수정 시간이 사용 목적에 적합한지 결정하세요. 중요한 세부 사항은 전체 오류율과 별도로 검토하세요.
전사 정확도를 높이려면 억양을 바꿔야 하나요?
먼저 녹음 환경, 언어 설정 및 사용 가능한 어휘 지원을 테스트하세요. 도구가 명확한 음성을 반복적으로 잘못 인식한다면, 동일한 녹음본에서 다른 지원 모델을 비교해 보세요. 화자에게 말하는 방식을 바꾸라고 요청하기 전에 이러한 테스트 결과를 먼저 확인하세요.
더 천천히 말하면 항상 도움이 되나요?
항상 그렇다고 가정하지 마세요. 속도가 문제를 일으키는 것 같다면 편안한 속도와 조금 더 느린 버전을 비교해 보세요. 모든 화자에게 인위적인 발음이나 소위 이상적인 리듬을 강요하지 말고, 녹음본을 들어보며 무엇이 도움이 되는지 판단하세요.
사용자 지정 용어집으로 이름과 전문 용어를 수정할 수 있나요?
반복되는 어휘 오류가 있다면 지원되는 용어집 또는 문구 힌트 기능을 테스트해 볼 가치가 있습니다. 제공된 모든 용어가 인식된다는 증거는 아닙니다. 동일한 오디오를 용어집 사용 여부에 따라 비교하고, 도구의 모델 지원과 한도를 확인하세요.
다시 듣지 않고 AI로 전사본을 수정할 수 있나요?
AI는 잠재적인 오류를 표시하는 데 도움이 되지만, 의미에 대한 제안된 변경 사항은 확인이 필요합니다. 중요한 이름, 숫자, 결정 및 불분명한 부분을 오디오와 대조하세요. 녹음본에서 단어를 확인할 수 없다면 불확실하다고 표시하거나 화자에게 물어보세요. 추측하지 마세요.
댓글 0개