AI 번역, 정말 쓸 만할까? 기업들로부터 늘어나는 '번역 품질을 평가해 달라'는 상담

생성형 AI의 진화로 번역의 세계가 크게 바뀌기 시작했습니다.
ChatGPT를 비롯한 생성형 AI의 등장으로, 지금까지 전문 번역 소프트웨어나 번역 회사에 의존하던 작업을 기업 스스로 손쉽게 시도할 수 있게 되었습니다.
'이 정도면 사내에서도 번역할 수 있지 않을까?'
그런 목소리가 들려오는 것도 자연스러운 흐름일 것입니다.

실제로 저희 고덴샤에도 거래처 기업들로부터 AI 번역 품질 평가를 의뢰받는 기회가 늘고 있습니다.
예를 들어, 전기기기 제조업체로부터의 상담입니다.

'현재 사용 중인 번역 툴과 최근 화제가 되는 생성형 AI 중 어느 쪽이 더 고품질인가?'
'자사 제품 매뉴얼을 AI로 번역했을 때, 어디까지 실무에 활용할 수 있는가?'
'번역 회사에 의뢰하고 있는 업무의 일부를 AI로 대체할 수 없을까?'

이러한 의문에 대해 실제 문서를 사용하여 번역 결과를 비교하고, 전문적인 관점에서 평가해 달라는 요청입니다.
AI 번역을 시도하는 것 자체는 쉬워졌습니다. 하지만 그 번역이 정말로 업무에 활용 가능한지를 판단하는 것은 의외로 어려운 일입니다.
이번에는 기업이 AI 번역 도입을 검토할 때 직면하는 과제와 번역 품질을 평가하는 것의 중요성에 대해 생각해 보겠습니다.

1. AI번역의 진화는 상상보다 빠르다

얼마 전까지만 해도 기계 번역이라고 하면 원문의 단어나 문법을 기계적으로 치환한다는 이미지가 강했을 것입니다.
번역 결과를 보고 '의미는 대충 알겠지만 이대로는 사용할 수 없겠다'고 느낀 경험이 있는 분들도 많을 것입니다.
하지만 신경망 기계 번역의 보급과 대규모 언어 모델을 활용한 생성형 AI의 등장으로 상황은 크게 바뀌었습니다.
문맥을 고려한 자연스러운 표현, 복잡한 문장의 의역, 나아가 문장의 톤이나 스타일 조정까지 AI가 대응할 수 있는 범위는 넓어지고 있습니다.
특히 비즈니스 문서나 일반적인 설명문에서는 기존 기계 번역과 비교해 생성형 AI가 읽기 쉽고 자연스러운 번역을 출력하는 경우도 드물지 않습니다.
이 정도 수준의 번역을 주변의 도구로 쉽게 얻을 수 있는 시대입니다.
기업이 '번역 업무를 재검토하고 싶다'고 생각하는 것은 당연한 일일지도 모릅니다.
단, 여기서 주의해야 할 점은 자연스러운 문장과 정확한 번역이 반드시 같은 것은 아니다라는 사실입니다.

2. 자연스러운 번역인데, 틀렸다고?

예를 들어 전기 기기 제조사의 제품 매뉴얼을 생각해 봅시다.
일반적인 문장이라면 다소 표현의 차이가 있더라도 내용만 전달되면 문제가 되지 않는 경우가 있습니다.
하지만 제품 매뉴얼은 이야기가 다릅니다.
조작 순서, 안전상의 주의 사항, 부품 명칭, 기술 사양 등 정확성이 요구되는 정보가 다수 포함되어 있기 때문입니다.

'전원을 끄다'와 '전원을 차단하다'
'연결하다'와 '연결되어 있다'
'반드시 실시하다'와 '필요에 따라 실시하다'

얼핏 보면 사소한 차이라도 제품 사양이나 작업 절차에 따라서는 의미가 크게 달라질 수 있습니다.
생성형 AI는 읽기 쉽고 자연스러운 문장을 만드는 데 능숙합니다. 반면 원문의 의미를 추측하여 보충하거나 문맥에 맞게 표현을 바꾸기도 합니다.
이것이 가독성으로 이어질 때도 있지만, 번역에서는 피해야 할 의미 변화로 이어질 수도 있습니다.
또한 제조사 고유의 제품 명칭이나 전문 용어, 사내에서 통일된 표현이 올바르게 반영되었는지도 중요합니다.
즉, 번역 결과를 보고 '자연스러우니 괜찮다'고 판단하는 것만으로는 충분하지 않습니다.

3. AI 번역 평가는 단순한 점수 비교가 아니다

그렇다면 AI 번역의 품질을 평가하려면 어떻게 해야 할까요?
여러 AI 번역 도구에 같은 문장을 입력하여 출력 결과를 비교하는 것은 첫걸음으로 유효합니다.
하지만 그것만으로는 충분하다고 할 수 없습니다.
평가할 때는 예를 들어 다음과 같은 관점이 필요합니다.

정확성: 원문의 의미나 정보가 올바르게 반영되어 있는가.
전문 용어: 업계 고유 용어나 제품 명칭이 적절하게 번역되었는가.
일관성: 동일한 용어나 표현이 문서 전체에서 통일되어 있는가.
가독성: 대상 독자에게 자연스럽고 이해하기 쉬운 문장인가.
지시 사항 준수: 용어집이나 번역 규칙, 문체 등의 지정 사항이 지켜지고 있는가.
수정 필요성: 실무에서 사용하기 위해 어느 정도의 수작업 수정이 필요한가.

예를 들어 일반적인 비즈니스 문서에서는 가독성을 중시할 수 있습니다.
반면 안전과 관련된 제품 매뉴얼에서는 원문의 정보를 빠짐없이 정확하게 전달하는 것이 중요합니다.
같은 AI 번역 도구라도 문서의 종류나 용도에 따라 평가는 달라집니다.
또한 번역 품질뿐만 아니라 번역 후 수정에 드는 시간이나 비용도 고려해야 합니다.
AI 번역 결과물이 얼핏 훌륭해 보여도 전문가의 수정에 많은 시간이 걸린다면 업무 전체의 효율화로 이어지지 않을 가능성이 있습니다.
중요한 것은 단순히 어떤 AI가 뛰어난지를 결정하는 것이 아닙니다.
자사 업무에서 AI 번역을 어느 범위에, 어떻게 활용할 수 있을지 명확히 하고 AI에게 맡길 작업과 사람이 확인 및 수정할 작업을 적절히 나누는 것입니다.

4. 번역 전문가가 AI 번역을 평가하는 의미

여기에서 번역을 전문으로 하는 회사의 역할이 드러납니다.
AI 번역 평가에서는 원문과 번역문을 비교하여 오역이나 누락을 지적할 뿐만 아니라, 왜 그 번역이 문제인지, 실무상 어떤 영향이 있는지 판단해야 합니다.
예를 들어 전문 용어에 오류가 있을 경우, 그것이 단순한 표기 차이인지 아니면 기술적인 의미를 바꿔버리는 중대한 오류인지 판별해야 합니다.
또한 번역 품질 평가에서는 평가자에 따른 판단의 편차를 줄이는 것도 중요합니다.
평가 기준을 명확히 하고 여러 평가자가 동일한 기준으로 판단할 수 있는 체계를 갖추어야 합니다. 필요에 따라 수정 전후의 번역문을 비교하여 어떤 수정이 필요했는지 분석합니다.
이러한 작업을 통해 AI 번역의 강점과 약점이 구체적으로 드러납니다.
고덴샤(KODENSHA)는 다년간 다국어 번역 및 번역 지원에 종사해 온 경험을 살려 기업의 실제 문서와 용도에 맞춘 AI 번역 평가를 수행하고 있습니다.
평가 대상은 특정 AI 번역 서비스에 국한되지 않습니다.
기존의 기계 번역 엔진, 생성형 AI를 활용한 번역, 기업이 독자적으로 구축한 번역 환경 등 도입을 검토 중인 다양한 시스템이 대상이 됩니다.
기업마다 다른 번역 니즈에 맞춰 평가 내용과 관점을 검토하는 것이 중요하다고 생각합니다.

5. 평가하고 끝내기에는 아깝다

AI 번역 평가를 진행하다 보면 예상치 못한 발견을 하기도 합니다.

'생각했던 것보다 고품질이었다'
'일반적인 문장은 문제가 없으나 전문 용어에 과제가 있다'
'특정 문서에서는 뛰어나지만 다른 문서에서는 수정이 많이 필요하다'

이러한 결과는 AI 번역 도입 여부를 판단하기 위한 중요한 자료가 됩니다.
또한 그 이후의 활용 방법도 검토할 수 있습니다.
예를 들어, 빈번하게 발생하는 일반 문서 번역에는 AI를 활용하고, 전문성이 높은 문서나 중요한 대외 문서에는 번역가의 확인을 조합하는 것입니다.
또는 과거의 번역 자산이나 용어집을 정비하고 이를 활용하여 AI 번역의 품질을 지속적으로 개선해 나가는 것입니다.
고덴샤의 '자산 축적 AI 번역'도 이러한 사고방식에 기반한 서비스입니다.
번역 결과를 그대로 두는 것이 아니라, 사람이 확인 및 수정한 번역 데이터를 축적하여 다음 번역에 활용합니다.
AI와 사람의 지식 및 경험을 조합함으로써 기업 고유의 번역 품질을 키워나가는 것을 목표로 합니다.
AI 번역 평가는 도입할 도구를 선택하기 위한 작업만이 아닙니다.
자사의 번역 자산을 재검토하고 향후 번역 업무의 방향성을 생각하는 계기가 되기도 합니다.

6. AI번역의 실력을 함께 확인해 보지 않으시겠습니까?

AI의 진화로 인해 번역 기법의 선택지는 급속도로 넓어지고 있습니다.
반면 선택지가 늘어난 만큼 자사에 무엇이 적절한지 판단하기 어려워진 측면도 있습니다.

'AI를 사용하면 번역 비용을 절감할 수 있는가'
'현재의 번역 업무를 어디까지 AI로 대체할 수 있는가'
'여러 AI 번역 서비스를 비교하고 싶다'
'자사의 전문 용어나 과거 번역 데이터를 활용할 수 있는가'

이러한 의문을 가지고 계신 기업도 많을 것입니다.
AI 번역의 성능은 매일 진화하고 있습니다. 오늘의 평가 결과가 반년 후, 1년 후에도 같으리라는 보장은 없으며, 어제와 같은 번역 결과가 같은 AI로 내일도 얻어질 것이라는 보장도 없습니다.
그렇기 때문에 실제 업무에서 사용하는 문서를 사용하여 평가하고 정기적으로 검토하는 것이 중요합니다.
고덴샤(KODENSHA)에서는 기업의 번역 업무나 도입 목적에 따른 AI 번역의 품질 평가, 비교 검증, 번역 업무 효율화를 위한 상담을 진행하고 있습니다.
AI 번역 도입을 검토 중인 단계든, 현재 이용 중인 번역 환경에 과제를 느끼고 있는 단계든 상관없습니다.
우선 현재의 번역 업무에 대해 들려주십시오.
AI 번역의 실력을 실제 업무에 비추어 함께 확인해 보지 않으시겠습니까?