AI 번역 엔진 및 생성형 AI 개발과 튜닝에 필요한 대규모 언어 모델 구축을 지원합니다

AI 번역 엔진 및 생성형 AI 개발과
튜닝에 필요한
대규모 언어 모델 구축을
지원합니다.

  • 100만 쌍 이상
  • 10개 언어 이상 지원
  • 풍부한 납품 실적
샘플 신청은 여기에서

AI 번역 및 질의응답 관련
머신러닝 고민을 해결해 드립니다!

  • 특정 분야에 특화된 고정밀 AI 번역을 개발하고 싶다

    특정 분야에 특화된
    고정밀 AI 번역을
    개발하고 싶다

  • 다국어 챗봇의 정확도를 높이고 싶다

    다국어 챗봇의
    정확도를
    높이고 싶다

  • 대화나 질의응답 시의 발언을 예측하고 싶다

    대화나 질의응답 시의
    발언을 예측하고 싶다

  • 동남아시아 국가들의 언어를 지원하는 대역 코퍼스를 찾고 있습니다

    동남아시아 국가들의 언어에
    대응하는
    대역 코퍼스를
    찾고 있습니다

  • 업종이나 전문 분야에 특화된 용어 사전을 만들고 싶습니다

    업종이나 전문 분야에
    특화된
    용어 사전을
    만들고 싶습니다

코덴샤가 보유한 6가지 강점

  • 40년 이상의 경험

    40년 이상의 경험

    1980년대부터 기계 번역을 개발해 왔으며,
    대기업에 대한 대역 코퍼스 납품 실적도 풍부합니다.
    오랜 경험과 노하우로 문제 해결에 기여하는
    다국어 코퍼스를 제공합니다.

  • 전문 분야에 강함

    전문 분야에 강함

    관광, 의료, 법률, 금융, 지식재산 등
    다양한 분야의 대역 코퍼스를 보유하고 있습니다.
    기자회견, 질의응답 등 대화 형식의
    대역 코퍼스도 준비되어 있습니다.

  • 100만 개 이상의 쌍

    100만 개 이상의 페어

    제공 가능한 대역 코퍼스는 100만 쌍 이상!
    이용 중인 번역 지원 도구의
    번역 메모리로도 활용 가능합니다.

  • 희귀 언어

    희귀 언어

    일본어에서 영어로 번역된 데이터 외에도,
              영어에서 동남아시아 언어나 희귀 언어로
              번역된 대역 코퍼스를 보유하고 있습니다.
             

  • 자연스러운 표현

    자연스러운 표현

    대역 코퍼스는 각 언어의 원어민이
              번역했기 때문에, 각 언어 특유의
              뉘앙스와 관용구가 반영되어 있습니다.

  • 세미 오더

    세미 오더

    분야, 데이터 타입뿐만 아니라 원문과 번역문의
              번역 방향까지 포함하여 관리하고 있으므로,
              원하시는 대역 코퍼스를 추출할 수 있습니다.
              다국어 전문 용어 사전 제작도 가능합니다.

이런 전문 분야도 대응 가능

도입 사례

대형 통신사의 연구 부문
/방송국의 연구소
/AI 계열 기계 번역 엔진 개발 회사
등

자주 묻는 질문

'대역 코퍼스'란 무엇인가요?
대역 코퍼스란 특정 언어와 그 외 언어의 총 2개 언어 또는 그 이상의 언어 조합으로 번역된 문장의 집합체입니다. AI 계열 기계 번역 엔진 개발에 있어서는 전후 문맥이 유지된 데이터가 중요하게 다뤄집니다. 2개 언어에 미치지 못하는 1개 언어의 문장인 경우에는 단일 언어 코퍼스라고 부릅니다.
대역 코퍼스에는 어떤 언어와 어떤 언어의 조합이 많은가요?
당사는 일본어와 영어 데이터를 가장 풍부하게 보유하고 있습니다. 그 외에도 영어와 중국어, 스페인어와 프랑스어, 인도네시아어와 포르투갈어 조합 등에도 대응하고 있습니다.
대역 코퍼스를 구매할 경우 용도에 제한이 있나요?
네, 기계 학습에만 이용할 수 있는 대역 코퍼스와 웹사이트나 교재 등으로 공개가 가능한 대역 코퍼스가 있습니다. 후자의 경우에는 구매 전에 조건에 대해 협의하겠습니다.
대역 코퍼스의 최소 구매 단위나 가격은 어느 정도인가요?
기계 학습에 이용하는 경우에는 10만 쌍 정도가 필요하다고 하며, 당사 고객들도 그 단위로 구매하시는 경우가 많습니다. 가격은 용도나 구매 수량에 따라 별도로 상담해 드립니다.
대역 코퍼스는 어떤 방식으로 납품되나요?
요청에 따라 텍스트 파일(CSV, TSV 등)이나 엑셀 파일로 납품해 드립니다.

대역 코퍼스 선택의 포인트

대역 코퍼스 선택 시 포인트

기계 번역이나 다국어 생성 AI의 개발 및 튜닝에 있어 대역 코퍼스의 필요성은 점점 더 높아지고 있습니다. 또한 번역가가 새로운 분야의 번역을 시작하는 경우에도 사내에 축적된 번역 메모리가 있다면 번역 작업의 효율은 크게 향상될 것입니다. 반면 체계적인 대역 코퍼스를 직접 수집하는 것은 쉽지 않으므로, 외부에서 데이터를 조달하여 목적하는 결과물의 개발이나 번역 작업에 집중하는 것이 효율적이라고 할 수 있습니다.

대역 코퍼스 선정 포인트로 다음 6가지를 들 수 있습니다.
1) 언어 조합
2) 분야
3) 품질
4) 수량
5) 데이터 타입
6) 문맥 유무

1)의 '언어 조합'은 번역가가 번역하는 언어 쌍이나 기계 번역 개발 시 학습시킬 언어 쌍이 일본어와 영어인지, 일본어와 중국어인지 등을 의미합니다. 사용하는 번역 지원 도구의 번역 메모리에 등록하는 경우에도 마찬가지로 '언어 조합'은 가장 중요한 요소라고 할 수 있습니다. 나아가 더 자연스러운 표현을 원할 경우에는 어느 언어가 원문인지도 중요한 요소가 됩니다. 구체적인 예로, 단순히 '일본어와 영어 대역 코퍼스'라고 해도 일본어 원문을 영어로 번역한 경우와 영어 원문을 일본어로 번역한 경우, 영어 표현의 유창함이나 번역의 배경에 차이가 느껴지는 것은 당연하다고 할 수 있습니다.

2)의 '분야'는 관광, 의료, 법률, 경제, 과학 기술 등의 분야를 가리킵니다. 정밀도를 높이고 싶은 분야의 데이터를 기계 학습시킴으로써 개발 가속화로 이어집니다. 특정 분야의 기계 번역 정밀도를 향상시키기 위해 언어 모델을 구축하는 경우, 효과가 나타나는 기준은 10만 쌍 정도라고 합니다. 대역 코퍼스에서 전문 용어 사전을 작성하는 경우에도 분야가 중요하다는 것은 말할 필요도 없습니다. 당사의 사례를 보면, 일본 국내에서 요구되는 분야는 관광 입국이라는 명목하에 인바운드 대응에 주력하던 시대에는 관광 분야, 방일·정주 외국인을 위한 의료를 강화하기 위해 의료 분야의 대역 코퍼스가 요구되었습니다. 나아가 사업 내용 발표나 설명에 사용되는 프레젠테이션 자료, 회의나 이벤트에서의 강연과 그에 이어지는 질의응답을 기록한 비즈니스 분야로, 수년 사이에 니즈는 변천했습니다.

3)의 '질'이란 바꾸어 말하면 정밀도를 의미하며, 대역 코퍼스가 작성된 방법에 의존합니다. 사람의 손으로 번역된 데이터인 것이 바람직하며, 기계 번역을 사용하여 번역되었고 사람의 눈에 의한 확인이나 수정 과정을 거치지 않은 것은 자연스럽게 질이 떨어집니다. 또한 사람의 손으로 번역된 대역 데이터의 경우에도 원문 1문장에 대해 번역문이 2문장 이상으로 번역되어 있는 경우가 있으며, 원문과 번역문이 1문장으로 대응하는 것이 필수인 경우에는 질에 영향을 주게 됩니다. 나아가 지나치게 생략되어 번역된 경우도 양질의 대역 코퍼스라고 할 수 없습니다.

4)의 '수량'은, 예를 들어 사내에서 사용하는 번역 지원 도구의 번역 메모리나 단어 사전에 등록할 목적이라면, 특정 분야의 대역 코퍼스가 수만 쌍만 있어도 번역가에게 충분히 도움이 되는 양이라고 할 수 있습니다. 기계 번역 엔진을 개발하는 경우 등 특정 분야의 기계 학습을 수행할 때는 10만 쌍으로도 일정한 효과가 있다고 알려져 있습니다. 반면, 범용 기계 번역 엔진을 개발할 경우에는 수천만 쌍이 필요하다고 합니다. 이처럼 요구되는 대역 코퍼스의 양은 용도에 따라 크게 달라집니다.

5)의 '데이터 타입'은 대역 코퍼스를 작성한 원본 파일이 보고서·백서, 발표·회견·질의응답 중 무엇인지를 나타냅니다. 문어체를 기계 학습시키고 싶다면 보고서·백서를, 구어체를 기계 학습시키고 싶다면 발표·회견·질의응답에서 작성된 대역 코퍼스를 사용하는 것이 더 효과적입니다. 당사의 대역 코퍼스는 속성을 세밀하게 관리하고 있으므로 데이터 타입별로 대역 코퍼스를 추출할 수 있습니다.

6)의 '문맥 유무'란 여러 문장 간에 의미상의 연결성이 있는지 여부를 의미합니다. 구체적으로 사전에 게재된 예문은 특정 표제어를 포함하고 있다는 것만이 조건이며, 다른 예문과의 맥락은 없습니다. 따라서 '문맥이 없다'고 판단합니다. 반면, 보고서는 어떤 현상이나 사건에 관한 기술이 여러 문장으로 구성되어 있으므로 '문맥이 있다'고 할 수 있습니다. 마찬가지로 회견이나 질의응답에 대해서도 여러 화자가 교대로 대화하므로 '문맥이 있다'고 할 수 있습니다. 기계 번역뿐만 아니라 챗봇에서 더 높은 정확도의 답변을 생성하기 위해 기계 학습용 대역 코퍼스에 '문맥이 있는' 데이터가 이전보다 더 많이 요구되고 있습니다.

요약
         대역 코퍼스를 선정할 때는 용도에 따라 상기 1)부터 6)까지를 고려해야 합니다. 특히 특정 분야에 대해 기계 학습을 수행하는 경우에는 품질이나 데이터 타입, 문맥 유무의 필요성을 고려하는 것이 중요합니다. 목적에 맞는 대역 코퍼스를 활용하기 위해 우선 당사의 무료 샘플 데이터를 확인해 주십시오.

닫기
더 보기