무료 PDF 번역 업그레이드에 대한 몇 가지 생각, 왜 반값의 Gemini를 포기했는지 이야기해보자

오늘, 저는 여러분과 솔직한 소통을 하고자 합니다. 먼저, 저희 무료 버전 제품의 최근 불만족스러운 경험에 대해 영향을 받은 모든 분들께 진심으로 사과드립니다.

지난 한동안, 우리는 무료 버전 경험에 대한 많은 부정적인 피드백을 받았습니다. 이러한 목소리들은 모두 들었고, 저희도 공감합니다. 많은 사용자들이 피크 시간의 "대기 시간이 너무 길다"고 언급했으며, 번역된 문서의 "번역 품질이 매우 불안정하다"고 하였습니다. 또한, 어떤 이들은 번역문이 "중영 혼합되어 읽기 힘들다"고 불평하며, "기계 번역의 느낌이 가시지 않는다"고 하였습니다.

이러한 피드백을 볼 때마다, 저희 팀은 깊은 죄책감을 느낍니다. 우리는 여러분이 중요한 학술 문서나 작업 보고서를 급히 필요로 할 때, 긴 대기와 의미 전달이 부족하고 논리가 혼란스러운 번역문을 마주해야 할 때의 실망과 좌절감을 완전히 이해합니다. 이는 결코 우리가 Doclingo가 여러분에게 제공하고자 하는 경험이 아니며, 이 제품을 창립한 본래의 취지와도 완전히 어긋납니다.

Doclingo는 처음부터 무료 프리미엄 모델을 채택했습니다. 왜냐하면 우리는 고품질 문서 번역이 소수의 특권이 되어서는 안 된다고 믿기 때문입니다. 우리는 충분히 유용한 무료 버전을 통해 더 많은 사람들이 언어 장벽을 넘어 최전선의 지식과 정보에 접근할 수 있기를 희망했습니다. 그러나 불만족스러운 무료 경험은 사용자들을 붙잡지 못할 뿐만 아니라, 여러분의 신뢰를 저버리는 것입니다. 이러한 인식이 저희를 결단하게 만들었습니다: 반드시 이러한 문제를 근본적으로 해결해야 한다는 것입니다.

반복적인 내부 논의와 기술 평가를 거쳐, 우리는 결론에 도달했습니다: 현재 무료 버전에서 사용하고 있는 AI 번역 엔진은 품질과 효율성에 대한 우리의 약속을 더 이상 지킬 수 없습니다. 대기 시간과 번역 품질 문제를 근본적으로 해결하기 위한 유일한 방법은 더 강력한 AI 엔진으로 교체하는 것입니다—진정으로 우리 사용자에게 걸맞은 엔진으로.

이 결정은 저희를 어려운 갈림길로 이끌었습니다. 시장에서 가장 뛰어난 AI 엔진은 주로 OpenAI의 GPT 시리즈와 구글의 Gemini 시리즈입니다. 이들은 현재 인공지능의 최고 수준을 대표하지만, 스타일, 비용 및 특정 번역 작업에서의 성능은 각기 다릅니다.

따라서 이 글에서는 저희가 이번 중대한 업그레이드 결정을 내리게 된 배경과 과정을 공유하고자 합니다: 우리는 어떻게 이 두 대의 최상위 AI 엔진 사이에서 어려운 선택을 하게 되었는지? 왜 우리는 비용이 절반인 Gemini를 포기하고 더 비싼 옵션을 선택했는지?

우리는 이번 투명한 소통을 통해 과거의 불만족스러운 경험에 대한 사과뿐만 아니라, 제품 경험을 향상시키려는 우리의 결단과 약속을 여러분께 보여주고자 합니다.

경험인가, 가성비인가?

저는 매일 사용자에게 더 많은 가치를 창출하기 위해 고민하고 있습니다. 그러나 상업 세계에서 가치를 창출하는 것 뒤에는 항상 보이지 않는 비용 청구서가 있습니다. Doclingo가 핵심 번역 엔진을 업그레이드하기로 결정했을 때, 저희 팀은 이러한 어려운 갈림길에 서 있었습니다: 한쪽은 비용을 거의 절반으로 줄일 수 있는 큰 유혹이었고, 다른 한쪽은 우리가 항상 고수해온 사용자 경험이었습니다.

어떤 제품의 수익과 손실을 책임지는 사람이라면 누구나 비용 통제가 머리 위에 걸린 다모클레스의 검이라는 것을 이해합니다. 새로운 대형 모델 엔진을 평가할 때, 저희 앞에 매우 매력적인 옵션이 있었습니다—구글의 Gemini 시리즈.

솔직히 말해, Gemini의 가격 전략은 저희에게 큰 유혹이었습니다. 저희의 조사에 따르면, Gemini를 선택하는 비용은 GPT보다 낮습니다. 간단히 계산해보면, Gemini로 전환할 경우 저희의 핵심 엔진 호출 비용을 거의 절반으로 줄일 수 있습니다. Doclingo와 같이 매일 대량의 번역 요청을 처리하는 애플리케이션에게는 이 절감된 비용이 상당히 큽니다. 이 돈은 마케팅, 팀 구축에 투자되거나 더 유연한 가격 전략에 직접 반영될 수 있습니다. 이렇게 큰 비용 이점을 마주했을 때, 우리가 마음이 흔들리지 않았다고 말하는 것은 절대 거짓입니다.

그러나 치열한 내부 논의 끝에, 우리는 결국 "비경제적"으로 보이는 결정을 내렸습니다: 경험을 고수하고 GPT를 선택하기로 한 것입니다.

왜냐하면, 우리는 충분한 이유가 있었기 때문입니다.

GPT를 선택한 세 가지 이유

1. 학술 용어의 정확한 이해

어떤 연구 및 학술 분야를 위한 번역 도구든지 간에, 전문 용어에 대한 정확한 이해는 그 도구의 존재 이유입니다. 이는 번역의 "신뢰성, 전달성, 우아함"과 관련이 있을 뿐만 아니라, 문헌의 핵심 가치가 정확하게 전달될 수 있는지를 직접적으로 결정합니다.

이번 심층 평가에서, 저희 팀에게 깊은 인상을 남긴 생생한 사례가 있었습니다. 우리가 응집 상태 물리학 분야의 문헌을 번역할 때, 고빈도 용어인 "pair distribution function"을 만났습니다.

• GPT의 번역: "대칭 분포 함수"
• Gemini의 번역: "쌍 분포 함수"

문자 그대로 보면, "쌍"이 "pair"의 원래 의미에 더 가깝게 보입니다. 이는 매우 직관적이고 합리적인 번역입니다. 그러나 해당 분야의 학자와 학생들에게는 "대칭 분포 함수"가 바로 그들이 공감하는 "전문 용어"입니다. 이 작은 차이는 "외부인"과 "내부인"을 명확히 구분하는 경계선과 같습니다. Gemini의 번역은 문자적으로는 틀리지 않았지만, 기계 번역의 느낌이 드러나고, GPT는 특정 학술 분야에 대한 깊은 이해를 보여주었습니다.

이러한 차이는 단순한 예가 아닙니다. 연구에 따르면, 의학, 과학 등 고도로 전문화된 분야에서 GPT-4 수준의 모델은 복잡한 개념과 용어를 처리할 때 정확성과 엄밀성이 경쟁 제품보다 우수한 경우가 많습니다. 예를 들어, 비교 평가에서 GPT-4는 어려운 임상 문제에 대한 답변에서 더 높은 정확도와 더 적은 심각한 오류를 보여주었습니다. Gemini의 답변이 때때로 더 이해하기 쉬운 반면, 이는 종종 기술적 정확성을 희생하는 대가로 이루어집니다. "이해하기 쉬움을 위해 정확성을 희생하는" 경향은 학술 번역에서 매우 위험합니다.

우리는 Doclingo의 핵심 사용자—광범위한 연구자와 학생들이 매일 이러한 고도로 전문화된 용어와 씨름하고 있다는 것을 잘 알고 있습니다. 여러분에게 있어 용어의 "미세한 차이"는 이해의 "천리 길"을 초래할 수 있습니다. 부정확한 용어는 몰입형 독서 흐름을 방해하고, 여러분이 확인하고 추측하도록 강요할 뿐만 아니라, 더 심각하게는 원문 저자의 핵심 주장을 왜곡하거나 여러분의 연구 방향을 잘못 이끌 수 있습니다. 정확한 용어는 학술적 엄밀성을 보장하는 기초이며, 문헌 독서 효율성을 높이는 생명선입니다.

GPT 모델이 이를 가능하게 하는 것은 우연이 아닙니다. 그 강력한 인지 및 추론 능력은 업계에서 공인된 MMLU(대규모 다중 작업 언어 이해)와 같은 기준 테스트에서 충분히 검증되었습니다. 예를 들어, 경량화된 버전인 GPT조차도 MMLU 점수가 놀라운 82.0%에 달하며, 이는 다양한 학술 분야에서의 이해와 추론 능력에 대한 깊은 축적을 증명합니다. 바로 이러한 강력한 "학문적 기초"가 번역 시 문자적 의미를 초월하여 특정 학문적 맥락에서의 올바른 표현을 정확히 포착할 수 있게 합니다.

따라서 "대칭 분포 함수"라는 정확한 번역을 보았을 때, 우리는 이 뒤에 모델이 전문 지식에 대한 깊은 이해가 있음을 알았습니다. 학술 교류에서의 "정확성"과 "엄밀성"을 지키기 위해, 우리는 GPT를 선택하는 것이 유일한 올바른 답이라고 생각합니다.

2. 중국어 맥락

우리는 좋은 도구가 기능이 강력할 뿐만 아니라, 사용자도 "이해"해야 한다는 것을 잘 알고 있습니다. 학술 문헌 번역이라는 맥락에서 "이해"는 중국어 독자의 독서 습관과 문화적 맥락을 깊이 이해하는 것을 의미합니다. 사소해 보이는 세부 사항이 종종 사용자 경험의 우열을 결정하고, 심지어 전체 제품의 전문성에 영향을 미칠 수 있습니다. 이번 비교에서 GPT와 Gemini가 중국 작가의 이름을 처리하는 방식의 차이는 바로 이러한 "세부에서 진실을 드러내는" 훌륭한 사례입니다.

우리가 "Xiaohao Yang"이라는 저자가 포함된 문헌을 두 모델에 각각 번역하도록 했을 때, 놀라운 세부 사항이 나타났습니다: GPT는 거의 "영혼이 통하는" 듯이 이 음역 이름을 중국어 "杨晓浩"로 복원했지만, Gemini는 원문의 음역을 그대로 유지했습니다. 이 차이는 작지만, 핵심을 찌릅니다. 어떤 중국어 독자에게는, 특히 중국 저널의 편집 관행에 맞춘 번역문을 읽을 때, 익숙한 중국어 이름을 보는 것이 긴 음역 문자열을 보는 것과는 전혀 다른 독서의 유창함과 친밀감을 제공합니다. 이는 단순한 번역이 아니라, 문화적 배려와 "인간"에 대한 존중입니다.

왜 GPT가 이를 가능하게 할 수 있었을까요? 그 뒤에는 강력한 문맥 이해와 명명된 개체 인식(NER) 능력이 작용하고 있습니다. 연구에 따르면, GPT-4는 전체 번역 품질에서 초급 인간 번역가의 수준에 도달할 수 있으며, 번역 품질 평가 능력이 뛰어납니다. 이는 단순히 기계적으로 단어를 대체하는 것이 아니라, 텍스트 뒤에 있는 깊은 의미를 이해하고 있다는 것을 의미합니다. 인명과 같은 고유 명사를 처리할 때, GPT는 문맥 단서를 더 정확하게 활용하여 판단할 수 있습니다. 예를 들어, 러시아 문화 뉴스에서 인명 인식에 대한 연구에서, GPT는 적절한 프롬프트를 통해 F1 점수가 0.93에 달하며, 특정 언어와 개체 유형에서의 뛰어난 성과를 보여주었습니다. 이러한 능력 덕분에 "Xiaohao Yang"을 만났을 때, 이는 아마도 중국 작가일 것이라는 추론을 하고, 그에 맞는 한자 조합을 찾으려 시도하여 결국 "杨晓浩"를 성공적으로 "추측"해냈습니다. 이는 확률과 문맥에 기반한 지능이지, 단순한 규칙 매칭이 아닙니다.

반면, Gemini의 경우는 이와 관련된 연구에서 발견된 몇 가지 문제를 입증합니다. Gemini는 특정 NER 작업(예: 문맥에 민감한 인명 인식)에서 우수한 성과를 보이지만, 고유 명사를 처리할 때는 일관성 부족, 잘못된 번역 또는 누락 문제를 자주 보입니다. 연구에 따르면, Gemini는 인명, 지명 등 고유 명사를 처리할 때 정확성이 부족하여 누락되거나 잘못 번역되는 경우가 많습니다. 예를 들어, 고전 문헌을 번역할 때 "佛國白禪師"와 같은 고유 명사를 설명적 문장으로 잘못 번역하는 경우가 있습니다. 따라서 Gemini가 "Xiaohao Yang"을 중국어로 복원하지 못한 것은 고유 명사 처리의 안정성이 부족하고 문맥 판단의 깊이가 부족한 결과일 가능성이 높습니다.

이 작은 이름 번역의 차이는 저희에게 큰 의미가 있습니다. 이는 단순한 기술적 우열의 증명이 아니라, 제품의 "온도"를 나타냅니다. 중국어 맥락을 이해하는 모델은 사용자의 잠재적 요구를 예측할 수 있습니다—중국어 세계에서 우리는 이름을 직접 부르는 것을 선호합니다. 중국 작가의 음역 이름을 한자로 복원하는 것은 저자의 정체성을 확인하는 것이며, 중국어 독자의 독서 습관에 부합하는 것입니다. 이러한 세부 사항에서의 "지혜"와 "배려"는 사용자가 깊이 읽는 상황에서 몰입감과 신뢰감을 크게 향상시킬 수 있습니다.

3. 문맥의 이해

저희 사용자 피드백 중 하나는 매우 통찰력 있는 관찰로, 현재 두 대의 주요 모델 간의 스타일 차이를 정확히 지적했습니다: "Gemini의 특징은 정보량이 극도로 많아, 모든 각주를 번역하려 하다 보니 때때로 문장이 지나치게 장황해진다. 반면 GPT의 표현은 더 간결하다."

이 평가는 핵심을 찌릅니다. 효율성과 깊이를 추구하는 학술 및 문헌 번역 상황에서 "간결함"은 단순히 아름다운 문자가 아니라, "분별력"과 관련이 있습니다—언제 자세히 설명하고, 언제 절제해야 하는지를 아는 지혜로, 정보 전달 효율성을 극대화합니다. 방대한 문헌 자료를 마주할 때, 가장 소중한 것은 시간입니다. "분별력"을 아는 번역 도우미는 불필요한 정보를 신속하게 제거하고, 핵심 주제를 직시할 수 있도록 도와줍니다. 이는 정확성과 관련이 있을 뿐만 아니라, 독서 효율성과 인지 부담과도 관련이 있습니다.

그렇다면 이러한 "분별력"은 어디에서 오는 것일까요? 그것은 모델이 문맥을 깊이 이해하고, 전체적으로 파악하는 데서 비롯됩니다. 흥미롭게도, Gemini는 백만 단위의 초대형 문맥 창으로 유명하지만, 실제 긴 문서 번역에서 일관된 스타일과 감정의 기조를 유지하는 것은 도전이 되었습니다. 연구에 따르면, Gemini는 번역 과정에서 원문의 감정 색깔을 약화시킬 수 있으며, 스타일 일관성에서 큰 변동성을 보입니다. 때때로, 긴 서사에서 줄거리를 혼동하여 "스타일 변동"이 발생하기도 합니다.

반면, GPT는 문맥 창이 128K tokens에 달하지만, 감정 기조와 문체 일관성을 유지하는 데 더 뛰어난 성과를 보입니다. 여러 연구에 따르면, GPT의 출력은 감정적으로 인간 전문가의 번역에 더 가까우며, 공감대를 형성합니다. 이는 일관된 서사 음성을 유지하며, 의미, 문장 구조 및 문맥의 일관성에서 "가장 일관되고 신뢰할 수 있는 모델"로 평가받습니다. 이러한 안정적인 출력과 원문의 신비를 충실히 반영하는 능력은 "분별력"의 훌륭한 예시입니다. 좋은 번역은 정보의 집합이 아니라, 선택적이고 강조된 표현이라는 것을 이해하고 있습니다.

또한, 이러한 차이를 뒷받침하는 다른 측면도 있습니다. 일부 사용자들은 Gemini의 안전 필터가 때때로 지나치게 "민감하다"고 피드백을 주었으며, 완전히 정상적인 학술 또는 역사적 텍스트를 처리할 때 개별 단어로 인해 번역이 중단되기도 했습니다. 이는 모델이 실제 문맥을 이해하고 "분별력"을 파악하는 데 다소 부족함을 반영합니다—"나무"를 보았지만, "숲"을 이해하지 못한 것입니다(민감한 단어를 보았지만, 학술적 맥락을 이해하지 못한 것입니다).

결론적으로, 진정한 문맥 이해는 얼마나 긴 텍스트를 처리할 수 있는지가 아니라, 텍스트의 의도, 어조 및 스타일을 얼마나 깊이 이해하고, 적절한 방식으로 재현할 수 있는지에 달려 있습니다. 지식의 바다를 항해하는 저희에게 있어, "분별력"을 갖춘 AI 파트너는 단순히 정보를 쏟아내는 "자료庫"보다 훨씬 더 가치가 있습니다.

전망과 약속: 새로운 시작, 더 나은 경험

저희가 어려운 선택을 내린 이유를 상세히 설명한 후, 이제 저는 매우 흥분된 마음으로 여러분께 공식적으로 발표합니다: 새로운 GPT 엔진이 통합된 무료 번역 서비스가 현재 내부 테스트의 마지막 단계에 있으며, 이번 주 내에 모든 사용자에게 전면 출시될 예정입니다!

이는 여러분이 오랫동안 저희에게 불만을 제기했던 긴 대기 시간, 피크 시간 번역 품질 불안정 등의 문제가 크게 완화될 것임을 의미합니다. 우리는 기다리는 매 순간이 여러분의 인내를 소모하고, 매번 만족스럽지 못한 번역 결과가 여러분의 신뢰를 저버린다는 것을 잘 알고 있습니다. 이번 업그레이드는 이러한 모든 것을 끝내기 위한 것입니다.

이 결정을 내리는 것은 쉽지 않았습니다. 더 비싼 옵션을 선택하는 것은 여전히 성장 중인 팀에게는 큰 압박을 의미합니다. 그러나 우리는 반복적으로 스스로에게 물었습니다: Doclingo의 존재 의미는 무엇인가? 그 대답은 항상 동일합니다: 사용자에게 가치를 창출하는 것입니다. 우리는 탁월하고 신뢰할 수 있는 사용자 경험이 제품의 핵심이자 영혼이며, 어떤 경우에도 비용에 의해 타협되어서는 안 된다고 믿습니다. 따라서 이번 업그레이드는 단순한 기술적 진화가 아니라, "사용자 우선"이라는 약속을 진지하게 이행하는 것입니다. 우리는 더 많은 투자를 기꺼이 하며, 여러분이 문헌을 읽을 때 그 집중력과 유창함을 위해 노력할 것입니다.

물론, 새로운 시작은 여러분과 함께 열어가야 합니다. 더 강력한 엔진은 시작일 뿐이며, 여러분의 진정한 경험이야말로 우리가 작업의 가치를 측정하는 유일한 기준입니다. 따라서 우리는 모든 사용자에게 진심으로 초대합니다. 새로운 엔진이 출시된 후, 그것을 경험하고, 사용하고, 검토해 주시기 바랍니다.

• 긴 복잡한 문단이 더 자연스럽고 유창하게, 원문에 충실한 "분별력"을 가지고 있습니까?
• 성가신 인명, 기관명 혼란 문제가 사라졌습니까?
• 여러분의 논문 번역이 더 정확하고 전문적입니까?

여러분의 진정한 경험을 제품 내 피드백 채널을 통해 저희에게 알려주십시오. 여러분의 매번 긍정적인 피드백은 저희에게 가장 큰 격려가 됩니다; 여러분의 매번 비판은 저희가 최적화하고 발전하는 데 가장 소중한 원동력이 됩니다. 우리는 모든 피드백을 진지하게 읽고 분석하며, 이를 향후 제품 로드맵에 반영하여 투명하고 효율적인 피드백 순환을 형성할 것을 약속합니다.

이번 업그레이드는 끝이 아니라, 저희와 여러분이 함께 최고의 번역 도구를 다듬어가는 시작입니다. 우리는 미래에 대한 확신을 가지고 있으며, 여러분과 함께 Doclingo의 매번 발전을 목격하기를 기대합니다.