중국어를 영어로 번역한 글을 Turnitin은 AI로 표시합니까?
중국어로 먼저 쓰고 영어로 번역하는 중국인 학생이 많습니다. 번역된 텍스트는 문장 구조가 균일하고 문법적으로 평탄하게 읽히는 경우가 많으며, 이는 Turnitin이 표시하는 패턴과 겹칩니다. 이 글에서는 탐지기가 실제로 무엇을 분석하는지, Turnitin이 제2언어 학습 데이터에 대해 무엇을 주장하는지, 그리고 어떤 오탐 패턴을 주의해야 하는지를 설명합니다.
HumanPen 팀
· 5분
Turnitin이 실제로 분석하는 것
첫 번째 질문은 Turnitin이 번역 사실 자체를 알 수 있느냐는 것입니다. 답은 탐지기가 무엇을 보는지에서 시작됩니다. Turnitin은 제출물의 모든 부분을 같은 방식으로 분석하지 않습니다.
문서에는 이렇게 나와 있습니다. "This qualifying text includes only prose sentences, meaning that we only analyze blocks of text that are written in standard grammatical sentences and do not include other types of writing such as lists, bullet points (short non-sentence structures), or other non-sentence structures." (이 분석 대상 텍스트에는 산문 문장만 포함됩니다. 즉, 표준적인 문법 문장으로 작성된 텍스트 블록만 분석하며, 목록이나 불릿 포인트(문장이 아닌 짧은 구조)처럼 문장이 아닌 다른 형태의 글은 포함하지 않습니다.)
다음 문장은 이렇게 덧붙입니다. "This percentage is not necessarily the percentage of the entire submission." (이 비율이 반드시 제출물 전체에 대한 비율인 것은 아닙니다.)
즉 탐지기는 글쓰기 과정이 아니라 완성된 결과물을 평가합니다. 중국어로 먼저 썼든, 사전을 찾았든, 기계 번역을 썼든 중요한 것은 제출 문서에 담긴 산문입니다. 탐지기는 번역 메타데이터를 보지 않습니다. 문장을 볼 뿐입니다. 영어가 아닌 제출물을 어떻게 처리하는지는 별개의 문제이며, Turnitin이 영어가 아닌 제출물의 AI를 탐지할 수 있는지에서 다룹니다.
번역한 산문이 표준적인 문법 문장으로 이루어져 있다면 그 문장이 바로 분석 대상 텍스트입니다. 탐지기가 점수를 매기는 대상입니다. 탐지기는 영어로 처음부터 만든 문장과 중국어에서 번역한 문장을 구분할 방법이 없습니다. 최종 텍스트만 볼 뿐입니다.
Turnitin이 제2언어 사용자에 대해 주장하는 것
중국인 학생들이 흔히 걱정하는 것은 제2언어 글쓰기 패턴이 AI 패턴으로 취급되는 일입니다. Turnitin은 이 문제를 학습 데이터에서 해결했다고 주장합니다.
문서에는 이렇게 나와 있습니다. "While creating our sample dataset, we also took into account statistically under-represented groups like second-language learners, English users from non-English speaking countries, students at colleges and universities with diverse enrollments, and less common subject areas such as anthropology, geology, sociology, and others to minimize bias when training our model." (표본 데이터세트를 만들 때 통계적으로 과소 대표된 집단, 즉 제2언어 학습자, 비영어권 국가의 영어 사용자, 학생 구성이 다양한 대학에 다니는 학생, 그리고 인류학·지질학·사회학처럼 흔하지 않은 학문 분야도 함께 고려해 모델 학습 시 편향을 줄였습니다.)
여기서는 정확히 짚어야 합니다. Turnitin은 편향을 줄이기 위해 제2언어 학습자를 학습 데이터에 포함했다고 주장합니다. 이 주장은 독립적으로 검증되지 않았습니다. 번역문이 절대 표시되지 않으리라는 보장도 아닙니다. 다만 Turnitin이 모델 학습 과정에서 제2언어 글쓰기 패턴을 고려하려 했다고 밝히고 있다는 뜻입니다.
실질적인 결론은 이렇습니다. Turnitin의 자체 주장에 따르면, 제2언어로 글을 쓴다고 해서 자동으로 높은 AI 점수가 나오지는 않습니다. 탐지기는 제2언어 패턴과 AI 패턴을 구분하도록 되어 있습니다. 그것이 늘 성공하는지는 별개의 문제이며, 비원어민 영어 작성자가 AI 탐지기에 더 자주 표시되는 이유에서 외부 연구 결과를 살펴봅니다.
번역이 유발할 수 있는 오탐 패턴
Turnitin이 제2언어 글쓰기를 고려한다고 주장하더라도 번역문이 오탐을 부를 수는 있습니다. 번역이야말로 Turnitin이 문제 삼는 패턴을 그대로 만들어 내기 때문입니다.
문서에는 이렇게 나와 있습니다. "Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (사람이 쓴 텍스트를 AI 생성으로 잘못 표시하는 오탐에는 구조적 변화가 거의 없는 내용, 말 그대로 반복되는 텍스트, 새로운 생각을 전개하지 않고 바꿔 쓴 텍스트가 포함될 수 있습니다.)
다음 문장은 이렇습니다. "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (그런 텍스트에서 당사 지표가 AI 작성 비율을 높게 보여 준다면, 표시된 비율을 볼 때 그 점을 고려하시길 권합니다.)
번역이 어떻게 이루어지는지 떠올려 보세요. 중국어 문장을 영어로 하나씩 옮기면 문장 구조가 균일해지는 경우가 많습니다. 번역자든 번역 도구든 문법적으로는 맞지만 구조가 비슷한 문장을 잇달아 만들어 냅니다. 전문 용어가 문장마다 되풀이될 수도 있습니다. 번역은 처음부터 끝까지 같은 문체를 유지하기 때문에 목소리가 평탄하고 일정하게 남기 쉽습니다.
이것은 Turnitin이 설명하는 패턴과 정확히 들어맞습니다. 구조의 균일성, 반복, 전개 없는 바꿔 쓰기입니다. 탐지기는 이 패턴이 번역에서 비롯됐는지 알지 못합니다. 그저 보고 표시할 뿐입니다.
완성된 결과물이 중요한 이유
탐지기는 그 이면의 과정이 아니라 제출한 텍스트를 분석합니다. 문서는 분석 대상 텍스트가 "includes only prose sentences." (산문 문장만 포함한다)고 설명합니다. 즉 탐지기는 최종 문서의 산문 블록을 평가합니다.
번역했다면 분석되는 것도 번역된 산문입니다. 탐지기는 영어 문장을 중국어 원문과 비교하지 않습니다. 초안이나 번역 과정에도 접근할 수 없습니다. 제출물에 나타난 문장 그대로 점수를 매깁니다.
이래서 번역이 위험 요인이 될 수 있습니다. 번역 문서는 문법은 깔끔하지만 구조적 다양성이 부족할 수 있습니다. 특히 기계 번역 도구는 수사적 변화보다 유창함에 맞춰 최적화하기 때문에 일정한 문장 패턴을 만들어 내기 쉽습니다. 기계 번역이 Turnitin에 AI로 표시되는지에서 이 사례를 따로 다룹니다. 결과는 능숙하지만 균일한 산문이며, 그것이 바로 Turnitin이 AI 생성 가능성이 있다고 표시하는 특징입니다.
번역할 때 위험을 줄이는 방법
중국어를 영어로 번역한다면 실질적으로 취할 수 있는 조치가 있습니다.
번역한 뒤에는 영어 산문을 구조적 다양성 측면에서 다시 보세요. 길고 균일한 문장은 짧게 나눕니다. 모든 문장이 같은 방식으로 시작하지 않도록 절을 재배치합니다. 뜻이 허락하는 범위에서 반복되는 전문 용어 표현을 바꿉니다.
자신의 분석적 목소리를 더하세요. 번역문은 원문의 중립적이고 서술적인 어조를 그대로 유지하는 경우가 많습니다. 자신의 입장을 밝히고, 자료를 비교하고, 한계를 지적하는 평가 문장을 넣으세요. 이런 분석적 움직임이 만들어 내는 것은 Turnitin의 오탐 설명에서 표시된 텍스트에 없다고 한 것, 즉 바꿔 쓰기를 넘어 전개된 새로운 생각입니다.
기계 번역 결과물을 최종 원고로 삼지 마세요. 첫 번째 초안으로 취급해 다른 초안과 같은 방식으로 다듬으세요. 도구 없이 AI 텍스트를 사람의 글로 만드는 방법은 어떤 편집이 실제로 통계를 바꾸고 어떤 편집이 바꾸는 듯만 보이는지를 정리합니다. 목표는 구조가 다양하고, 독창적인 분석을 전개하며, 도구가 변환한 글이 아니라 사람이 쓴 글처럼 읽히는 산문입니다.
지금 할 수 있는 일
글을 영어로 번역했다가 AI 탐지 표시를 받았다면 다음 단계를 밟으세요.
- Turnitin은 번역 과정이 아니라 완성된 문서의 산문만 분석한다는 점을 기억하세요.
- Turnitin이 제2언어 학습자를 학습 데이터에 포함했다고 주장하지만, 이는 독립적으로 검증되지 않았다는 점을 기억하세요.
- 번역문을 오탐 패턴, 즉 구조의 균일성, 반복, 새로운 생각 없는 바꿔 쓰기와 비교해 보세요.
- 다시 제출하기 전에 표시된 산문에 구조적 변화와 독창적 분석을 더하세요.
조건을 충족하는 부분은 무료로 다시 검사할 수 있습니다. 번역한 부분을 수정하고 추가 비용 없이 결과를 확인할 수 있다는 뜻입니다.
계속 읽기