다른 AI 탐지기로 먼저 검사하면 Turnitin 결과를 미리 알 수 있습니까?

신뢰할 수 있는 수준이 아니며, 이를 직접 테스트한 탐지기 업체 스스로도 자체 고객 지원 페이지에서 그렇게 밝히고 있습니다. 2026년 8월 연구에서 Originality.ai는 Turnitin과 가장 유사하다는 자사의 40% AI Allowance 설정이 300편의 에세이에서 Turnitin과 동일하게 인간 또는 AI로 판정한 비율이 69.7%에 불과하다는 점을 확인했습니다. 해당 고객 지원 페이지에는 다음과 같은 설명이 덧붙여져 있습니다. "The 40% AI Allowance setting does not predict or reproduce a Turnitin result, and the scores from the two tools should not be compared directly." (40% AI Allowance 설정은 Turnitin 결과를 예측하거나 재현하지 않으며, 두 도구의 점수를 직접 비교해서는 안 됩니다.) 이 연구의 또 다른 헤드라인 수치인 96.3%는 언뜻 예측 정확도처럼 들립니다. 하지만 이는 주로 사람이 직접 작성한 에세이에 대해 Turnitin이 이 연구의 기준선인 50%를 넘긴 경우가 극히 드물었다는 사실을 반영할 뿐입니다.

다른 의견을 찾아보기 전에 먼저 알아두어야 할 두 가지 사실이 있습니다. Turnitin은 학생에게 AI 판정 결과를 전혀 보여주지 않지만, 교수자는 해당 보고서를 PDF로 다운로드하여 학생에게 전달할 수 있습니다. 또한 최소 한 곳 이상의 대학이 학생들에게 탐지기 웹사이트를 사용하지 말라고 공식 안내하고 있으며, 교직원이 학생 과제물을 그런 사이트에 업로드하지 못하도록 금지하는 대학들도 있습니다. 이 두 가지 내용 모두 아래에서 자세히 다룹니다.

해당 연구의 제목은 "What AI Detector Is Most Similar to Turnitin? We Tested 300 Student Essays" (어떤 AI 탐지기가 Turnitin과 가장 유사할까? 300편의 학생 에세이 테스트)이며, 2026년 8월 20일 Originality.ai 설립자이자 CEO인 Jonathan Gillham의 이름으로 회사 블로그에 게시되었습니다. 이를 요약한 고객 지원 센터 글에는 "Updated on: 19/08/2026" (업데이트: 2026년 8월 19일)이라는 표시가 붙어 있습니다.

이 연구를 진행한 주체가 누구인지 유념할 필요가 있습니다. 비교 대상이 된 탐지기는 Originality.ai가 직접 판매하는 제품이며, 해당 글은 말미에 독자들에게 "Check your work with Originality.ai" (Originality.ai로 과제를 검사해 보세요)라며 이용을 권유하고 있습니다. 또한 동료 평가를 거친 학술 논문이 아닌 기업 블로그 글입니다. 해당 페이지에는 Originality.ai가 "is not affiliated with or endorsed by Turnitin." (Turnitin과 제휴 관계가 아니며 Turnitin의 보증을 받지 않았습니다.)라고 명시되어 있습니다.

테스트는 다음과 같은 방식으로 진행되었습니다:

• 300편의 영어 에세이가 사용되었습니다. 이는 Lukas Gehring과 Benjamin Paaßen의 2025년 논문과 함께 발표된 교육 분야 AI 탐지 테스트용 공개 연구 데이터셋인 GEDE에서 가져온 것입니다. 100편은 온전히 사람이 작성했고, 100편은 사람이 작성한 글을 AI로 다듬었으며, 100편은 완전히 AI가 생성했습니다.
• 에세이 한 편당 총 6회 검사했습니다. Turnitin으로 1회, Originality.ai의 AI Allowance 모드에서 0%, 5%, 15%, 25%, 40% 등 5가지 설정으로 각 1회씩 검사했습니다.
• 모든 결과는 '예' 또는 '아니오'로 변환되었습니다. Turnitin의 경우 50% 이상의 점수를 AI로 간주했습니다. 해당 연구 스스로도 이 기준선이 "is not an official Turnitin Human/AI threshold" (Turnitin의 공식 인간/AI 기준선이 아닙니다)라고 밝혔습니다.
• 페이지에 공개되지 않은 정보도 있습니다. 검사가 언제 진행되었는지, 어떤 버전의 Turnitin 모델이 사용되었는지는 명시되어 있지 않습니다. 에세이별 데이터가 담긴 "supporting Google Sheet" (보충 Google 스프레드시트)를 언급하고 있지만, 2026년 10월 2일 저희가 해당 페이지를 확인했을 당시에는 링크가 제공되지 않았습니다.

300편 중 209편의 에세이에서 40% 설정과 Turnitin이 앞서 언급한 '예/아니오' 기준선의 동일한 쪽에 위치했다는 뜻입니다. 이는 5개 설정 중 가장 높은 일치율이었습니다. 25% 설정의 일치율은 55.3%였으며, 가장 엄격한 3개 설정의 일치율은 절반에도 미치지 못했습니다(연구의 그림 1 기준 45.3%~46.7%).

두 도구의 판정이 엇갈린 지점을 살펴보면 전체 수치보다 더 많은 것을 알 수 있습니다. 두 도구의 의견이 일치하지 않은 91편 중 76편은 완전히 AI가 생성한 에세이였습니다. 40% 설정은 이 100편 전체를 "Likely AI" (AI일 가능성 높음)로 분류한 반면, Turnitin은 그중 24편만을 50% 이상으로 판정했습니다. 나머지 76편이 50% 미만의 어느 구간에 분포했는지는 해당 페이지에 나와 있지 않으므로, 이것이 76편 모두 0점을 받았다는 뜻은 아닙니다. 나머지 15편의 불일치는 AI로 다듬은 에세이에서 발생했습니다. 온전히 사람이 작성한 100편의 에세이에 대해서는 두 도구 모두 단 한 편도 AI로 분류하지 않았습니다.

헤드라인 수치에 대한 해당 연구 자체의 평가는 냉정합니다. "69.7% is not close enough to call the tools substitutes" (69.7%는 두 도구를 대체재로 부를 만큼 충분히 가깝지 않습니다). 하지만 바로 그 문장에서 그럼에도 이 설정이 학생들에게는 "an excellent option" (탁월한 선택)이라고 덧붙이고 있습니다.

해당 설정 자체에 대해서도 한 가지 짚고 넘어갈 세부 사항이 있습니다. Originality.ai의 AI Allowance 안내 페이지에서는 40% 설정을 "Generous" (관대함)라고 표기하며 "Hybrid AI writing is permitted (but not fully AI-generated content)" (혼합형 AI 작성은 허용되지만, 완전한 AI 생성 콘텐츠는 허용되지 않음)이라고 설명합니다. 반면 같은 페이지에서 학생들에게는 다른 조언을 제시합니다. "Check assignment or school policies (typically 0% AI or 5% AI)" (과제 또는 학교 정책 확인(일반적으로 0% AI 또는 5% AI)). 그런데 이번 테스트에서 Turnitin과 일치율이 가장 낮았던 설정이 바로 이 0%와 5%였습니다. 두 페이지는 서로 다른 질문에 답하고 있습니다(하나는 수강 과목에서 허용되는 범위에 대한 것이고, 다른 하나는 Turnitin과 얼마나 유사한지에 대한 것입니다). 그럼에도 Turnitin과 가장 유사하다며 선택된 설정이 정작 해당 업체 스스로 혼합형 AI 작성을 허용하는 구간이라고 설명한 바로 그 설정이라는 점은 변하지 않습니다.

이 수치는 해당 연구가 전면에 내세운 숫자입니다. 40% 설정에서 에세이를 "Original" (인간 작성)으로 판정한 189건 중 182건(96.3%)에서 Turnitin 점수가 50% 미만으로 나왔습니다. 해당 페이지의 도입부에서는 이를 두고 "96.3% chance of also being treated as human by Turnitin." (Turnitin에서도 인간이 작성한 것으로 처리될 확률 96.3%)이라고 표현했습니다.

하지만 이 문장에는 한 가지 배경 설명이 필요하며, 해당 페이지의 다른 단락들에 그 계산을 위한 수치가 나와 있습니다. 바로 Turnitin은 사람이 작성한 에세이에 대해 50%를 넘기는 경우가 거의 없었다는 사실입니다. 사람이 쓴 100편과 AI로 다듬은 100편을 합친 총 200편 중 Turnitin이 50%를 넘긴 것은 10편에 불과했습니다. 즉, 이 두 그룹의 에세이라면 다른 탐지기를 전혀 돌려보지 않고 그냥 Turnitin 점수가 50% 미만일 것이라고 짐작하기만 해도 200편 중 190편(95%)은 적중했던 셈입니다.

위 표의 행들은 해당 연구 페이지에 나온 수치를 바탕으로 저희가 산출한 결과입니다. 해당 설정이 완전한 AI 에세이를 모두 "Likely AI"로 분류했기 때문에, 189건의 "Original" 판정은 전적으로 이 200편의 에세이에서 나왔습니다. 따라서 위 세 행은 모두 동일한 집단을 설명합니다. 즉 "Original"이라는 판정을 받아 확률이 95%에서 96.3%로 조정되었을 뿐입니다.

이제 걱정하는 학생의 관점에서 이 결과를 반대로 읽어보겠습니다. Turnitin은 다듬은 에세이 중 10편을 50% 이상으로 판정했습니다. 그런데 그 10편 중 7편에 대해 40% 설정은 "Original"이라고 판정했습니다. 10편이라는 숫자는 일반적인 규칙을 세우기에는 너무 적지만, 이는 사전 검사가 걸러내 주기를 기대하는 바로 그 상황이며, 여기서는 3편만을 잡아냈을 뿐입니다. 해당 연구가 학생들에게 전하는 조언에서도 이 점을 분명히 밝히고 있습니다. "Use the 40% AI Allowance as a comparison point, not a Turnitin preview." (40% AI Allowance는 비교 기준으로 활용해야 하며, Turnitin 미리보기로 보아서는 안 됩니다.)

해당 연구를 직접 살펴보시면 상단 부근의 한 줄에서 96.3%를 사람이 쓴 에세이에 대한 일치율로 설명하고 있습니다. 하지만 아래쪽의 세부 내역을 보면 사람이 쓴 글과 다듬은 글을 합쳐 해당 설정이 "Original"로 분류한 189편 전체를 대상으로 계산한 수치입니다. 순수하게 사람이 작성한 100편의 에세이만 놓고 보면 두 도구는 모든 편에서 일치했습니다.

50% 선에서 완벽하게 일치한다 해도 담당 교수가 실제로 무엇을 보게 되는지는 알 수 없습니다. Turnitin의 FAQ에서는 점수 구간의 최하단에 대해 다음과 같이 설명합니다. "no score or highlights are attributed for AI detection scores in the 1% to 19% range" (AI 탐지 점수가 1%에서 19% 사이인 경우 점수나 하이라이트가 부여되지 않습니다). 대신 별표(*)가 표시됩니다. 20%부터는 보고서에 백분율이 표시됩니다. 따라서 Turnitin에서 30%나 45%를 받은 에세이는 이번 연구에서는 "treated as human" (인간이 작성한 것으로 처리됨)으로 간주되지만, 교수의 보고서에는 숫자가 그대로 나타납니다. 낮은 점수 구간에 대한 자세한 내용은 Turnitin AI 점수에 표시되는 별표(*%))의 의미 글에서 확인하실 수 있습니다.

연구 자체에서도 이 점을 인정하고 있습니다. "A score below 50% can still contain text Turnitin marked as likely AI; a score above 50% is not proof of misconduct." (50% 미만의 점수에도 Turnitin이 AI일 가능성이 높다고 표시한 텍스트가 여전히 포함될 수 있으며, 50%를 초과하는 점수가 부정행위의 증거는 아닙니다.) 그러나 정작 보고서에 밝히지 않은 것은 20%에서 49% 사이에 들어간 에세이가 몇 편이나 되는지입니다. 점수 숫자가 아예 표시될지 여부를 가늠하려는 학생에게 정작 빠져 있는 것은 바로 그 수치입니다.

일부 대학에서는 탐지기 웹사이트에 초안을 넣고 검사해도 되는지 여부가 이미 명문화된 규정으로 정해져 있습니다. 저희가 이전에 작성한 초안을 AI 탐지기 웹사이트에 업로드해도 되는가 글에서는 2026년 9월 18일 기준 3개 대학의 규정을 다루었습니다. 요약하자면 다음과 같습니다:

• 리즈 대학교 (Academic Integrity and Assistance Policy, 2026/27 학년도를 위해 2026년 7월 8일 승인)는 자체 Turnitin 튜토리얼에서 "why students should not use AI detector or plagiarism detector websites" (학생들이 AI 탐지기나 표절 검사 웹사이트를 사용해서는 안 되는 이유)를 설명한다고 명시하고 있습니다. 이 규정은 학생을 대상으로 합니다.
• 리즈 대학교의 교직원 지침에서는 온라인 탐지 도구를 사용하지 말아야 할 세 가지 이유를 제시합니다. 해당 도구들이 "insufficiently accurate for the University to use them as evidence" (대학이 증거로 채택하기에는 정확도가 충분하지 않음)하며, 업로드 행위가 "may represent a data security breach" (데이터 보안 위반에 해당할 수 있음)하고, "the document being checked becomes available as training data for other AI tools" (검사 대상 문서가 다른 AI 도구의 학습 데이터로 활용될 수 있음)하기 때문입니다. 이는 교직원이 타인의 과제물을 검사하는 상황에 대해 작성된 것이며, 세 번째 이유는 특정 서비스를 지목하기보다는 일반론적으로 서술되어 있습니다.
• 레딩 대학교는 평가를 설계하고 채점하는 교직원들에게 "Student work must not be uploaded into GenAI tools or AI detection tools under the current interim approach." (현재의 임시 방침에 따라 학생 과제물을 생성형 AI 도구나 AI 탐지 도구에 업로드해서는 안 됩니다)라고 공지하고 있습니다. 텍사스 대학교 오스틴 캠퍼스는 대학 차원의 계약이 체결되어 있지 않는 한 학생 과제물 평가를 위한 제3자 탐지 소프트웨어 사용을 금지하며, 그 이유 중 하나로 학생의 저작권을 꼽습니다. 이 지침은 수업과 채점을 담당하는 이들을 대상으로 작성되었으나, 금지 조항 자체에는 적용 대상이 명시되어 있지 않습니다.

세 대학 중 어디도 자신의 과제물을 직접 검사하는 것을 부정행위라고 규정하지는 않습니다. 하지만 리즈 대학교와 같은 규정이 있는 대학에서는 사전 검사 자체가 명문화된 지침에 위배될 수 있으며, 그렇게 해서 얻는 결과 역시 Turnitin에 대해 신뢰할 만한 정보를 거의 주지 못합니다. 텍스트를 붙여넣기 전에 본인이 소속된 학교의 현재 지침 페이지를 먼저 확인하시기 바랍니다. Originality.ai는 자사 도구로 검사하더라도 과제물이 Turnitin으로 전송되지는 않는다고 밝히고 있습니다. 다만 그 이후 해당 검사 사이트가 이용자의 텍스트를 어떻게 처리하는지는 각 사이트의 자체 이용약관에 명시되어 있습니다.

1. 자신이 볼 수 없는 것이 무엇인지 먼저 파악하십시오. Turnitin의 FAQ에 따르면 "The AI writing detection indicator and report are not visible to students." (AI 글쓰기 탐지 지표 및 보고서는 학생에게 표시되지 않습니다)라고 명시되어 있습니다. 그 바로 뒤에는 이를 보완하는 방법이 제시됩니다. "However, with the PDF download feature, instructors can download and share the AI report with students." (그러나 PDF 다운로드 기능을 통해 강사는 AI 보고서를 다운로드하여 학생과 공유할 수 있습니다). 양측의 화면 차이에 대해서는 학생이 Turnitin AI 점수를 직접 확인할 수 있는가? 글에서 나란히 비교해 설명하고 있습니다.
2. 담당 교수에게 두 가지를 질문하십시오. 이번 과제에 AI 지표가 활성화되어 있는지, 그리고 이 수업에서 그 지표가 어떤 용도로 활용되는지 묻는 것입니다. 이 답변에 따라 점수가 실제로 얼마나 중요한지가 결정됩니다. Turnitin 제출 전 스스로 과제를 점검하는 방법 글에서 추가로 문의할 수 있는 대상과 순서를 정리해 두었습니다.
3. 그럼에도 다른 탐지기를 사용한다면, 해당 도구 자체의 척도에 맞추어 해석하십시오. Originality.ai는 자사 결과를 한 가지 예시로 설명합니다. 15% 설정에서의 "Likely Original" (원작일 가능성 높음) 판정은 AI 사용이 "appears to be 15% or less" (15% 이하인 것으로 보임)라는 뜻으로 "should be read as" (~로 해석해야 함)한다는 것입니다. 이를 40% 설정에 적용하면 '40% 이하'라는 해석이 나오는데, 이는 AI 사용을 일절 허용하지 않는 과제에 대해서는 거의 아무런 정보도 주지 못합니다. 또한 Turnitin에 실제 숫자가 표시될지 여부 역시 전혀 알려주지 못합니다.
4. 본질적인 질문에 답할 수 있는 기록을 보관하십시오. 두 회사 모두 동일한 점을 지적합니다. Originality.ai의 고객 지원 페이지에서는 "AI detection results should always be considered alongside other evidence of authorship, such as drafts, notes, sources, and document history." (AI 탐지 결과는 항상 초안, 메모, 출처, 문서 기록 등 작성자임을 증명하는 다른 증거와 함께 고려되어야 합니다)라고 조언합니다. Turnitin의 FAQ 역시 자사의 백분율 수치가 "should not be used as the sole basis for action" (조치의 유일한 근거로 사용되어서는 안 됩니다)라고 밝힙니다. 다른 사람의 설정이 무엇이든, 초안과 버전 기록은 여러분 자신의 손에 온전히 남아 있습니다.
5. 제출 후 점수에 관한 문제가 제기된다면 보고서 자체를 요청하십시오. 전체 AI Writing Report PDF에는 판정 결과와 함께 하이라이트 표시된 부분이 나타납니다. 다른 탐지기에서 나온 수치는 점수가 높든 낮든 이를 대신할 수 없습니다.

Originality.ai로 에세이를 검사하면 Turnitin 데이터베이스에 저장됩니까? Originality.ai는 그렇지 않다고 밝힙니다. "Running an Originality.ai scan does not submit the paper to Turnitin." (Originality.ai 검사를 실행하더라도 논문이 Turnitin에 제출되지 않습니다). 또한 자사는 "is not affiliated with Turnitin" (Turnitin과 제휴 관계가 아님)이며 자체 보고서만 생성한다고 명시합니다. 다만 Originality.ai 자체가 문서를 보관하는지 여부는 해당 서비스의 이용약관을 확인하셔야 합니다.

제가 사용한 탐지기에서 "Likely AI"라고 표시되었습니다. 그렇다면 Turnitin에서도 적발된다는 뜻입니까? 반드시 그렇지는 않습니다. 이번 연구에서 40% 설정은 AI로 다듬은 에세이 11편을 'Likely AI'로 분류했으나, Turnitin이 그 11편 중 50% 이상으로 판정한 것은 3편에 불과했습니다.

설정을 더 엄격하게 조정하면 Turnitin과 더 가까워집니까? 이번 테스트에서는 그렇지 않았습니다. 0%, 5%, 15% 설정은 AI로 다듬은 에세이의 92%~95%를 적발했지만, Turnitin이 50% 이상으로 판정한 비율은 10%에 불과했으며, 이 설정들이 전체 300편의 에세이에서 Turnitin과 일치한 비율은 절반에도 미치지 못했습니다.

이를 통해 어떤 탐지기가 더 정확한지 알 수 있습니까? 아닙니다. 연구 자체에서도 그렇게 밝히고 있습니다. 이 연구는 "estimates behavioural similarity. It does not establish which detector is more accurate." (동작상의 유사성을 추정할 뿐입니다. 어느 탐지기가 더 정확한지는 입증하지 않습니다). 각 회사가 자사 도구에 대해 공식 문서에서 밝힌 내용은 Originality.ai 대 Turnitin AI 탐지 비교 글에서 확인하실 수 있습니다.

• Originality.ai, What AI Detector Is Most Similar to Turnitin? We Tested 300 Student Essays, Jonathan Gillham, 2026년 8월 20일; 2026년 10월 2일 열람(본문 및 그림 1~4).
• Originality.ai 고객 지원 센터, Which Originality.ai AI Detector Is Most Similar to Turnitin?, 2026년 8월 19일 업데이트; 2026년 10월 2일 열람.
• Originality.ai, Introducing AI Allowance; 2026년 10월 2일 열람.
• Lukas Gehring 및 Benjamin Paaßen, Limits of LLM Text Detectors in Education, arXiv 2508.08096, GEDE 데이터셋을 소개한 논문(첫 번째 버전 2025년 8월).
• Turnitin, AI writing detection capabilities FAQs 및 Using the AI Writing Report; 2026년 10월 2일 열람.
• 리즈 대학교, Academic Integrity and Assistance Policy 및 교직원을 위한 인공지능 활용 지침, 당사 2026년 9월 18일 기사에서 인용.
• 레딩 대학교, assessment and feedback guidance; 텍사스 대학교 오스틴 캠퍼스 교무처, AI detection software guidance; 2026년 10월 2일 열람.