같은 에세이인데 AI 점수가 달라졌나요? 2026년 9월 GPTZero와 Copyleaks의 모델 변경과 Pangram의 전환 시점

에세이가 아니라 감지기가 바뀌었기 때문일 수 있습니다. GPTZero의 릴리스 노트에 따르면 4o라고 부르는 신규 모델이 2026년 9월 18일에 출시되었으며, 공식 발표에서는 9월 20일부터 모든 사용자를 위한 기본 모델이 되었다고 밝혔습니다. Copyleaks는 9월 22일에 자사 AI 텍스트 감지 모델의 11.0 버전을 출시했습니다. Pangram은 기존 모델인 3.3.2가 "until September 30, 2026" (2026년 9월 30일까지) 기본 모델로 유지될 것이라고 밝혔습니다. 만약 두 번의 검사가 이 날짜들의 전후로 나뉘어 진행되었다면, 점수가 올랐든 내렸든 그 차이는 여러분이 글을 어떻게 수정했는지와 아무 관련이 없을 수 있습니다.

본 글은 이 세 가지 서드파티 감지기를 다룹니다. 비교하고 계신 두 수치가 Turnitin에서 나온 것이라면, 해당 모델은 독자적인 출시 일정에 따라 업데이트되므로 같은 논문을 재제출했을 때 AI 점수가 바뀐 이유는 무엇일까요? 글을 참고하시기 바랍니다.

이러한 날짜들 중 어느 하나만으로는 여러분의 문서를 어떤 모델이 판독했는지 정확히 알 수 없습니다. 각 사의 발표에는 불분명한 공백이 남아 있으며, 그 공백의 양상도 제각각입니다.

릴리스 노트의 해당 항목 제목은 "September 13, 2026 (2026-09-13-base, Model 4.10b aka 4o) | released on September 18, 2026" (2026년 9월 13일 (2026-09-13-base, Model 4.10b 일명 4o) | 2026년 9월 18일 출시)으로 되어 있습니다. 즉, 항목의 표기 날짜는 9월 13일이지만 실제 명시된 출시일은 18일입니다. 해당 항목에는 두 가지 개선 사항으로 "Decreased false positive rate on a variety of domains" (다양한 영역에서 오탐률 감소) 및 "Improved performance on third party benchmarks" (서드파티 벤치마크 성능 개선)가 기재되어 있습니다.

해당 모델을 소개하는 GPTZero의 게시글은 9월 24일 자로 작성되었으며, 또 다른 날짜를 제시합니다: "As of 20 September 2026, the updated model is available to all users and is the default model offered on GPTZero." (2026년 9월 20일부로 업데이트된 모델이 모든 사용자에게 제공되며 GPTZero에서 기본 모델로 적용됩니다).

어느 날짜가 맞는지 단정 짓지는 않겠습니다. 9월 18일 이전에 검사한 결과는 두 날짜보다 앞서고, 9월 20일 이후의 검사는 두 날짜보다 뒤에 진행되었습니다. 그 사이에 검사한 결과라면 어느 쪽 모델이 적용되었을지 불분명합니다.

GPTZero는 모델을 자주 변경합니다. 릴리스 노트에는 2026년 날짜가 붙은 모델 항목이 11개(기본 "base" 모델 10개, 다국어 모델 1개)나 등재되어 있으므로, 이번 변경이 아니더라도 몇 달 간격을 두고 검사한 두 문서는 서로 다른 모델로 판독되었을 가능성이 큽니다.

최신 결과에서 눈에 띄는 부분 중 하나는 바로 회색 텍스트입니다. 4o 소개 글에서는 이를 새로운 기능으로 안내하며 ("We've also introduced a new highlighting color: gray" (새로운 하이라이트 색상인 회색도 도입했습니다)), "Gray spans show which pieces of text are excluded by our AI detector" (회색 구간은 AI 감지기에서 제외된 텍스트 부분을 나타냅니다)라고 설명하는데, 현재로서는 제목이 이에 해당합니다. 하지만 릴리스 노트에 따르면 제목을 모델 입력에서 제외하는 내부 변경은 그보다 훨씬 앞선 8월 1일(Model 4.8b)에 이루어졌습니다: "headers are now excluded from our model's input" (이제 제목이 모델 입력에서 제외됩니다). 점수를 비교할 때 중요한 것은 바로 이 앞선 날짜입니다. 8월 1일 이전에 진행된 GPTZero 검사에서는 제목이 점수에 포함되었지만, 그 이후의 검사에서는 제외되었기 때문입니다.

9월 22일 Copyleaks의 변경 로그에는 "released version 11.0 of the AI Text Detection model" (AI 텍스트 감지 모델 11.0 버전을 출시했습니다)이라고 명시되어 있으며, 이 버전은 "improves detection accuracy and extends coverage to recently released large language models" (감지 정확도를 높이고 최근 출시된 대형 언어 모델까지 적용 범위를 확대합니다)라고 설명합니다.

이어지는 단락을 보면 이 공지가 누구를 위한 것인지 알 수 있습니다: "No request changes are needed - the modelVersion field in the response now returns v11.0." (요청 사항을 변경할 필요가 없습니다. 응답의 modelVersion 필드에 이제 v11.0이 반환됩니다). 이는 다른 소프트웨어가 연동되는 기반인 Copyleaks의 API 문서입니다. 즉, 새 모델이 API의 AI 텍스트 감지에 적용되었다는 뜻일 뿐, Copyleaks 웹사이트나 학교 시스템에 연동된 버전이 언제 동일하게 교체되었는지는 명시되어 있지 않습니다.

교직원에게 사전 안내를 전한 대학도 있었습니다. Canisius University의 교수 역량 개발 및 혁신 센터(Center for Faculty Development and Innovation) 블로그에 9월 14일 자로 올라온 글에는 다음과 같이 적혀 있었습니다: "On Tuesday, September 22nd, Copyleaks will be updating their AI text detector model to help ensure accuracy with AI content detection." (9월 22일 화요일, Copyleaks가 AI 콘텐츠 감지의 정확성을 보장하기 위해 AI 텍스트 감지 모델을 업데이트할 예정입니다). 또한 "instructors should monitor their scans and be aware of variances with scan results and adjust settings accordingly." (교수진은 검사 결과를 면밀히 관찰하고 검사 결과의 변동 가능성을 인지하여 그에 맞게 설정을 조정해야 합니다)라는 당부도 덧붙였습니다. 이는 한 학교가 약 일주일 전에 전달한 공지일 뿐이고 버전 번호도 명시되지 않았지만, 모델 변경이 개발자의 코드뿐만 아니라 교수진의 실제 검사 결과에도 영향을 미칠 것으로 예상되었음을 시사합니다.

Copyleaks 결과가 어떤 모델에서 나온 것인지 확인해야 한다면, API에는 이미 해답이 있습니다. Copyleaks는 2024년 4월 16일에 AI 감지 결과에 `modelVersion` 필드를 추가했습니다. 다만 여러분이 받아본 보고서에 이 버전 번호가 표시되는지는 해당 보고서를 생성한 시스템에 따라 다릅니다.

Pangram 4는 2026년 7월 29일에 "released through the API" (API를 통해 출시)되었습니다. 마이그레이션 가이드에는 "Pangram 3.3.2 is still the default and will remain live until September 30, 2026." (Pangram 3.3.2는 여전히 기본 모델이며 2026년 9월 30일까지 유지됩니다)라고 명시되어 있습니다. 출시 안내 글에서는 특정 모델을 지정하지 않는 소프트웨어의 경우 이것이 무엇을 의미하는지 구체적으로 설명합니다: "Default requests that don't specify a model will continue routing to Pangram 3 using the previous billing system, until Pangram 3 is deprecated." (모델을 지정하지 않은 기본 요청은 Pangram 3가 지원 중단될 때까지 이전 과금 체계를 사용하여 Pangram 3로 계속 라우팅됩니다).

따라서 Pangram의 설명에 따르면, 모델명을 지정하지 않고 Pangram을 호출한 플랫폼은 9월 내내 3.3.2 버전을 사용했으며, Pangram의 계획대로라면 9월 30일 이후에는 해당 버전을 받지 못하게 됩니다.

하지만 실제로 이 전환이 이루어졌는지는 확인할 수 없었습니다. 10월 2일 기준으로 저희가 확인한 마이그레이션 가이드(8월 7일 최종 수정), 출시 게시글, Pangram 4 모델 카드, API 참조 문서 중 어느 곳에서도 전환이 완료되었다고 명시하지 않았습니다. API 참조 문서에는 현재 어떤 모델인지 밝히지 않은 채 "follows Pangram's current default model" (Pangram의 현재 기본 모델을 따름)이라고만 명시된 "default" 설정이 설명되어 있습니다. 게다가 이 내용 역시 API에 관한 설명일 뿐, 전환 기간 동안 Pangram 자체 웹사이트에서 어떤 모델을 사용했는지는 밝히지 않았습니다.

제한적인 범위이긴 하지만 눈으로 확인할 수 있는 단서가 하나 있습니다. Pangram의 마이그레이션 가이드에 따르면 세그먼트별("window") 라벨이 다음과 같이 변경되었습니다: "AI-Assisted replaces the previous Lightly AI-Assisted and Moderately AI-Assisted labels." (AI-Assisted가 기존의 Lightly AI-Assisted 및 Moderately AI-Assisted 라벨을 대체합니다). 또한 API를 통한 Pangram 4 결과는 버전 값으로 "4.0"을 반환합니다. 따라서 이전 결과의 특정 단락에 "Moderately AI-Assisted"라고 표시되었는데 이후 결과에서는 오직 "AI-Assisted"라고만 표시된다면, 두 결과는 같은 모델에서 나온 것이 아닙니다. 여기에는 두 가지 한계가 있습니다. 첫째, 이는 전체 판정이 아니라 개별 세그먼트에 붙는 라벨에 관한 것이며, Pangram 4 자체 API 예시에서도 전체 판정은 여전히 "AI Assisted"로 표시됩니다. 둘째, 2025년 12월 Pangram 공지에 따르면 무료 사용자에게는 "lightly AI-assisted text as Human, and moderately AI-assisted text as AI-generated" (경미한 AI 보조 텍스트는 Human으로, 중간 수준의 AI 보조 텍스트는 AI-generated로 표시)되었으므로, 무료 계정에서는 기존의 두 단계를 아예 본 적이 없을 수도 있습니다.

업데이트 내용은 대체로 포괄적인 표현으로 설명되어 있습니다. GPTZero는 "on a variety of domains" (다양한 영역에서) 오탐률을 줄였다고 밝히고 있으며, Copyleaks는 11.0 버전이 "improves detection accuracy" (감지 정확도를 높이고) 최신 언어 모델을 지원한다고 설명합니다. 하지만 특정 에세이의 점수가 어느 방향으로 움직일지는 양측 모두 언급하지 않았습니다.

따라서 이러한 업데이트 이후 점수가 떨어졌다고 해서 여러분의 수정이 효과가 있었다는 증거는 되지 못합니다. 반대로 점수가 올랐다고 해서 수정을 잘못했다는 뜻도 아닙니다. 두 점수에는 텍스트 수정과 모델 변경의 영향이 뒤섞여 있으며, 결과 보고서의 내용만으로는 이를 구분해 낼 방법이 없습니다.

1. 검사 날짜를 대조해 보십시오. 각 검사를 진행한 날짜를 적어 두고 위의 날짜들과 대조해 보아야 합니다. 그 날짜들 중 하나가 두 검사 사이에 걸쳐 있다면, 두 수치는 완전히 다른 두 계측기에서 나온 측정값으로 간주해야 합니다.
2. 설정이 일치했는지 확인하십시오. 일부 도구에서는 검사자가 모드를 직접 선택할 수 있습니다. GPTZero의 공지에는 "Advanced Scan" (고급 스캔) 모드가 언급되어 있으며, Originality.ai는 모델별("Classic") 검사나 0%, 5%, 15%, 25%, 40%의 "AI Allowance" (AI 허용치) 설정을 제공합니다. 모드가 다르면 측정값도 달라집니다.
3. 수정의 효과를 확인하려면 같은 날 두 버전을 모두 검사하십시오. 이전 초안과 새 초안을 동일한 도구와 동일한 설정으로 연달아 검사해야 합니다. 그래야 두 검사 모두 거의 확실하게 동일한 모델을 사용하게 되며(9월 18일~20일과 같은 전환기에는 결과가 갈릴 수 있으므로, 결과에 모델명이나 버전이 표시된다면 두 검사가 일치하는지 확인하십시오), 점수 차이가 오롯이 텍스트 변경에서 비롯됩니다. 다만 이는 해당 도구가 그날 내린 판단만을 보여줄 뿐, 학교에서 사용하는 도구가 어떤 결과를 내놓을지까지 대변하지는 못합니다.
4. 숫자만 기록하지 말고 결과 전체를 보관하십시오. 날짜, 모드, 표시된 모델명이나 버전 정보가 모두 포함된 스크린샷이나 보고서 자체를 저장해 두어야 합니다. 따로 메모해 둔 "34%"라는 숫자만으로는 나중에 릴리스 노트와 대조해 볼 수 없습니다.
5. 다른 사람이 검사를 진행했다면 세 가지를 확인하십시오. 어떤 도구를 썼는지, 어느 날짜에 했는지, 그리고 어떤 설정이나 버전을 사용했는지 물어보아야 합니다. 이 세 가지 정보가 없다면 그 수치는 직접 확인한 결과를 포함해 그 어떤 것과도 비교할 수 없습니다.

동일한 파일에 대해 서로 다른 두 도구의 결과가 일치하지 않는 데에는 다른 이유가 작용하며, 이에 대해서는 동일한 텍스트라도 감지기마다 점수가 다른 이유 글에서 다루고 있습니다. GPTZero 결과에 표시되는 라벨의 의미에 대해서는 GPTZero의 Mixed와 AI Polished: 각 라벨이 의미하는 것을 참고하시기 바랍니다.

이전 검사 결과도 새 모델에 맞게 업데이트되나요? 여기서 인용한 세 곳의 공지 중 이전 결과가 다시 채점된다고 밝힌 곳은 없습니다. 저장된 결과는 검사 당일에 실행되었던 모델의 측정값으로 보아야 합니다. 비교하자면, Turnitin의 모델 릴리스 노트에는 "This release will not retroactively update previously-generated AI writing reports." (이번 릴리스는 이전에 생성된 AI writing report를 소급하여 업데이트하지 않습니다)라는 문구가 명시되어 있습니다.

담당 교수님의 검사는 업데이트 전에 이루어졌고 제 검사는 업데이트 후에 이루어졌는데, 어느 쪽이 유효한가요? 어느 한쪽이 다른 쪽을 무효화할 수는 없습니다. 두 수치는 서로 다른 두 모델, 그리고 상이한 설정에서 도출된 측정값입니다. 강의 평가에 반영되는 것은 담당 교수가 진행한 검사이므로, 어떤 도구, 어떤 날짜, 어떤 설정으로 생성된 결과인지 확인하는 것이 실질적으로 도움이 됩니다. 최신 모델을 사용하여 지금 새로 검사를 진행하더라도 이는 당시 검사의 재실행이 아닙니다.

이것이 Turnitin 점수에도 영향을 미치나요? 그렇지 않습니다. Turnitin은 독자적인 모델 릴리스 일정을 가진 별개의 회사입니다. 동일한 방식으로 Turnitin의 업데이트 날짜를 대조해 보시기 바랍니다.

• GPTZero, GPTZero Release Notes (Model and API) (GPTZero 릴리스 노트(모델 및 API)), 2026년 9월 13일 (Model 4.10b) 및 2026년 8월 1일 (Model 4.8b) 항목, 2026년 10월 2일 확인.
• GPTZero, Introducing GPTZero 4o (GPTZero 4o 소개), 2026년 9월 24일 자 게시글, 2026년 10월 2일 확인.
• Copyleaks, What's New (API 문서), 2026년 9월 22일 및 2024년 4월 16일 항목, 2026년 10월 2일 확인.
• Canisius University 교수 역량 개발 및 혁신 센터(Center for Faculty Development and Innovation), Copyleaks AI Text Detector Model Update (Copyleaks AI 텍스트 감지기 모델 업데이트), 2026년 9월 14일 자 게시글, 2026년 10월 2일 확인.
• Pangram, Pangram 4 Migration Guide (Pangram 4 마이그레이션 가이드, 2026년 8월 6일) 및 Introducing Pangram 4 (Pangram 4 소개, 2026년 7월 29일), Introducing Pangram 3.0 with AI assistance detection (Pangram 3.0 및 AI 보조 감지 소개, 2025년 12월 11일), Pangram API 참조 문서의 AI Detection 및 Models 페이지, 모두 2026년 10월 2일 확인.
• Originality.ai, Introducing AI Allowance (AI Allowance 소개), 2026년 10월 2일 확인.