AI를 아이디어에만 썼는데, 제 에세이는 여전히 표시될까요?

많은 학생이 AI를 브레인스토밍이나 개요 작성에만 쓰고 실제 글은 직접 씁니다. 문제는 탐지기가 그 차이를 알아챌 수 있는지입니다. 답은 작동 방식에 달려 있습니다. 탐지기는 여러분의 작업 과정이 아니라 최종 산문을 읽습니다. 글이 AI다운 통계적 패턴을 띠고 있다면, AI를 어떻게 썼든 표시될 수 있습니다.

HumanPen 팀

· 4분

간단한 답

탐지기는 과정이 아니라 최종 글을 읽습니다. AI로 아이디어를 정리했지만 모든 문장을 직접 썼다면, 탐지기는 여러분이 쓴 문장을 평가합니다. 그 문장들이 모델이 AI 생성 글과 연관짓는 단어 확률 패턴을 우연히 띠고 있다면, 에세이는 여전히 표시될 수 있습니다. 탐지기는 AI가 브레인스토밍, 개요 작성, 정리를 도왔는지 알 수 없습니다. 작업 과정을 보지 못하기 때문입니다. 오직 산문만 봅니다. Turnitin의 FAQ는 저작 방식이 아니라 단어 확률로 글 구간을 분류하는 과정을 설명합니다. 따라서 답은 AI를 어떻게 썼는지가 아니라, 여러분이 만든 최종 글이 모델이 기계 작성과 연관짓는 통계적 패턴을 띠고 있는지에 달려 있습니다.

탐지기가 실제로 읽는 것

Turnitin의 FAQ가 설명하는 탐지 파이프라인은 다음과 같습니다:

"When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated. Each qualifying sentence within these segments inherits the segment's score. Since segments overlap, some sentences may have multiple scores, which are then pooled into a single score. These sentence scores are further aggregated and used to compute the overall document AI writing score." (논문이 Turnitin에 제출되면, 제출물에서 문장을 추출해 서로 겹치는 구간으로 나누어 예측 분석을 진행합니다. 각 구간은 AI 탐지 모델로 분류되어 0과 1 사이의 값을 받으며, 이 값은 텍스트가 사람이 쓴 것일 확률과 AI가 생성한 것일 확률을 나타냅니다. 이 구간 안의 점수 산정 대상 문장은 자신이 속한 구간의 점수를 물려받습니다. 구간이 겹치기 때문에 어떤 문장은 여러 점수를 받을 수 있으며, 그 점수들은 하나로 합쳐집니다. 이 문장 점수들은 다시 종합되어 문서 전체의 AI 작성 점수를 계산하는 데 쓰입니다.)

탐지기는 문장을 추출하고, 구간으로 나누고, 각 구간을 확률로 분류하고, 결과를 종합합니다. 계획, 브레인스토밍, 정리에 AI 도구를 썼는지 확인하는 단계는 없습니다. 글 자체에는 작업 과정에 대한 메타데이터가 없습니다. 모델은 단어 배열을 읽고 분류합니다.

점수 산정 대상 산문만 분석됩니다

FAQ에 명시된 분석 대상은 다음과 같습니다:

"This qualifying text includes only prose sentences, meaning that we only analyze blocks of text that are written in standard grammatical sentences and do not include other types of writing such as lists, bullet points (short non-sentence structures), or other non-sentence structures." (이 점수 산정 대상 텍스트는 오직 산문 문장만 포함합니다. 즉, 표준 문법적 문장으로 쓰인 텍스트 블록만 분석하며, 목록, 글머리 기호(짧은 비문장 구조) 같은 다른 유형의 글이나 다른 비문장 구조는 포함하지 않습니다.)

AI로 개요나 글머리 기호를 만들고 산문은 직접 썼다면, AI가 만든 개요는 점수 산정 대상 텍스트에 들어가지 않습니다. 탐지기는 제출물의 산문 문장만 분석합니다. 개요, 글머리 기호, 그 밖의 비산문 내용은 AI 분석에서 제외됩니다. 그러므로 한 가지 의미에서는, AI를 초안 작성이 아니라 개요 작성에 쓰는 쪽이 더 안전합니다. 개요 자체는 분석되지 않기 때문입니다. 하지만 그 개요를 바탕으로 여러분이 쓴 산문은 완전히 분석됩니다. AI로 개요를 쓰는 것이 밝혀야 할 사항인지는 별개의 질문입니다: 다시 쓰기 도구에 문서를 통과시키면 밝혀야 할 사항이 바뀌는가.

직접 쓴 글이 표시될 때

한 글자까지 직접 썼더라도, 글의 특정 특성이 표시를 유발할 수 있습니다. FAQ가 나열하는 특성은 다음과 같습니다:

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (때로는 거짓 양성(사람이 쓴 글을 AI가 생성한 것으로 잘못 표시하는 경우)은 구조적 변화가 별로 없는 내용, 글자 그대로 자신을 반복하는 텍스트, 또는 새로운 아이디어 없이 바꾸어 쓴 텍스트를 포함할 수 있습니다.)

다음 문장입니다: "If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (우리 지표가 그런 글에서 더 높은 비율의 AI 작성을 보여 준다면, 표시된 백분율을 살필 때 그 점을 고려하시길 권합니다.)

직접 쓴 산문이 AI 개요가 제시한 구조를 가까이 따르면, 구조적 변화가 적거나 반복적인 패턴을 띨 수 있습니다. 텍스트는 사람이 쓴 것이지만, 통계적 특성은 모델이 AI 생성 글과 연관짓기로 학습한 것과 비슷할 수 있습니다. 이것이 과정과 결과 사이의 간극입니다. 글은 여러분이 썼지만 탐지기는 결과를 읽고, 결과는 과정이 사람의 것이어도 AI다운 패턴을 띨 수 있습니다. Turnitin에서 유일하게 과정을 살피는 기능은 Clarity입니다: Turnitin Clarity가 글을 어떻게 썼는지 기록하는 것.

점수가 전부가 아닙니다

Turnitin의 FAQ가 또 밝히는 내용은 다음과 같습니다:

"Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (그러므로, AI 작성 지표의 백분율은 조치의 유일한 근거나 교수의 확정적 채점 기준으로 쓰여서는 안 된다는 점을 강조해야 합니다.)

AI를 아이디어에만 썼는데 에세이가 표시되었다면, 이 문장은 지도교수님과 대화할 근거가 됩니다. 작업 과정을 설명하고, 메모와 초안을 보여주고, 점수는 확정적 판결이 아니라 하나의 자료점이라는 공식 지침을 짚어 보일 수 있습니다. 탐지기는 글만 읽기 때문에 "AI가 생각을 도왔다"와 "AI가 이것을 썼다"를 구별하지 못합니다. 사람 검토자는 구별할 수 있으며, 표시되었지만 직접 쓴 글입니다는 그 검토자 앞에 내놓을 것을 준비하는 글입니다.

여러분에게 주는 의미

지금까지 살펴본 내용을 정리하면:

  • 탐지기는 작업 과정이 아니라 최종 글을 읽습니다. AI를 아이디어에 썼다고 해서 글이 탐지에서 면역되지는 않습니다.
  • 점수 산정 대상 산문만 분석됩니다. AI가 만든 개요와 글머리 기호는 AI 분석에서 제외됩니다.
  • AI가 제시한 구조를 가까이 따른 직접 쓴 산문은 구조적 변화가 적을 수 있으며, 이는 거짓 양성이 잦은 특성입니다.
  • Turnitin 자체 FAQ에 따르면, AI 점수는 조치의 유일한 근거로 쓰여서는 안 됩니다.
  • 표시되었다면, 작업 과정과 버전 이력은 지도교수님과의 대화에서 증거가 될 수 있습니다.

어느 문단이 표시되었는지 보여 주는 Turnitin 보고서가 있다면, 보고서를 가져와 해당 문단만 작업하십시오. 조건에 맞는 문단은 추가 비용 없이 다시 실행할 수 있습니다.

계속 읽기