Turnitin Authorship와 AI 탐지: 서로 다른 두 시스템을 제대로 짚어드립니다
Turnitin 리포트에 Authorship 또는 Originality 플래그가 표시되어 있다고 해서 탐지기가 AI 텍스트를 찾아낸 것은 아닙니다. Authorship은 메타데이터와 언어 포렌식 분석을 사용해 과제물이 정말 학생 본인이 쓴 것인지를 판단하는 별개의 장치입니다. AI 탐지는 전혀 다른 질문에 답합니다. 이 글에서는 두 시스템을 모두 설명하고, 각각이 알려주는 것과 알려주지 못하는 것, 그리고 리포트에서 둘이 뒤섞이지 않게 하려면 어떻게 해야 하는지를 다룹니다.
HumanPen 팀
· 4분
Turnitin은 서로 다른 두 가지 검사를 실행합니다
Turnitin 리포트를 살펴보면 한 가지가 아닌 여러 종류의 결과가 보일 수 있습니다. Turnitin은 제출된 과제물을 읽고 하나의 판정을 찍어 주는 단일 탐지기가 아닙니다. 서로 다른 두 질문에 답하는, 별개의 두 시스템을 운영합니다.
Authorship(Originality 환경의 일부)이 묻는 것은 “이 과제물을 실제로 학생이 썼는가”입니다. AI 탐지가 묻는 것은 “이 텍스트가 AI 작성 도구로 생성되었는가”입니다. 둘은 다른 방식을 쓰고, 다른 것에 반응하며, 서로를 대체할 수 없습니다. 리포트에서 Authorship 항목에 플래그가 붙었다면, 그것은 AI 탐지에 걸린 것과 같은 일이 아닙니다.
Authorship이란 무엇인가
Authorship은 제출된 과제물이 정말로 제출한 학생이 쓴 것인지 확인하는 Turnitin의 장치입니다. 돈을 받고 대필해 주는 사람, 과제 대행 업체, 친구가 대신 써 준 과제물을 잡아낼 수 있는 검사가 바로 이것입니다. AI를 찾는 검사가 아닙니다.
Turnitin은 이 장치를 다음과 같이 설명합니다. "Authorship, on the other hand, uses metadata as well as forensic language analysis to detect if the submitted assignment was written by someone other than the student. It will not be able to indicate if it was AI written; only that the content is not the student's own work." (Authorship은 한편으로 메타데이터와 언어 포렌식 분석을 함께 사용해, 제출된 과제물이 학생이 아닌 다른 사람이 쓴 것인지를 탐지합니다. 다만 그것이 AI가 쓴 것인지는 알려주지 못하며, 알려주는 것은 그 내용이 학생 본인의 작업물이 아니라는 점뿐입니다.)
여기에는 두 가지 요소가 함께 작동합니다. 첫째는 메타데이터입니다. 파일에 담겨 있는 정보로, 누가 작업했는지, 어떤 기기에서 작업했는지, 어느 시간대에 작업했는지를 기록할 수 있습니다. 둘째는 언어 포렌식 분석으로, 과제물의 문장과 그 학생에게 알려진 글쓰기 패턴을 비교합니다. 이 둘이 함께 저작자에 대한 판단을 뒷받침합니다. 이 문서가 학생 본인의 작업물인가, 아닌가 하는 판단입니다. Turnitin은 바로 그 흔적의 더 온전한 버전을 다른 곳에서도 수집합니다. Turnitin Clarity가 과제물을 어떻게 썼는지에 대해 무엇을 기록하는지
이 판단에는 중요한 의미에서 이분법적인 성격이 있습니다. 누가 썼는지를 정하는 것이지, 어떻게 쓰였는지를 정하는 것이 아닙니다. 사람이 대필한 과제물이든 친구가 써 준 과제물이든, AI가 전혀 관여하지 않았더라도 둘 다 Authorship에서는 탈락합니다.
AI 탐지와 어떻게 다른가
차이는 각 시스템이 답하도록 만들어진 질문으로 갈립니다. AI 탐지는 텍스트 자체를 살펴 AI 작성 도구가 생성했을 확률을 판단합니다. Authorship은 파일과 그 글쓰기 스타일을 살펴 제출자가 실제 저작자인지를 판단합니다. Turnitin AI 탐지가 무엇을 검사하고 점수가 어떻게 만들어지는지에서는 그 둘 중 앞의 것을 하나씩 짚어 봅니다.
Turnitin은 이것들이 같은 것이 아니라는 점을 분명히 밝힙니다. Authorship에 대해 공식 설명은 이렇게 적고 있습니다. "It will not be able to indicate if it was AI written; only that the content is not the student's own work." (그것이 AI가 쓴 것인지는 알려주지 못하며, 알려주는 것은 그 내용이 학생 본인의 작업물이 아니라는 점뿐입니다.)
이 문장은 분명한 선을 긋습니다. Authorship 플래그는 다른 누군가가 과제물을 썼다는 사실은 알려주지만, 그 누군가가 누구인지는 알려주지 못합니다. 글을 쓸 때 AI가 쓰였는지도 알려주지 못합니다. AI 탐지는 통과하면서 Authorship에서는 탈락하는 일이 충분히 있을 수 있고, 그 반대도 마찬가지입니다. 두 결과는 제출물의 서로 다른 속성을 측정하고 있습니다.
학생에게 어떤 의미인가
학생 입장에서 실질적인 의미는, 한쪽 결과를 다른 쪽 결과인 양 읽어서는 안 된다는 것입니다. 교수자가 Authorship 문제를 제기한다면 쟁점은 과제물을 스스로 썼는지이며, 텍스트가 AI로 생성되었는지가 아닙니다. 교수자가 AI 탐지 문제를 제기한다면 쟁점은 텍스트이며, 파일의 저작 이력이 아닙니다.
이 구분은 실제 상황에서 중요합니다. 대행 서비스에 과제물을 부탁하거나, 초안을 친구에게 넘겨 마무리를 부탁하면 AI가 생성한 문장이 하나도 없는 과제물도 Authorship에서는 탈락할 수 있습니다. 반대로 모든 단어를 스스로 썼더라도 그 문장이 AI 출력과 닮았다면 AI 탐지에서 플래그가 붙을 수 있습니다. 풀어야 할 문제와 그 풀이가 서로 다르며, 둘을 뒤섞으면 리포트에 대응하기가 훨씬 어려워집니다. 리라이팅 도구가 그 선 위의 어디에 놓이는지는 그 자체로 별개의 질문입니다. AI 리라이팅 도구가 대학의 제3자 교정 규정에 포함되는지
리포트를 읽는 방법
리포트를 받으면 먼저 어느 부분이 무엇을 말하는지부터 구분하십시오. Authorship 지표는 Originality 환경 안에 있으며 저작 증거, 메타데이터, 언어 포렌식에 대해 이야기합니다. AI 탐지의 백분율이나 강조 표시는 텍스트가 AI로 생성되었을 가능성에 대한 별개의 점수입니다. Turnitin AI Writing Report를 읽는 방법에서는 그 절반을 지표별로 하나씩 짚어 봅니다.
교수자와 이야기할 때는 알맞은 표현을 쓰십시오. “제가 직접 썼습니다”는 Authorship 지적에 대한 알맞은 답입니다. “플래그는 텍스트에 관한 것이지, 제3자를 거치면서 과정이 어떻게 잘못되었는지에 관한 것이 아닙니다”는 전혀 다른 대화입니다. 이 차이를 설명하면 두 가지가 한꺼번에 이루어집니다. 자신의 리포트를 이해하는 데 도움이 되고, 교수자에게 이 두 시스템의 차이를 알고 있다는 점을 보여 줍니다.
계속 읽기