Turnitin 은 부정행위를 어떻게 찾아낼까? 마감일 검사 원리 (Eric & Jane 사례로 설명)

Turnitin 은 과제를 제출한 학생들의 논문을 서로 비교하는 peer-to-peer 검사로 협저작 위반을 찾아냅니다. 이 검사는 대부분의 과제에서 마감일 이후 자동으로 돌아갑니다. Turnitin 공식 학생 가이드는 협저작 위반을 "학생의 논문이 같은 과제를 제출한 다른 학생의 논문이나 이전 제출된 논문과 매칭될 때 식별됩니다"라고 정의하고, 헬프센터에서는 이 비교가 "일반적으로 과제 마감일이 지난 후에야 자동으로 이루어집니다"라고 설명합니다. 마감 후 점수가 급등하는 건 새로운 혐의가 아니라 이 검사가 설계대로 작동한 결과일 뿐입니다.

공식 학생 가이드 (Understanding the similarity score for students) 는 이렇게 정의를 내립니다:

"Collusion is typically identified when a student's work matches with another student's submission on the same assignment or to previously submitted papers." (공모는 일반적으로 한 학생의 과제가 동일한 과제의 다른 학생 제출물이나 이전에 제출된 논문과 일치할 때 적발됩니다.)

여기서 두 가지를 기억하세요. 첫째, 매칭 상대는 다른 학생의 제출물이지 웹사이트가 아닙니다. 둘째, 이전에 제출했던 논문 (다른 과목에서 낸 자신의 이전 작업 포함 — 이는 자기표절로 이어질 수 있음; 아래에서 더 설명) 과도 비교됩니다. 협저작 검사는 별도의 AI 검출기가 아니라, 논문 대 논문을 비교하는 유사도 데이터베이스 그 자체입니다.

Turnitin 공식 가이드는 두 학생 사례를 들어 이 시스템이 어떻게 작동하는지 보여줍니다:

"Consider the following scenario: Eric acquired a copy of his classmate Jane's paper. Eric submits Jane's paper as his own and receives a similarity score of 25%. Jane, who originally wrote the paper, submits her work a few days later and receives a 100% similarity score." (다음과 같은 시나리오를 고려해 보십시오: Eric 이 동료 Jane 의 논문을 입수했습니다. Eric 은 Jane 의 논문을 자신의 것으로 제출하여 25% 의 유사점수를 받았습니다. 원래 논문을 작성한 Jane 은 며칠 후 자신의 작업을 제출하여 100% 유사점수를 받았습니다.)

가이드는 타이밍에 대해 이렇게 설명합니다:

"Turnitin can identify that collusion has taken place in this scenario by running a final similarity check against all submitted assignments after the due date." (Turnitin 은 마감일 이후 모든 제출된 과제를 대상으로 최종 유사점 검사를 실행하여 이 시나리오에서 공모가 발생했음을 확인할 수 있습니다.)

여기를 잘 읽어보세요. 통념과 반대로, 복제한 Eric 은 25%, 원저자 Jane 은 100% 가 나옵니다. 마감 전에 검사가 돌아갔다면 Eric 의 논문은 인터넷과만 매칭됐을 뿐, 아직 다른 학생이 제출하지 않았기 때문입니다. 마감 후 최종 검사에서 Jane 의 논문이 Eric 의 복사본을 포함한 모든 제출물과 비교되면서 그녀의 점수가 100% 로 뜁니다. 복제한 사람의 낮은 점수가 무죄 증거가 아니고, 원저자의 높은 점수가 유죄 증거도 아닙니다 — 숫자는 저자 identity 가 아니라 제출 순서를 반영할 뿐입니다.

Turnitin 헬프센터는 전용 아티클 "Why are papers submitted to the same Turnitin assignment not matching to each other?" 에서 지연 이유를 설명합니다:

"Papers submitted to the same Turnitin assignment do not match against each other immediately upon submission." (동일한 Turnitin 과제에 제출된 논문들은 제출 시점에서 서로 즉시 비교되지 않습니다.)

"To prevent students from matching against their own drafts, peer-to-peer comparison (known as collusion checking) typically happens automatically only after the assignment due date has passed." (학생들이 자신의 초안과 일치하는 것을 방지하기 위해, 동료 간 비교 (공모 확인이라고 함) 는 일반적으로 과제 마감일이 지나야 자동으로 수행됩니다.)

"If your Standard (Classic) Assignment is set to allow resubmissions, all Similarity Reports are automatically regenerated within one hour after the assignment due date and time." (재제출이 허용되도록 설정된 Standard (Classic) Assignment 의 경우, 모든 Similarity Report 는 과제 마감일과 시간 이후 1 시간 이내에 자동으로 재생성됩니다.)

마감 시점은 두 가지 목적을 가집니다. 언제 제출했든 모든 학생이 동일한 수준의 심사를 받고, 학생 자신의 이전 초안은 제외되어 재제출이 불이익이 되지 않습니다. 마감 전에는 리포트가 외부 소스 (인터넷, 정기간행물, 리포지토리) 만 비교하므로, 동료 학생은 아직 비교 대상에 포함되지 않습니다.

동일한 헬프센터 페이지에서 이런 결과가 나타난다고 설명합니다:

"Similarity Reports generated before the due date only check submissions against external sources... meaning student papers will not match against one another until the deadline passes." (마감일 전에 생성된 Similarity Report 는 외부 소스에 대해서만 확인합니다... 즉, 학생 논문은 마감일이 지나야 서로 일치합니다.)

월요일에 18% 였던 리포트가 목요일에 72% 가 된 거라면, 대부분 협저작 검사가 리포트를 재생성한 것입니다 — 동기 논문과의 매칭은 원래 존재했지만 최종 실행 전에는 보이지 않았을 뿐입니다. 이것이 마감일 이후 점수 변동 가이드의 배경 메커니즘이며, 그 가이드는 현상을 다루고 여기서는 메커니즘을 설명합니다.

Turnitin 의 협저작 블로그에서는 이 검사를 가능하게 하는 설정을 설명합니다:

"The standard and institutional paper repository must be selected to compare student work against previous submissions. If 'no repository' is selected, a collusion check cannot take place." (학생 작업을 이전 제출물과 비교하려면 표준 및 기관 논문 저장소를 선택해야 합니다. '저장소 없음'이 선택되면 공모 확인을 수행할 수 없습니다.)

학교에서 리포지토리를 활성화하지 않았다면 검사가 아예 돌아갈 수 없습니다 — "동료 매칭"이 다른 이유로 해석될 수 있는 또 하나의 이유입니다.

"다른 학생 논문과 매칭"으로 나타나는 두 가지 패턴이 있는데, Turnitin 문서에서는 이를 구분합니다. 공식 블로그 (Effective solutions) 는 Celine 사례를 듭니다:

"Celine has submitted the same paper to multiple classes... She's checked her Similarity Report, which shows a match against another student in her institution... This is an example of self-plagiarism." (Celine 은 동일한 논문을 여러 클래스에 제출했습니다... 그녀는 Similarity Report 를 확인했으며, 이는 그녀의 기관에 있는 다른 학생과 일치하는 것으로 나타납니다... 이것은 자기 표절의 예입니다.)

교사용 해석 가이드에서는 반대 사례를 설명합니다:

"A student may have used Turnitin to submit drafts of the same paper, meaning their final draft has resulted in a score of 100%... the instructor can rectify this issue by excluding the student's previous submissions from the Similarity Report." (학생이 Turnitin 을 사용하여 동일한 논문의 초안을 제출했을 수 있으므로 최종 초안은 100% 점수가 나왔습니다... 교수는 학생의 이전 제출물을 Similarity Report 에서 제외하여 이 문제를 해결할 수 있습니다.)

협저작 블로그에서는 경계를 이렇게 그립니다:

"Turnitin automatically excludes papers submitted by the same student to the same assignment, preventing previous drafts from skewing similarity scores." (Turnitin 은 이전 초안이 유사점수에 영향을 미치지 않도록 동일한 학생이 동일한 과제에 제출한 논문을 자동으로 제외합니다.)

정리하면: 같은 학생, 같은 과제 → 초안은 자동으로 제외; 같은 학생, 다른 과목 → 자기표절이 매칭으로 나타남; 다른 학생, 같은 작업 → 협저작 시나리오. 만약 매칭된 논문이 자신이 다른 과목에서 낸 거라면 협저작 검사가 아니라 자기표절이며, 이는 다른 대화 (그리고 다른 해결책: 지도교수가 이전 제출을 제외) 가 필요합니다.

Turnitin 블로그는 매칭이 무엇을 증명하는지 조심스럽게 설명합니다:

"A high similarity score does not always suggest that a piece of writing has been plagiarized, just as a low similarity score does not always indicate that no plagiarism has occurred." (유사점수가 높다고 해서 반드시 표절이 있었다는 것을 의미하지는 않으며, 유사점수가 낮다고 해서 반드시 표절이 없었다는 것을 의미하지도 않습니다.)

협저작 검사 포스팅에서는 정황 증거로 성급한 결론을 내리지 말라고 경고합니다:

"Sometimes roommates using the same Wi-Fi router take the class together so this isn't necessarily a sign of collusion. However, if two or more students normally log in with different IP addresses, but suddenly are using the same IP address and starting exams at nearly the same time, it suggests [unauthorized] collaboration." (때로는 같은 Wi-Fi 라우터를 사용하는 룸메이트가 함께 수업을 듣기도 하므로 이것이 반드시 공모의 징후는 아닙니다. 그러나 두 명 이상의 학생이 일반적으로 서로 다른 IP 주소로 로그인하다가 갑자기 같은 IP 주소를 사용하고 거의 동시에 시험을 시작한다면 [무단] 협력이 의심됩니다.)

공유 Wi-Fi 나 유사한 표현은 조사를 위한 힌트일 뿐 판결이 아닙니다. 리포트는 일치하는 텍스트를 플래그하거나 제외하며, 의미는 사람 (지도교수) 이 판단합니다. 여러분의 답변은 초안과 수정 이력으로 무장한 대화여야 합니다 — 이의제기와 버전 히스토리 가이드에서 설명한 것과 같은 증거 전략입니다. "동료와 매칭"을 반박할 수 없는 유죄 판결로 받아들이거나 검사를 피하려고 작업을 변조해서는 안 됩니다 — 최종 비교를 피하려는 행동이야말로 이 검사가 잡아내도록 설계된 바로 그 행동입니다.

헬프센터는 타이밍을 과제 설정과 연결합니다:

"If your Standard (Classic) Assignment is set to allow resubmissions, all Similarity Reports are automatically regenerated within one hour after the assignment due date and time... If your assignment is configured to generate reports immediately but treats the first submission as final, Turnitin will not automatically regenerate reports on the due date." (재제출이 허용되도록 설정된 Standard (Classic) Assignment 의 경우, 모든 Similarity Report 는 과제 마감일과 시간 이후 1 시간 이내에 자동으로 재생성됩니다... 과제가 즉시 보고서를 생성하도록 설정되어 있지만 첫 번째 제출을 최종로 처리하는 경우, Turnitin 은 마감일에 보고서를 자동으로 재생성하지 않습니다.)

새로운 Standard Assignment 에서는 Refresh Reports 버튼으로 강제로 일찍 돌릴 수도 있습니다 — 헬프센터에서 필요시 모든 것을 교차 비교한다고 설명합니다. 학생에게 실질적인 요점은: 마감 후 리포트가 바뀌는지 여부는 여러분이 무엇을 했는가가 아니라 과제가 어떻게 설정됐는지에 달렸습니다. 점수가 변한다면 협저작 검사가 가장 유력한 이유입니다.

Turnitin 의 협저작 감지는 같은 과제를 제출한 학생들 간의 peer-to-peer 비교이며, 대부분의 과제에서는 마감일 이후 자동으로 돌아갑니다. 그래서 Eric & Jane 시나리오에서 원저자는 100%, 복제한 사람은 25% 가 나옵니다 — 숫자는 저자 identity 가 아니라 제출 순서를 따릅니다. 마감 후 점수가 급등하는 건 대부분 최종 교차검사가 리포트를 재생성했기 때문이며, 동료와의 매칭은 대화가 시작되는 지점이지 판결이 아닙니다. 매칭된 논문이 다른 과목에서 낸 자기 것이라면 자기표절이므로 지도교수가 제외할 수 있습니다. 리포지토리가 비활성화되었다면 검사는 아예 돌아가지 않습니다. 매칭이 나타나면 회피가 아니라 증거와 논의로 대응하세요.