Turnitin 점수는 성적인가? 유사도 점수가 실제로 하는 일과 하지 않는 일

유사도 점수는 제출한 텍스트 가운데 Turnitin 데이터베이스와 일치한 비율입니다. Turnitin은 그것이 "does not determine whether plagiarism has occurred," (표절이 발생했는지를 판정하지 않는다)고 분명히 밝히며, AI 지표 FAQ에도 AI 비율에 대해 똑같은 표현이 등장합니다. 두 숫자 모두 성적이 아닙니다. 성적은 교수자가 과제 기준과 학교 정책을 과제물에 적용하는 과정에서 나옵니다. 보고서는 그 검토의 입력값일 뿐, 결과물이 아닙니다.

Turnitin의 Similarity 제품 페이지는 이를 정확하게 정의합니다.

"The Similarity Report's similarity score is the percentage of text in a submission that matched against other sources." (Similarity Report의 유사도 점수란 제출물의 텍스트 가운데 다른 출처와 일치한 비율을 말합니다.)

그리고 같은 페이지에는 학생들이 좀처럼 보지 못하는 문장이 하나 더 붙습니다.

"There is no 'right' or 'wrong' number to receive as a score." (점수로 받는 숫자에 옳고 그름은 없습니다.)

Warwick 대학의 공식 지침은 교수자 쪽에서 같은 이야기를 합니다. "The score received does not automatically determine that plagiarism has been committed – there is no 'score' to aim for." (받은 점수가 표절이 이루어졌다고 자동으로 판정하지는 않으며, 목표로 삼아야 할 '점수'는 따로 없습니다.) 보고서가 존재하는 이유는 채점자가 제출된 논문과 의심되는 출처를 대조하고 '학술적 판단'을 내려 의견에 도달할 수 있도록 하기 위해서입니다. 그 숫자는 비교를 설명할 뿐, 판결이 아닙니다(유사도 보고서를 읽는 법을 다룬 가이드에서 이 작동 방식을 더 깊이 설명합니다).

Turnitin은 페이지에 있는 다른 숫자에 대해서도 같은 말을 합니다.

"Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (따라서 AI 작성 지표의 비율은 조치를 위한 유일한 근거나 확정적인 채점 기준으로 교수자가 사용해서는 안 된다는 점을 강조하지 않을 수 없습니다.)

"Not... a definitive grading measure" (확정적인 채점 기준이 아님) — AI 비율 역시 그 자체로 무언가를 결정하는 채점 자료가 아닙니다. AI 보고서와 유사도 보고서를 다룬 가이드에서 두 비율이 서로 독립적이라는 점을 설명하고 있습니다. 여기서 중요한 것은 둘 다 성적이 아니라는 사실입니다.

교수자는 과제 안내, 채점 기준표, 그리고 학교의 학술 진실성 정책에 따라 채점합니다. 유사도 보고서와 AI 보고서는 그 검토에 자료로 들어갑니다. Turnitin 자료는 이들을 신호를 주는 도구이자 "one piece of an investigative puzzle" (조사 퍼즐의 한 조각)이라고 설명합니다. 그러나 성적을 적는 사람은 교수자이며, 성적부에, 과제 기준을 앞에 두고 적습니다.

학생에게 생기는 실질적인 결과 두 가지:

• 점수가 높다고 해서 자동으로 나쁜 성적이 나오지는 않습니다. 제대로 인용한 인용문도 일치로 잡히고, 인용이 많은 학문 분야도 있습니다. 교수자가 참고문헌이나 인용 부분을 제외할 수도 있습니다(필터와 제외 설정은 관련 가이드에서 다룹니다).
• 점수가 낮다고 해서 자동으로 좋은 성적이 나오지는 않습니다. 보고서는 입력값의 하나일 뿐이며, 내용과 논증, 과제 안내의 준수 여부는 그 자체로 평가됩니다.

보편적인 규칙이 없기 때문에 정해진 공식도 없습니다. 똑같은 40%가 어떤 과제에서는 흔한 일이고(인용이 많은 문헌 검토), 다른 과제에서는 문제가 됩니다(출처 사용이 허용되지 않는 수학 증명). 학교가 그 특정 과제에 기준값을 정해 두었을 수도 있습니다. Turnitin의 입장은 해석은 교수자의 몫이라는 것입니다. 보고서는 "provide a summary of matching or highly similar text" (일치하거나 매우 유사한 텍스트의 요약을 제공한다)고 되어 있고, 교수자는 이를 "as a tool within their review process to make their own determination if any academic misconduct has occurred." (학술적 부정행위가 있었는지 스스로 판단하기 위해 검토 과정에서 사용하는 도구로) 사용합니다. 성적에 대한 질문은 언제나 과제 자체의 규칙이 답하며, 보고서가 답하지 않습니다.

• 보고서가 아니라 과제 자료에서 시작하십시오. 과제 안내와 채점 기준표, 그리고 명시된 학교 기준값이 이 특정 과제에서 점수가 무엇을 의미하는지 정의합니다.
• 비율보다 먼저 피드백을 확인하십시오. 교수자는 과제물에 의견을 남깁니다. 보고서 속 교수자 의견을 다룬 가이드에서 그 의견이 어디에 있고 점수와 함께 어떻게 읽으면 되는지 설명합니다.
• 둘을 분리하는 질문을 하십시오. "이 과제에서 유사도 점수는 성적과 어떤 관계가 있나요?"는 정당한 질문입니다. "제 성적이 왜 점수보다 낮죠?"는 둘이 같은 척도에 있다고 전제하지만, 실제로는 그렇지 않습니다.
• AI 지표가 대화에 들어와 있다면 같은 분리가 적용됩니다. AI 비율에 대해서는 "should not be used as the sole basis for action" (조치를 위한 유일한 근거로 사용되어서는 안 된다)는 공식 표현이 있으므로, 실제로 표시된 문단에 근거를 둔 대화가 숫자에 근거를 둔 대화보다 더 단단합니다(AI 표시 이후의 대화는 해당 가이드에서 다룹니다).

Turnitin 점수는 성적이 아닙니다. 유사도 점수는 일치한 텍스트의 비율이며, Turnitin은 그것이 표절 여부를 판정하지 않고 옳은 숫자나 그른 숫자도 없다고 명시합니다. AI 비율은 명시적으로 확정적인 채점 기준이 아닙니다. 성적은 교수자가 과제 안내와 채점 기준표, 학교 정책을 적용해 매기는 것이며, 보고서는 검토의 입력값 중 하나입니다. 점수와 성적이 맞지 않을 때는 과제 자료를 읽고, 피드백을 읽고, 둘을 분리해서 묻는 질문을 하십시오.