토론 게시글이 AI로 표시되었을 때: 먼저 무엇이 표시를 유발했는지부터 확인하기

십이주 동안, 매주 같은 형태의 과제, 동료에게 두 번의 답글, 한 번에 200단어. 학위 과정에서 이토록 자주, 그것도 이토록 짧은 분량으로 제출하는 것은 다른 데 없습니다. 그리고 이 두 가지 사실이 문제의 성격을 바꿉니다.

HumanPen 팀

· 12분

짧은 답

Turnitin이 공개한 파일 요건에 따르면, AI Writing Report가 생성되려면 제출물에 장문 형식의 산문이 최소 300단어 포함되어 있어야 합니다. 대상 텍스트에 대한 정의는 "individual sentences contained in paragraphs that make up a longer piece of written work, such as an essay, a dissertation, or an article." (에세이, 학위논문, 논문처럼 더 긴 저작물을 이루는 문단에 담긴 개별 문장)입니다. 220단어 분량의 주간 게시글은 이 기준선 아래에 있습니다. 허용되는 파일 형식은 .docx, .pdf, .txt, .rtf이며, 코스 사이트의 입력란은 여기에 해당하지 않습니다. 따라서 토론 게시글에 수치가 붙었다면, 그 전에 무슨 일이 있었던 것입니다. 무엇이 있었는지 밝혀내는 것이 첫 단계입니다. 흔한 세 가지 답은 전혀 다른 대응을 요구하기 때문입니다.

나머지는 이 질문에 관한 것이고, 그다음은 주간 게시판에서만 생기는 일에 관한 것입니다. 아홉째 주가 되면 여러분은 자신이 앞서 쓴 게시글 여덟 개를 상대로 글을 쓰게 됩니다.

파일 요건의 전문

Turnitin의 AI Writing Report 안내서, "File requirements"(파일 요건)라는 제목 아래에 전체 목록이 있습니다.

  • 파일 크기는 100 MB 미만이어야 합니다
  • 파일에는 장문 형식의 산문이 최소 300단어 포함되어 있어야 합니다
  • 파일은 30,000단어를 초과할 수 없습니다
  • 파일은 지원되는 언어(영어, 스페인어, 일본어, 아랍어)로 작성되어야 합니다
  • 허용되는 파일 형식: .docx, .pdf, .txt, .rtf

여기서 중요한 행은 둘이며, 둘 다 대개 지나칩니다.

300단어 행은 보고서가 존재하는지에 대한 기준선이지, 정확도에 대한 경고가 아닙니다. 같은 안내서는 표시기가 보여줄 수 있는 상태를 나열하며, 그중 하나가 "File didn't meet the requirements" (파일이 요건을 충족하지 못함)이고, 다음과 같이 설명됩니다. "The submission does not meet the file requirements needed to successfully process it for AI writing detection." (제출물이 AI 작성 탐지를 위해 정상적으로 처리하는 데 필요한 파일 요건을 충족하지 못함). 이는 낮은 점수와는 다른 결과입니다. 백분율이 아닙니다. 300단어 기준선에 관한 공식 문장이 하나 더 있고, 날짜와 함께 읽을 만합니다. 2023년 십이월 15일 자 Turnitin 릴리스 노트에는 버그 수정이 기록되어 있습니다. 그 버그는 "allowed submissions that did not meet the file requirements (less than 300 words) to be processed and given an AI writing detection score" (파일 요건을 충족하지 못한 제출물(300단어 미만)이 처리되어 AI 작성 탐지 점수를 받도록 허용함)이었고, 해당 항목은 "this issue has now been resolved" (이 문제는 이제 해결되었습니다)라고 밝힙니다. 버그가 작동하던 십이월 6일부터 15일 사이에 나온 보고서에 대해 같은 항목은 "submissions that contain less than 300 words may result in an AI writing score that is likely less accurate" (300단어 미만의 제출물은 정확도가 떨어질 가능성이 높은 AI 작성 점수로 이어질 수 있음)라고 덧붙입니다. 공식 문장은 둘, 상황은 둘입니다. 300단어 미만에서는 대개 보고서가 나오지 않고, 보고서가 나온 경우에도 공급업체는 그것을 덜 정확하다고 평가했습니다. 짧은 문서에서 Turnitin AI 점수가 얼마나 정확한지에서 정확도 부분을 더 다룹니다.

파일 형식 행은 여러분의 코스에 대해 무언가를 알려주는 부분입니다. 코스 사이트에 입력한 토론 게시글은 .docx도 .pdf도 아닙니다. 이 특정 보고서가 그것을 평가하려면 먼저 파일이 되어야 합니다. 누군가 또는 무언가가 그렇게 했으며, 그 방식이 결과 수치가 무엇을 설명하는지를 결정합니다.

언어 행은 적용 범위에 대한 진술

지원 언어 행에는 네 개가 나옵니다. 영어, 스페인어, 일본어, 아랍어. 아랍어는 2026년 팔월 18일에 추가되었고, 그전에는 세 개였습니다. 이 네 언어 밖의 텍스트는 이 보고서가 잘못 다루는 것이 아닙니다. 이 보고서가 다루지 않는 것입니다.

이 행은 에세이보다 토론 게시판에서 더 큰 역할을 합니다. 여러분의 과정이 다른 언어로 진행되거나, 언어 모듈의 게시판이 학습 중인 언어로 운영된다면, 그곳에 쓴 게시글은 AI Writing Report가 다루는 범위 밖에 있습니다. 따라서 거기에 붙은 백분율은 이 보고서에서 나온 것이 아니며, 곧바로 다음 섹션 표의 두 번째 행으로 넘어갑니다. Turnitin AI 탐지가 다루는 언어Turnitin이 영어가 아닌 제출물에서 AI를 탐지할 수 있는지에서 그 목록 안에 있는 것과 없는 것을 살펴봅니다.

같은 안내서는 범위에 대해 한 줄을 더 덧붙입니다. "Please note that only our English AI detector includes AI paraphrasing and AI bypasser detection capabilities." (영어 AI 탐지기에만 AI 패러프레이징 및 AI 우회 탐지 기능이 포함되어 있음을 유의하십시오). 이는 공급업체가 자사 제품의 범위를 설명하는 것이며, 그 이상도 이하도 아닌 그대로 읽어야 합니다. 여기에서는 어떤 도구가 얼마나 잘 작동하는지에 대한 결론을 내리지 않으며, 이 문장을 계획의 근거로 삼을 것도 아닙니다. 이 문장의 쓸모는 공급업체가 무엇을 찾는다고 말하는지를 아는 데 있습니다.

생성된 텍스트와는 무관하지만 짚어 둘 만한 경로가 하나 더 있습니다. 게시글을 모국어로 작성하고 붙여넣기 전에 영어로 번역하는 경우입니다. 그것이 탐지기에 다르게 읽히는지는 별개의 문제이며, 기계 번역이 AI로 표시되는지에서 다룹니다. 그리고 모국어가 아닌 언어로 쓰면 더 자주 표시된다는 더 넓은 주장은 비원어민의 글이 AI로 표시되는 문제에서 문서와 대조합니다.

그 수치를 만들어냈을 수 있는 세 가지

무슨 일이 있었는가어떻게 보이는가무엇을 물어야 하는가
여러 주차의 게시글이 하나의 문서로 내보내져 함께 제출됨한 학기를 아우르는 단일 백분율이 게시글 하나에 관한 것처럼 제시됨파일에 어떤 주차가 들어 있었는지, 그리고 파일을 볼 수 있는지
Turnitin의 AI Writing Report가 아닌 다른 탐지기가 실행됨뒤에 Turnitin 보고서가 없는 수치. 브라우저 확장 프로그램이나 별도 연동 안에 있는 경우도 있음어떤 도구가 그것을 만들었는가
누군가 게시글을 읽고 생성된 것 같다고 판단함수치는 전혀 없고 메시지만 있음물을 것이 없습니다. 이것은 보고서가 아니라 대화입니다

첫 번째 행은 사람들이 놓치는 부분이며, 대응을 완전히 바꿉니다. 열한 주치가 하나의 파일로 묶였다면, 그 점수는 여러분의 열한 주치 글을 합친 것에 대한 진술입니다. 아홉째 주의 두 번째 문단을 두고 다투는 것은 엉뚱한 대상을 두고 다투는 것입니다.

자신이 어느 행에 있는지 알아낼 깔끔한 방법이 있습니다. Turnitin FAQ는 "the AI writing detection indicator and report are not visible to students" (AI 작성 탐지 표시기와 보고서는 학생에게 보이지 않음)라고 말하고, 별도로 "only instructors and administrators are able to see the indicator." (표시기는 교수자와 관리자만 볼 수 있음)라고 합니다. 또한 "However, with the PDF download feature, instructors can download and share the AI report with students." (그러나 PDF 다운로드 기능을 통해 교수자는 AI 보고서를 내려받아 학생과 공유할 수 있음)라고도 합니다. 따라서 PDF를 요청하는 것은 문서화된 절차가 뒷받침하는 합리적인 요청이며, 그 답이 여러분을 어느 행에 넣을지 정합니다. Turnitin AI Writing Report의 PDF가 존재한다면 첫 번째 행이거나, 생각보다 긴 제출물이었던 것입니다. 아무도 제시할 수 없다면 두 번째 행이나 세 번째 행입니다.

두 번째 행으로 밝혀지면, 같은 텍스트가 탐지기마다 다르게 점수가 나오는 이유에서 두 도구가 같은 문단에 두 가지 답을 내는 이유를 다룹니다.

주간 게시판에만 존재하는 문제

여기서부터는 길이와는 무관한 부분입니다.

코스 토론은 십이주 동안 매주 같은 형태의 질문을 던집니다. 챕터를 읽고, 과제에 답하고, 동료 둘에게 답글을 답니다. 여러분은 일관된 사람이고 읽기에 접근하는 방식도 일관되므로, 아홉째 주가 되면 게시글은 도입 방식, 문단 수, 텍스트로 들어가는 방식과 빠져나오는 방식을 공유하게 됩니다.

Turnitin FAQ는 그 특징을 이렇게 이름 붙입니다.

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (때로는 오탐지(사람이 쓴 텍스트를 AI 생성으로 잘못 표시하는 것)에 구조적 변화가 거의 없는 내용, 문자 그대로 반복되는 텍스트, 새로운 생각을 전개하지 않고 패러프레이즈된 텍스트가 포함될 수 있습니다).

그리고 그다음 문장, 교수자가 근거로 삼을 수 있는 문장입니다.

"If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (그러한 텍스트에서 표시기가 더 높은 AI 작성 비율을 보여 준다면, 표시된 백분율을 볼 때 그 점을 고려하실 것을 권합니다).

에세이는 한 번 쓰입니다. 주간 토론 게시판은 학위 과정에서 일정에 따라 구조적으로 유사한 텍스트를 쓰도록 요구받는 유일한 과제이며, 그 유사성은 여러분이 정한 것이 아니라 과제 설계의 특징입니다.

해법은 작고, 글쓰기 방식의 해법이 아닙니다. 매주 어떻게 시작했는지를 한 줄로 기록해 두십시오. 게시글의 주제가 아니라, 진입에 사용한 방식입니다. 실제로 서로 다른 방식들의 짧은 목록입니다.

  • 과제 독해만으로는 답할 수 없었던 질문
  • 지정된 텍스트의 특정 문장이나 수치와 그 쪽수
  • 지정된 두 과제 텍스트가 서로 어긋나는 지점
  • 직장, 실습, 연구실에서 경험한 것 중 과제 독해와 충돌하는 것
  • 저자가 두 가지 방식으로 사용한다고 생각하는 용어

그다음, 같은 방식을 네 주 안에 반복하지 마십시오. 일 분 정도면 되고, 전적으로 여러분의 통제 아래 있으며, 부수 효과로 게시글이 더 좋아집니다. 그리고 그것이 교수자가 실제로 신경 쓰는 부분입니다.

자기를 반복하는 것은 다른 보고서의 문제

사람들은 이 둘을 혼동하고는 엉뚱한 쪽을 다시 씁니다.

셋째 주 게시글의 문단을 아홉째 주 게시글에 재사용했다면, 그것은 일치하는 텍스트입니다. Turnitin은 두 수치가 서로 닿지 않는다고 분명히 밝힙니다.

"The Similarity score and the AI writing detection percentage are completely independent and do not influence each other." (유사도 점수와 AI 작성 탐지 백분율은 완전히 독립적이며 서로 영향을 주지 않습니다).

따라서 주차를 넘나드는 자기 반복은 유사도 쪽의 문제입니다. 그리고 앞서 쓴 게시글이 비교 대상에 들어가는지는 소속 기관이 제출물을 저장소에 추가하는지에 달려 있으며, 이는 Turnitin에 대한 사실이 아니라 기관의 설정입니다. 저장소 문제는 Turnitin이 내 논문을 저장하는지에서 다루고, 두 지표가 각각 무엇을 측정하는지는 AI 보고서와 유사도 보고서의 차이에 정리되어 있습니다.

실천적으로 말하면, AI 수치를 움직이려고 반복된 문단을 다시 쓰는 것은 엉뚱한 보고서를 겨냥하는 일입니다.

이 형식의 장점, 거의 아무도 활용하지 않는 것

이제 좋은 소식이며, 정말 좋은 소식입니다.

토론 게시판은 아무것도 하지 않아도 주마다 여러분의 글쓰기 표본을 쌓아 주는 유일한 과제 형식입니다. 아홉째 주가 되면 날짜가 붙은 여러분의 산문 여덟 조각이 통제할 수 없는 시스템 안에 있습니다. 누구도 무엇에 대해 다투기 전에 쓰였고, 다른 사람이 정한 일정에 따라 쓰였습니다.

이는 대부분의 학생이 최종 에세이를 위해 마련할 수 있는 것보다 나은 기록입니다. Microsoft의 자체 문서도 버전 기록이 "only works for files stored in OneDrive or SharePoint in Microsoft 365" (Microsoft 365의 OneDrive 또는 SharePoint에 저장된 파일에만 적용됨)라고 밝히므로, 노트북에서 육주를 보낸 .docx에는 기록이 전혀 없습니다. 각 도구에서 기록이 어디에 남는지는 Word, Google Docs, Overleaf에서 버전 기록을 보관하는 방법에서 살펴봤습니다. 토론 게시판은 이 문제 전체를 우연히 피해 갑니다.

이에 대해 하나 할 일이 있으며, 열한째 주가 아니라 지금 하십시오. 매주 게시글을 날짜와 함께 하나의 문서로 옮겨 두십시오. 주당 십 초입니다. 소속 기관이 학기 말에 코스 접근을 닫으면 그 말뭉치도 함께 사라지고, 실제로 필요한 순간은 대개 코스가 끝난 뒤입니다.

둘은 동시에 참입니다. 이것이 이 형식의 묘한 모양입니다. 여러분의 글을 반복적으로 보이게 하는 바로 그 게시글의 흐름이, 동시에 그해에 여러분이 만들게 될 글쓰기 방식의 가장 좋은 증거이기도 합니다.

하나를 수정할 생각이라면

도구 이야기에 앞서 솔직한 전제가 둘 있습니다.

첫째, 200단어 게시글에는 범위를 정할 만한 내용이 많지 않습니다. 짧은 게시글 하나를 다룰 때 필요한 것은 소프트웨어가 아니라 다른 사람의 눈과 십 분입니다.

둘째, 여기에는 어느 방향으로도 수치를 약속하는 것이 없습니다. Turnitin은 자사 모델에 대해 "may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student." (항상 정확한 것은 아니며(사람이 쓴 텍스트, AI가 생성한 텍스트, AI가 패러프레이즈한 텍스트를 잘못 판별할 수 있음), 학생에게 불리한 조치의 유일한 근거로 사용되어서는 안 됩니다)라고 말합니다.

소프트웨어가 값어치를 하기 시작하는 곳은 묶음 사례입니다. 하나의 문서에 열한 주치, 대부분 문제없고 문단 넷이 표시된 형태입니다. HumanPen 도구는 그 형태를 위해 만들어졌습니다. 범위에 없는 부분은 건드리지 않으며, 범위는 여러분이 정합니다. 직접 부분을 표시하거나, Turnitin이나 iThenticate의 AI 보고서를 넘겨 표시된 부분이 목록을 채우게 하는 방식입니다. 둘째 주와 다섯째 주는 입력한 그대로 남습니다. 단위는 문단이므로 절반만 걸친 문단은 전체가 가져와지고 먼저 여러분에게 보여집니다. 요금은 파일이 아니라 다시 쓴 단어 수에 부과됩니다. DOCX, PPTX, TXT가 모두 들어가고, TXT는 줄바꿈과 들여쓰기를 유지합니다. 이는 토론 게시글이 이미 갖고 있는 형태입니다. 돌아온 뒤에도 표시가 남아 있는 부분은 조건이 충족되면 무료로 다시 처리할 수 있습니다.

FAQ에서는 복잡한 문서를 내려받은 뒤에 훑어보라고 안내합니다. 토론 게시판에서 이 확인에는 구체적인 표적이 있습니다. 게시글은 대화의 한 차례입니다. 수정본이 과제에 답하지 않거나, 답글을 달았던 동료와의 연결이 사라졌다면, 어떤 수치도 방금 잃은 것에 값하지 않습니다.

자주 묻는 질문

내 게시글은 180단어입니다. Turnitin이 AI 점수를 매길 수는 있습니까? 공개된 요건은 장문 형식의 산문 최소 300단어입니다. 그 미만에서는 보고서 안내서가 백분율이 아니라 "File didn't meet the requirements" (파일이 요건을 충족하지 못함) 상태를 설명합니다. 토론 게시글이 어떤 검사에 이르기 전에 소속 기관 시스템이 무엇을 하는지는 교수자에게 물을 일이며, 일반 안내서가 답할 수 있는 문제가 아닙니다.

매주 올려야 하는 답글 둘은 어떻습니까? 쉰 단어짜리 답글은 그 자체로는 기준선보다 훨씬 아래입니다. 그것이 무언가에 포함되었는지는 제출물이 어떻게 구성되었는지에 달려 있으며, 이는 위의 질문과 같습니다. 물어볼 가치가 있습니다. 동료를 인용하는 답글은 다른 사람의 말을 검사 대상 안으로 가져오기 때문입니다.

같은 300단어 기준선이 유사도 보고서에도 적용됩니까? 아닙니다. 여기서 인용한 요건은 AI Writing Report 고유의 파일 요건에서 나온 것입니다. 유사도 쪽은 별개의 동작을 하는 별개 보고서이며, AI 보고서와 유사도 보고서의 차이점에 정리되어 있습니다.

주차를 넘나들며 나다운 글쓰기를 그만둬야 합니까? 아니요, 시도해도 그럴 수 없습니다. 바꿔야 하는 것은 목소리가 아니라 독해로 들어가는 방식입니다. Turnitin의 오탐지 목록이 말하는 것은 구조적 획일성과 문자 그대로의 반복이며, 알아볼 수 있는 문체를 갖는 것이 아닙니다. 글쓰기 방식을 바꿀 가치가 있는지는 AI 표시를 피하려고 글쓰기 방식을 바꿔야 하는지에서 논합니다.

점수가 숫자 없이 별표로 돌아왔습니다. 그것은 결과가 아니라 표시 규칙입니다. 0% 초과, 20% 기준선 미만의 점수는 백분율이나 배정된 강조 표시 없이 별표로 표시되며, 이는 Turnitin AI 점수에서 별표가 의미하는 것에서 설명합니다.

탐지기가 내 게시글에 낮은 점수를 줬습니다. 그것으로 결론이 납니까? 아니요, 어느 방향으로도 결론이 나지 않습니다. 공급업체 자체의 설명은 모델이 사람이 쓴 텍스트, AI가 생성한 텍스트, AI가 패러프레이즈한 텍스트를 잘못 판별할 수 있으며 불리한 조치의 유일한 근거가 되어서는 안 된다는 것입니다. 어떤 도구도 문서를 누가 썼는지 확정하지 못합니다.

계속 읽기