صنّف محكّم بحثي ورقتي على أنها مكتوبة بالذكاء الاصطناعي. ماذا تقول Turnitin؟

توضّح الأسئلة الشائعة من Turnitin حدود مؤشر كتابة الذكاء الاصطناعي:

"Hence, we must emphasize that the percentage on the AI writing indicator should not be used as the sole basis for action or a definitive grading measure by instructors." (ولهذا يجب التشديد على أن النسبة المئوية على مؤشر كتابة الذكاء الاصطناعي لا ينبغي استخدامها كأساس وحيد لاتخاذ الإجراء أو كمقياس حاسم للدرجات من قبل المدرّسين)

هذا بيان من Turnitin نفسها. النسبة المئوية مجرد إشارة، وليست خلاصة. إذا كان محكّم بحثي قد وضع علامة على ورقتك بناءً على درجة من Turnitin، فإن الوثائق تقول إن هذه الدرجة لم يُقصد بها أبدًا أن تكون الكلمة الأخيرة. ما تفعله المجلات فعليًا عند مراجعة الورقة هو سؤال منفصل: هل تفحص المجلات الأوراق بحثًا عن كتابة الذكاء الاصطناعي؟.

تطرح الأسئلة الشائعة الدرجة كمدخل واحد من بين مدخلات عديدة:

"It is not meant to provide definitive answers in isolation. More important than any tool is the educator who sees the score and makes decisions balancing this information with their personal knowledge of their students, their work, and institutional policy." (لا يُقصد بها تقديم إجابات قاطعة بمعزل عن غيرها. الأهم من أي أداة هو المربّي الذي يرى الدرجة ويتخذ قرارات تُوَازِن بين هذه المعلومة ومعرفته الشخصية بطلبته وأعمالهم وسياسة المؤسسة)

الدرجة مصممة ليفسّرها مربٍّ لديه سياق لا تملكه الأداة. هي لا تعرف عملية الكتابة التي اتبعتها، ولا تاريخ مسوداتك، ولا أسلوبك الشخصي. تقول الوثائق إن الشخص الذي يقرأ الدرجة أهم من الدرجة نفسها.

المحكّم البحثي الذي يضع علامة على ورقتك استنادًا إلى النسبة المئوية فقط يستخدم الأداة بطريقة تقول الأسئلة الشائعة إنه لا ينبغي استخدامها بها. الغرض من الدرجة هو أن تُوازَن مع المعرفة الشخصية بالطالب وعمله.

تصف الأسئلة الشائعة سمات نصية محددة قد تُسبّب إيجابيات كاذبة:

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (أحيانًا قد تتضمن الإيجابيات الكاذبة -أي وضع علامة خطأ على نص كتبه إنسان على أنه مولَّد بالذكاء الاصطناعي- محتوى دون الكثير من التباين الهيكلي، أو نصًا يكرّر نفسه حرفيًا، أو نصًا أُعيدت صياغته دون تطوير أفكار جديدة)

إذا تمَّ وضع علامة على ورقتك، فكّر فيما إذا كانت تحتوي على أي من هذه الخصائص. النصوص التي تفتقر إلى التباين الهيكلي، أو تكرّر نفس الصياغة، أو تعيد صياغة المصادر دون إضافة تحليل جديد قد تُعلَّم بعلامة حتى لو كتبتَ كل كلمة بنفسك. هذه أنماط موثّقة للإيجابيات الكاذبة، وليست مجرد تكهّنات.

هذا جدير بالملاحظة لأن هذه السمات شائعة في الكتابة الأكاديمية. مراجعات الأدبيات، وأقسام المنهجية، وأوصاف النتائج كلها قد تظهر تباينًا هيكليًا منخفضًا أو صياغة متكررة بطبيعتها. الإيجابية الكاذبة لا تعني أن النص مكتوب بالذكاء الاصطناعي. بل تعني أن النص يتشارك أنماطًا يربطها النموذج بمخرجات الذكاء الاصطناعي. وضع Turnitin علامة على قسم المنهجية بالكامل هو مثال على تلك الحالة مُفصّل بالتفصيل.

تذكر الأسئلة الشائعة هدفًا محددًا لمعدّل الإيجابيات الكاذبة:

"We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing." (نسعى إلى تعظيم فعالية الكاشف الخاص بنا مع إبقاء معدّل إيجابياتنا الكاذبة -أي التعريف الخاطئ للنص المكتوب بشريًا بالكامل على أنه مولَّد بالذكاء الاصطناعي- تحت 1% للمستندات التي تحتوي على أكثر من 20% من كتابة الذكاء الاصطناعي)

الجملة التالية: "In other words, we might flag a human-written document as AI-written for one out of every 100 fully-human written documents." (بعبارة أخرى، قد نضع علامة على مستند مكتوب بشريًا على أنه مكتوب بالذكاء الاصطناعي لمرة واحدة من بين كل 100 مستند مكتوب بشريًا بالكامل)

الهدف هو أقل من 1% للمستندات التي تحتوي على أكثر من 20% من كتابة الذكاء الاصطناعي. هذا يعني أن Turnitin وثّقت أن الإيجابيات الكاذبة تحدث، وحدّدت عتبة لكمية حدوثها. العتبة هدف، وليست ضمانًا. الإيجابيات الكاذبة جزء من معايير تصميم النظام. ماذا يعني معدّل إيجابيات كاذبة 1% عندما تقدّم جامعة 75000 ورقة يحوّل ذلك الهدف إلى عدد أفراد.

تلاحظ الأسئلة الشائعة أن الوصول إلى مؤشر الذكاء الاصطناعي مقيد:

"Please note, only instructors and administrators are able to see the indicator." (يرجى ملاحظة أن المدرّسين والمسؤولين فقط هم من يستطيعون رؤية المؤشر)

الطلاب لا يرون الدرجة. المحكّمون البحثيون في العديد من سير العمل التحريرية قد لا يملكون وصولاً مباشرًا إلى مؤشر الذكاء الاصطناعي من Turnitin أيضًا. إذا وضع محكّم بحثي علامة على ورقتك على أنها ذكاء اصطناعي، فقد يكونون يعملون من تقرير التشابه، أو كاشف مختلف، أو تقييمهم الخاص للكتابة. من الجدير التوضيح أي أداة أنتجت العلامة ومن كان لديه وصول إلى أي تقرير. في جانب المجلة يعني هذا عادة iThenticate: هل يكتشف iThenticate كتابة الذكاء الاصطناعي؟.

لتلخيص ما تقوله الوثائق:

• النسبة المئوية على مؤشر كتابة الذكاء الاصطناعي لا ينبغي استخدامها كأساس وحيد لاتخاذ الإجراء أو كمقياس حاسم للدرجات.
• الدرجة لا يُقصد بها تقديم إجابات قاطعة بمعزل عن غيرها. معرفة المدرِّس للطالب وسياسة المؤسسة أهم.
• الإيجابيات الكاذبة قد تتضمن محتوى دون تباين هيكلي، أو نصًا يكرّر نفسه، أو نصًا أُعيدت صياغته دون تطوير أفكار جديدة.
• الهدف المعلن للإيجابيات الكاذبة هو أقل من 1% للمستندات التي تحتوي على أكثر من 20% من كتابة الذكاء الاصطناعي. الإيجابيات الكاذبة جزء موثّق من النظام.
• فقط المدرّسون والمسؤولون يستطيعون رؤية مؤشر الذكاء الاصطناعي. الطلاب لا يرونه.

إذا كان محكّم بحثي قد وضع علامة على ورقتك وتريد معالجة الفقرات التي تمَّ وضع علامة عليها، استورد التقرير واعمل عليها. الفقرات المؤهّلة يمكن إعادة تشغيلها دون رسوم.