هل يمكن حقاً الحصول على 0% من الذكاء الاصطناعي في Turnitin؟

يمكن لمؤشر الكتابة بالذكاء الاصطناعي الحالي في Turnitin أن يُظهر 0%. فمنذ 8 يوليو 2024، أصبح الصفر هو الرقم الدقيق الوحيد الذي يظهره دون العشرين: إذ تُعرض النتائج من 1% إلى 19% كعلامة نجمة، دون نسبة مئوية ودون إبرازات. والتقارير التي أُنشئت قبل هذا التغيير في العرض هي الاستثناء؛ إذ يقول Turnitin إنها قد تُظهر رقماً عددياً دون 20%. والمؤشر غير مرئي للطلاب أيضاً. لذا فإن ما يسعى الناس وراءه حين يقولون "0% ذكاء اصطناعي" — رقم منخفض يمكن مراقبته واستهدافه وتأكيده مراراً — ليس حالة يتحكمون فيها أو يلاحظونها عادةً. إنه يظهر على شاشة شخص آخر، وفق قاعدة عرض يكون لتاريخها شأن.

أما بقية هذا المقال فيشرح ما هي تلك الأحوال الأربع، ولماذا لا توجد درجات في المسافة بين الصفر والعشرين، وماذا يحسمه 0% وما لا يحسمه لو أن أحداً أراك إياه.

يوجد في الأسئلة الشائعة الحالية لدى Turnitin قسم قصير بعنوان "What do the different indicators mean?" (ماذا تعني المؤشرات المختلفة؟)، يسرد ما يظهر بجانب الإرسال عند انتهاء المعالجة. وهي أربع حالات، والفروق بينها أهم من الفروق بين رقمين.

الصفان الأخيران ليسا نتيجة على الإطلاق: في إحداهما يرفض Turnitin معالجة الملف، وفي الأخرى يحاول ثم يفشل. اقرأ الصفين الأولين معاً ويتضح شكل المقياس الحالي. فعند العشرين وما فوق، يتصرف المؤشر كقياس: رقم، ومقاطع مميَّزة يمكنك أن تذهب وتنظر إليها. ودون العشرين يتصرف كمفتاح إنارة. الصفر موضع واحد، والنطاق من 1% إلى 19% هو الموضع الآخر.

التقرير المنشأ وفق القاعدة السارية منذ 8 يوليو 2024 لن يُظهر 4% أو 11% أو 19%؛ بل يُظهر علامة النجمة بدلاً من ذلك. ويمكن لتقرير أقدم أن يحتفظ بأحد تلك الأرقام، ولهذا يجب أن يوضع تاريخ الإنشاء بجانب أي نتيجة تقتبسها. وفي تقرير حالي، تعبّر رغبة "أريد أن أنزل بنتيجتي إلى رقم صغير" عن نتيجة لا تستطيع الواجهة أن تدرّجها لك، وتسمّي رغبة "أريد 0%" الرقم الدقيق الوحيد دون العشرين الذي سيعرضه.

القاعدة منشورة، وكذلك سببها:

"False positives (incorrectly flagging human-written text as AI-generated) are a possibility in AI models. To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (*%) and no percentage is attributed." (الإيجابيات الخاطئة — أي وضع علامة على نص كتبه إنسان بوصفه مُنشأً بالذكاء الاصطناعي على سبيل الخطأ — أمر ممكن الحدوث في نماذج الذكاء الاصطناعي. وتجنباً لاحتمال وقوع إيجابيات خاطئة، لا تُنسب أي نتيجة أو إبرازات لنتائج كشف الذكاء الاصطناعي في النطاق من 1% إلى 19%. وعندما يُرصد ذكاء اصطناعي دون حدّ 20% في التقرير، يُشار إليه الآن بعلامة نجمة (*%) ولا تُنسب أي نسبة مئوية.)

هذا الحد يحذف نوعين من المعلومات، ولا يحظى الثاني بالانتباه الذي يستحقه. يغيب الرقم، وهو الجزء الذي يلاحظه الجميع. وتغيب الإبرازات أيضاً. فدون الحد، لا يمنحك التقرير أي مقطع لتفحصه ولا أي موضع على مستوى الجملة للنتيجة.

تابع هذا إلى مراجعة في ظل قاعدة العرض الحالية. لنفترض أن النتيجة الكامنة تحركت من 17% إلى 3%. كلا التقريرين يُظهران علامة نجمة. الرمز نفسه، والغياب نفسه للإبرازات، وكل شيء آخر سواء. العمل حدث؛ لكن الواجهة لا تملك مفردات للإبلاغ عنه. ومن يدّعي أن تقريراً حالياً تحرك "من 15% إلى 4%" فإنه يضيف رقمين دقيقين لم يظهرهما التقرير. والتقرير المؤرَّخ بما قبل 8 يوليو 2024 هو الاستثناء، لا الدليل على أن القاعدة الحالية تعمل بشكل مختلف.

لا شيء من هذا قاعدة تتعلق بسوء السلوك. إنه قرار بشأن ما يضعه المورِّد على الشاشة؛ أما اللحظة التي تراجع فيها المدرسة إرسالاً ما فتأتي من سياسة تلك المدرسة نفسها. وقد تناولنا ذلك في هل 20% من الذكاء الاصطناعي مرتفع أكثر من اللازم؟.

وهذا يجعل "هل يمكنني الوصول إلى 0%؟" سؤالاً عن إمكانية الوصول قبل أن يكون سؤالاً عن الصعوبة. تشرح الأسئلة الشائعة السبب في جملتين، والثانية هي التي تُسقَط عادةً:

"The AI writing detection indicator and report are not visible to students. However, with the PDF download feature, instructors can download and share the AI report with students." (مؤشر وتقرير الكشف عن الكتابة بالذكاء الاصطناعي غير مرئيين للطلاب. غير أنه مع ميزة التنزيل بصيغة PDF، يستطيع المُدرِّسون تنزيل تقرير الذكاء الاصطناعي ومشاركته مع الطلاب.)

وفي موضع آخر من الصفحة نفسها: "only instructors and administrators are able to see the indicator." (المُدرِّسون والإداريون وحدهم قادرون على رؤية المؤشر). لذا فإن الطريق الوحيد الذي تصل به نتيجتك في الذكاء الاصطناعي إليك يمرّ بقرار شخص آخر أن ينزّل ملف PDF ويرسله. وهو طريق حقيقي — فقد رأى كثير من الطلاب تقريرهم —، لكنه ليس مقياساً يمكنك أن تقرأه بنفسك.

ومعنى ذلك أن الحلقة التي يفترضها معظم النصائح ضمناً غير موجودة. الإرسال، ثم النظر إلى النتيجة، ثم المراجعة، ثم النظر مرة أخرى: هاتان الخطوتان اللتان تتضمنان النظر ليستا لك. وما تحصل عليه بدلاً من ذلك هو حكم واحد، في وقت لاحق، ربما مُبلَّغ، وربما كلقطة شاشة بلا تاريخ. وحين يقول المُدرِّس إن المؤشر "لا يظهر"، فلهذا أسباب موثَّقة خاصة به لا علاقة لها بملفك. وقد جمعناها في لماذا نتيجتك في الذكاء الاصطناعي مفقودة أو غير متسقة.

لنفترض أنك حصلت عليه على أي حال: مُدرِّس ينزّل ملف PDF ويسلّمك إياه، وفيه 0%. وإليك ما يقوله Turnitin عن قرار التصميم الذي يقف وراء هذا الرقم:

"In order to maintain this low rate of 1% for false positives, there is a chance that we might miss some AI written text in a document. We're comfortable with that since we do not want to incorrectly highlight human-written text as AI-written. For example, if we identify that 50% of a document is likely written by an AI tool, it could contain as much as 65% AI writing." (من أجل الحفاظ على هذا المعدل المنخفض للإيجابيات الخاطئة عند 1%، هناك احتمال أن يفوتنا بعض النص المكتوب بالذكاء الاصطناعي في المستند. ونحن مرتاحون لذلك، لأننا لا نريد أن نضع علامة على نص كتبه إنسان بوصفه مكتوباً بالذكاء الاصطناعي على سبيل الخطأ. فمثلاً، إذا حدّدنا أن 50% من مستند ما مكتوبة على الأرجح بأداة ذكاء اصطناعي، فقد يحتوي في الواقع على ما يصل إلى 65% من الكتابة بالذكاء الاصطناعي.)

هذا مورِّد يقول، بكلماته هو، إنه يفضّل أن يفوته نص مكتوب بالذكاء الاصطناعي على أن يعلّم نصاً بشرياً. وتترتب على ذلك ثلاث نتائج، وهي تعمل في الاتجاهين:

• 0% لا يشهد بأن شيئاً لم يُكتب بمساعدة الذكاء الاصطناعي. الأداة مضبوطة على الإبلاغ بأقل من الواقع. فالصفر يتفق مع ورقة نظيفة، ويتفق أيضاً مع ورقة لم يلتقطها النموذج، ولا يحتوي التقرير على أي شيء يميّز بينهما.
• 0% ليس حكماً على ملفك بأكمله. تُحسَب النسبة على النثر المؤهل. والمستند الذي يتكوّن في معظمه من قوائم وجداول رقمية وقسم مراجع خضع لتقييم قليل نسبياً، لذا فإن صفره يغطي مساحة أقل مما يبدو. أما الفقرات الكاملة داخل خلايا الجدول فحالة منفصلة: إذ يقول Turnitin إنه يعالج النثر الطويل في الجداول. ومشكلة المقام هي موضوع كيف تقرأ تقرير الكتابة بالذكاء الاصطناعي من Turnitin.
• 0% ليس دليلاً يمكنك أن تحمله إلى حوار. يصرّح Turnitin صراحةً بأنه لا يحدِّد سوء السلوك، وبأنه يوفّر بيانات ليتخذ المربّون قرارهم بناءً عليها. وما يجيب فعلاً عن "هل كتبت هذا بنفسك" هو المسوّدات والمصادر والملاحظات وقدرتك على الحديث عن العمل. وهذه المواد مدرجة في معلَّم، لكنك كتبته بنفسك.

الصفر هو ناتج مُصنِّف، جرى تشغيله على جزء من مستند، في يوم واحد، وتحت إصدار واحد من النموذج. ومن المفيد أن يكون لديك. لكنه يحسم أقل مما توحي به عبارة "0% ذكاء اصطناعي".

الرقم المفقود ليس صفراً تلقائياً. فأحياناً لا توجد نتيجة؛ وأحياناً توجد نتيجة غير صفرية حُجب رقمها الدقيق؛ وأحياناً ينتج مستند قصير أو قليل النثر نتيجة حقيقية على مقام ضيق. هذه الحالات تحتاج إلى أسماء مختلفة.

• شرطة مزدوجة رمادية أو خطأ في المعالجة: لا نتيجة. أقل من 300 كلمة من النثر الطويل، أو أكثر من 30,000 كلمة، أو لغة أو نوع ملف غير مدعوم، كل ذلك يمكن أن يجعل الملف غير مؤهل؛ أما حالة الخطأ المنفصلة فتعني أن Turnitin فشل أثناء المعالجة. ولا يُعدّ أيٌّ منهما نتيجة نظيفة، ولا ينبغي الإبلاغ عن أيٍّ منهما على أنه 0%. والتفاصيل الكاملة في هل يمكن لـ Turnitin فحص رسالة علمية كاملة؟
• علامة النجمة: نتيجة أعلى من الصفر رقمها مخفي. في التقارير المنشأة وفق القاعدة الحالية، يعني ذلك أن النطاق المرصود هو من 1% إلى 19%. وتُحجب النسبة والإبرازات بسبب خطر الإيجابيات الخاطئة. إنها ليست فارغة، وإن كانت لا تمنحك موضعاً تبدأ منه.
• مستند قصير أو قليل النثر: قد تظل نتيجة حقيقية. المادة غير النثرية تضيّق المقام؛ وهي لا تزيل النتيجة بذاتها. فإذا تبقّت 300 كلمة على الأقل من النثر الطويل، فلا يزال بإمكان الملف أن يولّد تقريراً. وفي مستند من بضع مئات من الكلمات فقط، يقول Turnitin إن التنبؤ يكون في معظمه "all or nothing" (كل شيء أو لا شيء)، لأن هناك مقطعاً واحداً ولا تداخل يمكن حساب متوسطه. وهذا تحذير من النتائج المتطرّفة، لا حالة فارغة ثالثة. ولا يستبعد المصدر جانب الصفر، والصفر يقع داخل نطاق النجاح المنشور لدى Turnitin.

الاختبار العملي بسيط. الشرطة المزدوجة أو الخطأ يعني أنه لا توجد نتيجة. وعلامة النجمة تعني أن هناك نتيجة غير صفرية لا تُعرض. و0% الأزرق هو ناتج فعلي للمُصنِّف، حتى لو كان الملف قصيراً أو كان المقام المؤهل ضيقاً. ولا ينبغي جمع هذه الثلاث في فكرة واحدة هي "لم يُكشف شيء".

اقلب كل هذا وسيظهر شيء غريب بعض الشيء. التقارير التي تخيف الناس — تلك التي تبلغ العشرين وما فوق — هي التقارير الوحيدة التي تأتي بمعلومات تكفي للتصرف بناءً عليها. ففيها رقم ومقاطع مميَّزة. أما في النطاق الحالي من 1% إلى 19% فليس لديك أيٌّ منهما؛ وعند 0% يكون لديك الرقم لكن دون أي مقطع مميَّز لمراجعته.

أداة HumanPen مبنية على هذا الجانب من الخط. ترفع ملف DOCX مع تقرير الذكاء الاصطناعي من Turnitin أو iThenticate، وتصبح المقاطع المميَّزة هي نطاق العمل. ولا يُعاد كتابة سوى ذلك النص؛ وكل ما عداه يبقى دون مساس. وتُحسب الرسوم على أساس عدد الكلمات المُعاد كتابتها، لا على طول الملف المرفوع.

وتقدّم HumanPen أيضاً دعماً مجانياً للمتابعة: فالنتائج المؤهلة يمكن أن تستمر في خفض الذكاء الاصطناعي مجاناً. وهذا الدعم لا يَعِد بنتيجة معينة من أي كاشف.

لا شيء من ذلك توقّع. فالأسئلة الشائعة الخاصة بنا في تلك الصفحة تقول ذلك بوضوح: "Detectors keep changing, so no one can honestly promise a fixed outcome." (الكواشف تتغير باستمرار، لذا لا يمكن لأحد أن يَعِد بصدق بنتيجة ثابتة). ونسبة إعادة الفحص غير معلومة؛ وذكرها مسبقاً سيكون اختلاقاً. ولم يقل Turnitin قط كيف ينبغي لتعديل معيّن أن يحرّك نتيجة ما، وقاعدة العرض المذكورة أعلاه تعني أن أحداً لن يتمكن أصلاً من التحقق من مثل هذا الادعاء دون الحد. وما يمكننا أن نقوله لك هو أي الكلمات تُعدَّل وأيها تُحاسَب عليها.

هل يمكن لتقرير الكتابة بالذكاء الاصطناعي من Turnitin أن يُظهر 0% فعلاً؟ نعم. تصف الأسئلة الشائعة لدى Turnitin حالة النجاح بأنها مؤشر أزرق بنسبة مئوية بين 0 و100، والصفر يقع داخل هذا النطاق. أما التحفّظ المتعلق بالتاريخ فيخصّ 1% إلى 19%: فقد تحتفظ التقارير الأقدم بتلك الأرقام، في حين تُظهر التقارير الحالية علامة نجمة.

هل علامة النجمة هي نفسها 0%؟ لا. في تقرير حالي، تعني علامة النجمة أنه رُصد ذكاء اصطناعي في النطاق من 1% إلى 19%، ويحجب Turnitin الرقم والإبرازات في هذا النطاق بسبب الإيجابيات الخاطئة. إنها نتيجة غير صفرية ترفض الواجهة تحديدها كمّاً.

هل يمكنني الاطلاع على نتيجتي في الذكاء الاصطناعي قبل مُدرِّسي؟ ليس عبر المؤشر. يقرّر Turnitin أن مؤشر وتقرير الكشف عن الكتابة بالذكاء الاصطناعي غير مرئيين للطلاب، وأن المُدرِّسين يمكنهم تنزيل التقرير بصيغة PDF ومشاركته. وكل ما تراه، تراه لأن شخصاً اختار أن يريك إياه.

إذا كان تقريري يقول 0%، فهل أنا في أمان؟ إنها نتيجة جيدة، لكنها ليست شهادة. يقول Turnitin إنه يقبل أن يفوته بعض ما كُتب بالذكاء الاصطناعي من أجل إبقاء معدل الإيجابيات الخاطئة منخفضاً، ويقول إن نتيجة الذكاء الاصطناعي لا تحدِّد سوء السلوك. وكلا شطري هذا الكلام مهم.

هل ستوصلني إعادة الكتابة إلى 0%؟ لا يمكن الوعد بالنسبة في فحص لاحق. والأداة التي تذكر رقماً إنما تقتبس نتيجة لا تملكها. وما تحسمه إعادة كتابة موجَّهة بالتقرير هو أي المقاطع تتغيّر وأيها يُترك كما كتبته تماماً.