كيف يعمل كشف معدل الذكاء الاصطناعي في Turnitin؟

يحسب Turnitin نسبة الذكاء الاصطناعي بتقسيم ورقتك إلى جمل، ثم يجمّعها في فقرات متداخلة، ويعطي كل فقرة درجة احتمالية بين 0 و1. تُجمَع هذه الدرجات لتعطي نسبة مئوية واحدة للوثيقة كاملة. النموذج يحلل النثر فقط، لا الكود ولا النقاط. المعلمون والإداريون فقط يرون النتيجة، لكن يمكنهم تنزيل ملف PDF ومشاركته معك. إذا كانت النسبة بين 1% و19%، يظهر التقرير نجمة بدل الرقم.

تبدأ العملية عندما ترسل ورقتك. تصف Turnitin الأمر هكذا: "When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated. Each qualifying sentence within these segments inherits the segment's score. Since segments overlap, some sentences may have multiple scores, which are then pooled into a single score. These sentence scores are further aggregated and used to compute the overall document AI writing score." (عند إرسال ورقة إلى Turnitin، تُستخرَج الجمل منها وتُقسَّم إلى أجزاء متداخلة لتحليل التوقعات. يصنّف نموذج كشف الذكاء الاصطناعي كل جزء ويعطيه قيمة بين 0 و1، تُبيّن احتمال أن النص من كتابة بشر أو ذكاء اصطناعي. ترث كل جملة مؤهلة داخل هذه الأجزاء درجة الجزء. وبما أن الأجزاء تتداخل، قد يكون لبعض الجمل أكثر من درجة، تُجمَع بعد ذلك في درجة واحدة. ثم تُجمَع درجات الجمل هذه وتُستخدم لحساب درجة الذكاء الاصطناعي الكلية للوثيقة.)

لاحظ هنا عدة أمور. أولاً، وحدة التحليل هي الجملة، لا الوثيقة كاملة. ثانياً، الأجزاء تتداخل، ما يعني أن جملة واحدة قد تنتمي لأجزاء متعددة وتحمل درجات متعددة تُجمَع معاً. ثالثاً، النسبة المئوية النهائية هي تجميع لكل درجات الجمل. ليست حكماً واحداً، بل العديد من الأحكام الصغيرة مجتمعة.

لهذا السبب قد يكون لوثيقتين نفس النسبة لكن بتوزيع مختلف للنص المُعلَّم. واحدة قد يكون فيها جمل قليلة مُعلَّمة بقوة، وأخرى فيها جمل كثيرة مُعلَّمة بخفة. التجميع يُمهّد هذه الفروق في رقم واحد.

ليس كل ما في ورقتك يُحلَّل. تقول Turnitin: "The model does not reliably detect AI-generated text in the form of non-prose, or code, nor does it detect short-form/unconventional writing such as bullet points (short non-sentence structures)." (لا يكتشف النموذج بشكل موثوق النص المولّد بالذكاء الاصطناعي في صورة نصوص غير نثرية، أو الكود، كما لا يكتشف الكتابة القصيرة/غير التقليدية مثل النقاط (تراكيب قصيرة غير جمل).)

هذا يعني أن كتل الكود والنقاط والقوائم المرقمة وعناصر أخرى غير نثرية مستبعَدة من تحليل كشف الذكاء الاصطناعي. جمل النثر فقط، أي فقرات النص المترابط، تُغرَّذ في النموذج. تضيف Turnitin: "This means that a document containing several different writing types would result in a disparity between the percentage and the highlights." (هذا يعني أن وثيقة تحتوي على عدة أنواع كتابة مختلفة ستنتج تفاوتاً بين النسبة المئوية والنص المُعلَّم.)

إذا كانت ورقتك تخلط بين فقرات نثرية طويلة وقوائم نقطية ومقاطع كود، فالنسبة تعكس أجزاء النثر فقط. والتظليل يغطي النثر فقط. قد يسبب هذا لبساً إذا قارنت النص المُعلَّم بطول الوثيقة الكامل فلم تتطابق الأرقام. النسبة تُحتسَب مقابل النثر المؤهل، لا الوثيقة كاملة.

الطلاب لا يرون مؤشر كشف كتابة الذكاء الاصطناعي أو التقرير مباشرة. تقول Turnitin: "The AI writing detection indicator and report are not visible to students." (مؤشر كشف كتابة الذكاء الاصطناعي والتقرير غير مرئيين للطلاب.) وتضيف: "Please note, only instructors and administrators are able to see the indicator." (لاحظ أن المعلمين والإداريين فقط يرون المؤشر.)

هذا لا يعني أنك لن ترى نتيجتك أبداً. تضيف Turnitin: "However, with the PDF download feature, instructors can download and share the AI report with students." (مع ذلك، بفضل ميزة تنزيل PDF، يمكن للمعلمين تنزيل تقرير الذكاء الاصطناعي ومشاركته مع الطلاب.) إذاً الطريق لرؤية نتيجتك يمر عبر معلمك. إذا اختار معلمك تنزيل PDF ومشاركته معك، سترى النسبة والنص المُعلَّم وأي نجمة. إذا اختار عدم المشاركة، لن تراها عبر واجهة Turnitin. تسجيل دخول الطلاب في Turnitin يشرح ما يحتويه عرض الطالب وما لا يحتويه.

إذا احتجت لرؤية تقريرك لأغراض المراجعة، اسأل معلمك إذا كان يمكنه تنزيل PDF ومشاركته. كثير من المعلمين مستعدون لذلك، خاصة إذا شرحت أنك تريد معالجة أي فقرات مُعلَّمة قبل التسليم النهائي.

إذا كانت نسبة الذكاء الاصطناعي بين 1% و19%، لا يعرض التقرير نسبة مئوية. بدلاً من ذلك، يظهر نجمة (%). تشرح Turnitin: "To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (%) and no percentage is attributed." (لتجنب حالات الإيجابيات الخاطئة المحتملة، لا تُنسَب أي درجة أو تظليل لنسب كشف الذكاء الاصطناعي في نطاق 1% إلى 19%. عند كشف ذكاء اصطناعي دون عتبة 20% في التقرير، يُشار إليه الآن بنجمة (*%) ولا تُنسَب أي نسبة مئوية.)

النجمة تعني أن الكاشف وجد شيئاً، لكن ليس بالقدر الكافي ليلتزم برقم محدد. لا يظهر تظليل في هذا النطاق أيضاً. النسبة منخفضة جداً بالنسبة لـ Turnitin لتبرير الإشارة إلى فقرات محددة على أنها مولّدة بالذكاء الاصطناعي. هذا نهج تحفّظي يهدف لتقليل الإيجابيات الخاطئة.

إذا رأيت النجمة، فهذا يعني أن الكاشف التقط بعض أنماط الذكاء الاصطناعي في نثرك. لكن الثقة كانت دون العتبة التي تبرر لـ Turnitin تعيين نسبة محددة. بالنسبة لمعظم الطلاب، النجمة ليست سبباً للقلق. ماذا تعني النجمة (*%) في درجة Turnitin للذكاء الاصطناعي يشرح ما تقوله إذا سألك معلم عنها.

إذا شارك معلمك تقرير PDF معك ورأيت نسبة فوق 20%، انظر للفقرات المُعلَّمة. تلك هي الأجزاء المحددة التي صنفها النموذج على أنها مولّدة بالذكاء الاصطناعي على الأرجح. ركّز مراجعتك على تلك الأقسام، بالترتيب الذي يحدده إعادة كتابة الفقرات المُعلَّمة فقط في تقرير Turnitin. أبْقِ استشهاداتك وجداولك وكتل الكود كما هي، لأنها ليست جزءاً من تحليل الذكاء الاصطناعي.

إذا رأيت النجمة، فلا فقرات مُعلَّمة لمعالجتها. النسبة دون عتبة الإبلاغ. يمكنك مع ذلك مراجعة نثرك للعبارات العامة أو النمطية، لكن لا توجد راية محددة للدفع بها.

إذا كانت نسبتك عالية بما يكفي لتقلقك أو تقلق معلمك، أعد كتابة الفقرات المُعلَّمة وأعد الإرسال. تذكر أن النموذج يتحدّث مع الوقت، لذا قد يعطي الإرسال الجديد نسبة مختلفة حتى بنفس النص، ولهذا السبب مقارنة تقريرين أفضل من مقارنة درجتين.

يمكن إعادة تشغيل الفقرات المؤهلة مجاناً.