Winston AI مقابل Turnitin: لماذا تختلف درجات كشف الذكاء الاصطناعي

Winston AI وTurnitin أداتان مختلفتان لكشف الذكاء الاصطناعي: نماذج مختلفة، وبيانات تدريب مختلفة، وحدود تصنيف مختلفة. درجة إحداهما لا تتنبأ بدرجة الأخرى. تصف الأسئلة الشائعة في Turnitin آليتها على النحو التالي: يُقسَّم النص إلى مقاطع متداخلة، ويُعطى كل مقطع قيمة احتمالية بين 0 و1. وتحدد الأسئلة الشائعة أيضاً مستهدفاً للإيجابيات الخاطئة دون 1% للوثائق التي تتجاوز نسبة الكتابة بالذكاء الاصطناعي فيها 20%، وتستخدم قاعدة النجمة للدرجات في نطاق 1-19%. وينشر Winston AI أرقام دقة خاصة به، لكنها صادرة عن الشركة نفسها ولا يمكن التحقق منها بالرجوع إلى وثائق Turnitin. الدرجة المهمة هي تلك الصادرة عن الأداة التي تستخدمها مؤسستك. وإذا كانت مدرستك تستخدم Turnitin، فلن تخبرك أي درجة من جهة خارجية بما ستكون عليه درجتك في Turnitin.

تصف الأسئلة الشائعة عملية الكشف على النحو التالي:

"When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated." (عند إرسال بحث إلى Turnitin، تُستخرج الجمل من النص المُرسَل وتُقسَّم إلى أقسام متداخلة لتحليل التنبؤ. ويُصنَّف كل قسم بواسطة نموذج كشف الذكاء الاصطناعي ويُعطى قيمة بين 0 و1، تدل على احتمال أن يكون النص بشرياً أو مُولَّداً بالذكاء الاصطناعي.)

المقاطع متداخلة، ما يعني أن الجملة الواحدة قد تحصل على أكثر من درجة، ثم تُجمَع هذه الدرجات في نسبة مئوية على مستوى الوثيقة. ويستخدم Winston AI أسلوب تصنيف خاصاً به غير موثَّق في مواد Turnitin. النظامان مبنيان بشكل مختلف، ويقيّمان النص بشكل مختلف.

تحدد الأسئلة الشائعة مستهدفاً محدداً:

"We strive to maximize the effectiveness of our detector while keeping our false positive rate - incorrectly identifying fully human-written text as AI-generated - under 1% for documents with over 20% of AI writing." (نسعى إلى تعظيم فعالية الكاشف لدينا مع إبقاء معدل الإيجابيات الخاطئة — أي التحديد الخاطئ لنص مكتوب بالكامل بيد إنسان باعتباره مُولَّداً بالذكاء الاصطناعي — دون 1% للوثائق التي تتجاوز نسبة الكتابة بالذكاء الاصطناعي فيها 20%.)

الجملة التالية: "In other words, we might flag a human-written document as AI-written for one out of every 100 fully-human written documents." (بعبارات أخرى، قد نُعلِّم وثيقة مكتوبة بيد إنسان باعتبارها مكتوبة بالذكاء الاصطناعي، بواقع واحدة من كل 100 وثيقة مكتوبة بالكامل بيد إنسان.)

هذا المستهدف خاص بـ Turnitin وينطبق على الوثائق التي تتجاوز نسبة الكتابة بالذكاء الاصطناعي فيها 20%. وقد يُعلن Winston AI معدلاً مختلفاً للإيجابيات الخاطئة، لكن مقارنة الرقمين تتطلب فهماً لكيفية تعريف كل شركة للإيجابيات الخاطئة وقياسها. ولا نقدّم أي ادعاءات حول دقة أدوات الكشف التابعة لجهات خارجية.

لدى Turnitin قاعدة عرض محددة للدرجات المنخفضة:

"To avoid potential incidence of false positives, no score or highlights are attributed for AI detection scores in the 1% to 19% range. When AI is detected below the 20% threshold in the report, it is now indicated with an asterisk (*%) and no percentage is attributed." (لتجنب احتمال وقوع إيجابيات خاطئة، لا تُنسب أي درجة أو إبرازات إلى درجات كشف الذكاء الاصطناعي في نطاق 1% إلى 19%. وعند رصد ذكاء اصطناعي دون عتبة 20% في التقرير، يُشار إلى ذلك الآن بنجمة (*%) ولا تُنسب أي نسبة مئوية.)

لا يستخدم Winston AI هذه القاعدة، بل يعرض نسبة مئوية محددة في هذا النطاق. فقد يظهر البحث الذي يعرض “*%” على Turnitin بوصفه “14%” على Winston AI. وهذا لا يعني أن إحدى الأداتين أدق من الأخرى، بل يعني أنهما تتعاملان بشكل مختلف مع نطاق الثقة المنخفضة. ويتناول معنى النجمة (*%) في درجة الذكاء الاصطناعي على Turnitin جانب Turnitin من الموضوع.

تصف الأسئلة الشائعة سلوك الوثائق القصيرة:

"In shorter documents where there are only a few hundred words, the prediction will be mostly 'all or nothing' because we're predicting on a single segment without the opportunity to overlap." (في الوثائق الأقصر، التي لا تتجاوز بضع مئات من الكلمات، سيكون التوقع في معظمه “كل شيء أو لا شيء”، لأننا نتوقع بناءً على مقطع واحد دون إمكانية التداخل.)

الجملة التالية: "This means that some text that is a mix of AI-generated and original content could be flagged as entirely AI-generated." (وهذا يعني أن نصاً يمزج بين محتوى مُولَّد بالذكاء الاصطناعي ومحتوى أصلي قد يُعلَّم بالكامل باعتباره مُولَّداً بالذكاء الاصطناعي.)

هذا خاص بأسلوب Turnitin في تقسيم النص. وقد يُظهر Winston AI السلوك نفسه مع النصوص القصيرة، وقد لا يفعل. وإذا اختبرت مقطعاً قصيراً على Winston AI فأعطاك 0%، فهذا لا يخبرك بشيء عما سيفعله Turnitin. أما الطرف الأقصى من هذا السلوك فيتناوله قول Turnitin إن عملك مكتوب بالذكاء الاصطناعي بنسبة 100%.

درجة الذكاء الاصطناعي ودرجة التشابه مستقلتان على Turnitin: "The Similarity score and the AI writing detection percentage are completely independent and do not influence each other." (درجة التشابه ونسبة كشف الكتابة بالذكاء الاصطناعي مستقلتان تماماً ولا تؤثر إحداهما على الأخرى.) وتجمع بعض أدوات الكشف بين الذكاء الاصطناعي والتشابه في رقم واحد، ما يجعل درجاتها غير قابلة للمقارنة بنيوياً مع نسبة الذكاء الاصطناعي المنفصلة في Turnitin. والدرجة الوحيدة المهمة لتسليمك هي تلك التي تُنتجها الأداة التي تستخدمها مؤسستك. ويشرح سبب اختلاف درجة النص نفسه من كاشف إلى آخر لماذا هذا التباين بنيوي.

لتلخيص ما تناولناه:

• Winston AI وTurnitin كاشفان مختلفان بنماذج مختلفة. الدرجات لن تتطابق.
• يقسّم كاشف Turnitin النص إلى مقاطع متداخلة ويعيّن درجات احتمالية.
• مستهدف Turnitin للإيجابيات الخاطئة دون 1% للوثائق التي تتجاوز نسبة الكتابة بالذكاء الاصطناعي فيها 20%.
• يستخدم Turnitin نجمة للدرجات من 1% إلى 19%، حتى لا يبالغ في تصوير دقته.
• الوثائق القصيرة تحصل على توقعات “كل شيء أو لا شيء” على Turnitin.
• الدرجة الوحيدة المهمة هي تلك الصادرة عن الأداة التي تستخدمها مؤسستك.

إذا وصلك تقرير ذكاء اصطناعي من Turnitin وتريد معالجة المقاطع المُعلَّمة، فاستورد التقرير واعمل عليها. ويمكن إعادة معالجة المقاطع المؤهلة دون أي تكلفة.