هل يغيّر حذف الكلمات نتيجتك في كشف الذكاء الاصطناعي في Turnitin؟

الرقم في تقرير الذكاء الاصطناعي ليس نسبة من عملك بالكامل. إنه نسبة مما يسميه Turnitin "qualifying text," (النص المؤهَّل)، وهي مجموعة فرعية من عملك المُقدَّم، لا مجموعه. وما إذا كان حذف الكلمات سيحرّك هذا الرقم يعتمد على الكلمات التي تحذفها وعلى ما إذا كانت تنتمي إلى تلك المجموعة الفرعية.

The displayed percentage indicates the amount of qualifying text within the submission that Turnitin's AI writing detection model determines was generated by AI. (تشير النسبة المعروضة إلى مقدار النص المؤهَّل داخل العمل المُقدَّم الذي يقرر نموذج Turnitin لكشف الكتابة بالذكاء الاصطناعي أنه وُلّد بالذكاء الاصطناعي.)

هذه الجملة مأخوذة من صفحة الأسئلة الشائعة في Turnitin حول قدرات كشف الكتابة بالذكاء الاصطناعي. العبارة التي ينبغي تذكّرها هي "qualifying text." (النص المؤهَّل). النسبة هي حصة من تلك المجموعة، لا من كل ما رفعته. لذا، قبل أن تحذف فقرة واحدة للبقاء تحت حد الكلمات، تحتاج إلى معرفة ما يُحسب مؤهلاً وما لا يُحسب.

يعرّف Turnitin "qualifying text" (النص المؤهَّل) في صفحة الأسئلة الشائعة نفسها، والتعريف أضيق مما يفترضه معظم الطلاب عندما يرون تقريراً لأول مرة.

This qualifying text includes only prose sentences, meaning that we only analyze blocks of text that are written in standard grammatical sentences and do not include other types of writing such as lists, bullet points (short non-sentence structures), or other non-sentence structures. (لا يتضمن هذا النص المؤهَّل سوى جُمل النثر، أي أننا نحلّل فقط كتل النص المكتوبة بجُمل نحوية قياسية، ولا ندرج أنواعاً أخرى من الكتابة مثل القوائم أو النقاط (هياكل قصيرة ليست جُملاً) أو هياكل أخرى ليست جُملاً.)

إذن فالمقام، أي الأساس الذي تُحسب النسبة منه، هو جُمل النثر. وكل ما ليس جملة نثرية يقع خارج هذا الأساس. لتفصيل أوضح لما يدخل في هذه الفئة وما يخرج منها، انظر ما يعنيه النص المؤهَّل في Turnitin. وبناءً على التعريف أعلاه، هذه هي النسخة المختصرة:

• جُمل النثر (جُمل نحوية قياسية): تُحسب نصاً مؤهلاً
• القوائم والنقاط: مستبعدة، وموصوفة بأنها "short non-sentence structures" (هياكل قصيرة ليست جُملاً)
• هياكل أخرى ليست جُملاً: مستبعدة بالصياغة نفسها

هنا يصبح الأمر عملياً. ولأن المقام يضم النثر فقط، فإن حذف أجزاء مختلفة من عملك له آثار مختلفة على ما تُقاس النسبة مقابله.

• حذف جُمل النثر: المقام يتغير
• حذف القوائم أو النقاط: المقام يبقى كما هو. التعريف أعلاه يسميها مستبعدة
• حذف جدول: الأمر يعتمد على ما يحتويه. تقول ملاحظات إصدار Turnitin الصادرة في أغسطس 2023 «We are now able to process long-form prose text in tables.» (أصبحنا الآن قادرين على معالجة النص النثري الطويل في الجداول.) المدخلات القصيرة في الجدول ليست جُملاً نثرية؛ أما الفقرة الموجودة داخل خلية الجدول فهي كذلك.

هنا تتوقف الوثائق عن المساعدة. لا يقول Turnitin ما إذا كان حذف النثر سيدفع النسبة إلى الأعلى، أو إلى الأسفل، أو سيتركها كما هي. تعتمد النتيجة على النثر الذي تحذفه: جُمل مُعلَّمة أم غير مُعلَّمة. لا يمكنك معرفة ذلك مسبقاً إلا إذا كان لديك تقرير بالفعل. وحتى مع وجود تقرير بين يديك، تُظهر التظليلات ما يعلّمه النموذج في النسخة الحالية، لا ما سيعلّمه بعد تعديلك. ما تسمح الوثائق بقوله هو ما يحرّك المقام وما لا يحرّكه. ولا تسمح بقول الاتجاه الذي يتخذه الرقم عندما يتحرّك المقام.

هناك مشكلة ثانية تظهر عندما تحذف كثيراً. تعترف صفحة الأسئلة الشائعة في Turnitin بأن المستندات القصيرة تتصرف بشكل مختلف.

In shorter documents where there are only a few hundred words, the prediction will be mostly 'all or nothing' because we're predicting on a single segment without the opportunity to overlap. (في المستندات الأقصر، حيث لا توجد سوى بضع مئات من الكلمات، ستكون التوقعات في معظمها "all or nothing" (كل شيء أو لا شيء)، لأننا نتوقع على مقطع واحد دون فرصة للتراكب.)

بمجرد أن يتقلّص مستند إلى بضع مئات من الكلمات، يتخذ النموذج ما هو في جوهره قرار واحد على النص بأكمله. تتوقف النسبة عن كونها قراءة دقيقة وتقترب من حكم ثنائي. هذا استنتاجنا من الاقتباس، وليس صياغة Turnitin. والاقتباس نفسه يقول "all or nothing" (كل شيء أو لا شيء) ويشرح السبب: مقطع واحد بلا تراكب.

Results show that our accuracy increases with a little more text so submissions that contain less than 300 words may result in an AI writing score that is likely less accurate. (تُظهر النتائج أن دقتنا تزداد مع قدر أكبر قليلاً من النص، بحيث قد تؤدي الأعمال المُقدَّمة التي تحتوي على أقل من 300 كلمة إلى نتيجة كتابة بالذكاء الاصطناعي يُحتمل أن تكون أقل دقة.)

هذا القول ليس موجوداً في صفحة الأسئلة الشائعة. إنه يظهر في ملاحظة إصدار بتاريخ ديسمبر 2023 على صفحة Turnitin الخاصة بنموذج كشف الكتابة بالذكاء الاصطناعي. اقرأه بانتباه: يقول "less accurate," (أقل دقة)، لا "higher" (أعلى) ولا "lower." (أقل). الدقة تتعلق بما إذا كانت النتيجة تعكس الواقع، لا بالاتجاه الذي يتحرك فيه الرقم. فالنتيجة الأقل دقة قد تتجاوز الحد أو تقصر عنه. ولا تقول الوثائق أيّ الأمرين. وما يعنيه هذا لك هو أن الوصول إلى حد الكلمات والبقاء في النطاق الذي تكون فيه القراءة موثوقة يمكن أن يكونا هدفين مختلفين، وأحياناً متعارضين. وإذا أردت أن تفهم لماذا تُظهر الأوراق القصيرة قراءات متطرفة في كثير من الأحيان، فانظر لماذا يعلّم Turnitin الأوراق القصيرة على أنها 100 % ذكاء اصطناعي.

في ضوء كل ما سبق، إليك ما يمكنك فعله عندما تحتاج إلى تقصير ورقة وتكون نسبة الذكاء الاصطناعي تشغل بالك.

• إذا كان لديك تقرير بالفعل، فتحقق من أقسام النثر التي جرى تظليلها قبل الحذف. فالنثر المُعلَّم والنثر غير المُعلَّم يؤثران بشكل مختلف في النسبة، وتريد أن تعرف أيهما أيّ قبل أن تبدأ بالحذف.
• قلّص القوائم والنقاط أولاً. فهي مسمّاة كمستبعدة، وبالتالي يقلّ عدد كلماتك دون أن تمسّ المقام. أما الجداول فليست افتراضاً آمناً: تحقق مما إذا كانت الخلايا تحتوي على مدخلات قصيرة أم فقرات كاملة قبل أن تعاملها على أنها مجال حر.
• راقب الطول. تقول الأسئلة الشائعة في Turnitin إن التوقع في المستندات التي تبلغ "only a few hundred words" (بضع مئات فقط من الكلمات) يصبح في معظمه "all or nothing" (كل شيء أو لا شيء)، وتقول ملاحظة الإصدار إن الدقة تزداد مع قدر أكبر قليلاً من النص.
• إذا كان العمل المُقدَّم أقل من 300 كلمة، فتعامل مع النسبة بشك. فـ Turnitin نفسها تقول إن النتيجة قد تكون أقل دقة عند هذا الطول. وهذا يتعلق بموثوقية القراءة، لا باتجاه سيتحرك فيه الرقم.

لا شيء مما سبق يقول لك إن النسبة ستنخفض بعد الحذف. فقد يتحرّك المقام، وقد تنخفض الدقة، لكن الاتجاه ليس شيئاً تتوقعه الوثائق. وإذا كنت تفضل العمل على النثر نفسه بدل الاكتفاء بالتقليم حوله، فإن خفض نتيجتك في الذكاء الاصطناعي دون إفساد الاستشهادات يتناول ذلك بشكل منفصل. وأداة التكثيف من HumanPen تقلّص الحشو باتجاه عدد كلمات مستهدف تحدده أنت، للمستند .docx بأكمله أو للفقرات التي تحددها، وتُعيد ملفاً قابلاً للتحرير. وهي لا تعد بنتيجة محددة للذكاء الاصطناعي، لأنه، للأسباب التي عرضها هذا المقال للتو، لا يستطيع أحد ذلك.