الكتابة بمساعدة الذكاء الاصطناعي مقابل الكتابة المولَّدة به: كيف يتعامل Turnitin مع كلٍّ منهما

كشف الذكاء الاصطناعي في Turnitin لا يتتبع عملية كتابتك. فهو لا يعرف ما إذا كنت قد كتبت بيدك، أو أمليت النص، أو استخدمت أداة في مرحلة ما. إنه يقيّم النص الذي تقدّمه.

"When a paper is submitted to Turnitin, sentences from the submission are extracted and segmented into overlapping sections for prediction analysis. Each segment is classified by the AI detection model and given a value between 0 and 1, denoting the probability of the text being likely human or AI-generated." (عندما تُقدَّم ورقة بحثية إلى Turnitin، تُستخرج الجمل من المادة المُقدَّمة وتُقسَّم إلى مقاطع متداخلة من أجل تحليل التنبؤ. ويُصنَّف كل مقطع بواسطة نموذج كشف الذكاء الاصطناعي وتُعطى له قيمة بين 0 و1، تدل على احتمال أن يكون النص من كتابة بشرية أو مولَّداً بالذكاء الاصطناعي.)

يستخرج النموذج الجمل من المستند النهائي، ويقسّمها إلى مقاطع، ويقيّم كل مقطع. ولا يمكنه الوصول إلى سجل الإصدارات، أو الطوابع الزمنية للتعديل، أو سجلات استخدام الأدوات، ولهذا السبب بالذات يستحق هذا السجل أن تحتفظ به أنت، كما يوضح كيف تثبت أنك لم تستخدم الذكاء الاصطناعي. إنه يعمل بما هو موجود على الصفحة في لحظة التقديم.

وهذا يعني أن الفرق بين "كتبت هذا بمساعدة" و"تولَّد هذا عني" ليس أمراً يمكن للنموذج ملاحظته مباشرة. فهو يصنّف النص بناءً على أنماط إحصائية في المخرجات النهائية.

نطاق ما يخضع للتحليل محدَّد أيضاً: "This qualifying text includes only prose sentences, meaning that we only analyze blocks of text that are written in standard grammatical sentences and do not include other types of writing such as lists, bullet points (short non-sentence structures), or other non-sentence structures." (هذا النص المؤهَّل يضم جملاً نثرية فقط، أي أننا نحلّل فقط كتل النص المكتوبة بجمل نحوية قياسية، ولا ندرج أنواعاً أخرى من الكتابة مثل القوائم أو النقاط (تراكيب قصيرة ليست جملاً) أو غيرها من التراكيب غير الجملية.) ثم: "This percentage is not necessarily the percentage of the entire submission." (هذه النسبة ليست بالضرورة نسبة المادة المُقدَّمة بأكملها.)

يستخدم كثير من الطلاب Grammarly أو أدوات مشابهة لتصحيح الإملاء والنحو. والسؤال هو ما إذا كانت هذه التصحيحات تؤدي إلى إبراز النص بوصفه مولَّداً بالذكاء الاصطناعي. وتتناول وثائق Turnitin هذه النقطة مباشرة.

"Our detector is not tuned to target Grammarly-generated spelling, grammar, and punctuation modifications to content but rather, other AI content written by LLMs such as GPT-3.5. Based on tests we conducted on human-written documents with no AI-generated content in them, in most cases, changes made by Grammarly (free & premium) and/or other grammar-checking tools were not flagged as AI-written by our detector." (كاشفنا غير مضبوط لاستهداف تعديلات الإملاء والنحو وعلامات الترقيم التي يولّدها Grammarly، بل يستهدف محتوى ذكاء اصطناعي آخر كتبته نماذج لغوية كبيرة مثل GPT-3.5. وبناءً على اختبارات أجريناها على مستندات كتبها بشر ولا تحتوي أي محتوى مولَّد بالذكاء الاصطناعي، فإن التغييرات التي أجراها Grammarly (النسخة المجانية والمدفوعة) و/أو أدوات التدقيق النحوي الأخرى لم تُبرَز في معظم الحالات بوصفها مكتوبة بالذكاء الاصطناعي لدى كاشفنا.)

العبارة المفتاحية هي "in most cases." (في معظم الحالات). فالكاشف غير مضبوط لاصطياد تصحيحات الإملاء والنحو. وفي معظم الحالات، لن يُبرَز نص كتبه إنسان ثم نُقِّح بـGrammarly. وينطبق هذا على النسختين المجانية والمدفوعة من Grammarly، وعلى أدوات التدقيق النحوي الأخرى كذلك. ويتناول هل يكتشف Turnitin كتابة Grammarly بوصفها كتابة بالذكاء الاصطناعي؟ صياغة الشركة سطراً بسطر.

وهذا لا يعني أن النص المُعدَّل نحوياً غير مرئي للكاشف. بل يعني أن الكاشف غير مصمَّم للتعرف على هذا النوع المحدَّد من التعديل. فالنص النثري النهائي يخضع مع ذلك لتحليل بحثاً عن أنماط إحصائية تشبه أنماط الذكاء الاصطناعي. لكن مجرد تمرير النص على Grammarly من أجل الإملاء والنحو لا يؤدي في معظم الحالات إلى إبرازه بحد ذاته.

ترسم الوثائق خطاً واضحاً بين ميزات التصحيح في Grammarly وميزاته التوليدية. وهذا الاستثناء لا يمتد إلى المحتوى الذي تنتجه أدوات الذكاء الاصطناعي التوليدي.

"Please note that this excludes content generated by Grammarly's generative AI-powered features, including draft generation, paraphrasing, summarizing, and other features. Content produced using these features will likely be flagged as AI-generated by our detector." (يُرجى ملاحظة أن هذا يستبعد المحتوى الذي تولّده ميزات الذكاء الاصطناعي التوليدي في Grammarly، ومنها توليد المسودات وإعادة الصياغة والتلخيص وميزات أخرى. والمحتوى المنتَج باستخدام هذه الميزات سيُبرَز على الأرجح بوصفه مولَّداً بالذكاء الاصطناعي لدى كاشفنا.)

إذن هناك فئتان. من جهة: تصحيحات الإملاء والنحو وعلامات الترقيم. فهذه لا يستهدفها الكاشف، وفي معظم الحالات لا تُبرَز. ومن جهة أخرى: توليد المسودات وإعادة الصياغة والتلخيص وغيرها من الميزات التوليدية. والمحتوى المنتَج باستخدام هذه الميزات سيُبرَز على الأرجح بوصفه مولَّداً بالذكاء الاصطناعي.

وهذا التمييز مهم. إن كنت استخدمت Grammarly لتصحيح الأخطاء المطبعية وضبط النحو، فالكاشف غير مضبوط لاصطياد ذلك. وإن كنت استخدمته لتوليد مسودة، أو إعادة صياغة مقطع، أو تلخيص مصدر، فإن هذا المخرَج يُعامَل معاملة أي محتوى آخر مولَّد بالذكاء الاصطناعي، وسيُبرَز على الأرجح.

ويرتكز هذا الخط إلى ما تنتجه الميزات، لا إلى العلامة التجارية. فأي ميزة توليدية في أي أداة، لا في Grammarly وحدها، تقع في جانب "will likely be flagged" (سيُبرَز على الأرجح). وأي تصحيح إملائي أو نحوي من أي أداة يقع في جانب "not tuned to target" (غير مضبوط لاستهدافه). والجانب الذي تقع فيه يحدّد أيضاً ما يجب أن تصرّح به، وهو ما يغطيه هل يغيّر تمرير مستندك عبر أداة إعادة كتابة ما عليك التصريح به؟.

حتى حين لا يكون للذكاء الاصطناعي أي دور، يمكن لأنواع معينة من النثر الذي يكتبه البشر أن تُنتج نتائج إيجابية خاطئة. وتسرد الوثائق أنماطاً محدَّدة يجب الانتباه إليها.

"Sometimes false positives (incorrectly flagging human-written text as AI-generated), can include content without a lot of structural variation, text that literally repeats itself, or text that has been paraphrased without developing new ideas." (قد تشمل النتائج الإيجابية الخاطئة أحياناً، أي إبراز نص كتبه إنسان خطأً بوصفه مولَّداً بالذكاء الاصطناعي، محتوى يفتقر إلى كثير من التنوّع البنيوي، أو نصاً يكرّر نفسه حرفياً، أو نصاً أُعيدت صياغته دون تطوير أفكار جديدة.)

"If our indicator shows a higher amount of AI writing in such text, we advise you to take that into consideration when looking at the percentage indicated." (إذا أظهر مؤشرنا قدراً أكبر من الكتابة بالذكاء الاصطناعي في هذا النوع من النصوص، فننصحك بوضع ذلك في الاعتبار عند النظر إلى النسبة المبيَّنة.)

لذلك، إذا كان نصك مسطَّحاً بنيوياً، أو يكرّر الصياغة نفسها، أو يعيد الصياغة دون إضافة أفكار جديدة، فقد يبرزه النموذج حتى لو كان مكتوباً بالكامل بيد إنسان. وهذا مهم في التمييز بين الكتابة بمساعدة الذكاء الاصطناعي والكتابة المولَّدة به، لأن طالباً يكتب نصه بنفسه لكنه يعيد الصياغة بكثرة قد يرى إبرازاً لا علاقة له باستخدام أداة على الإطلاق. ويمثل أعدت صياغة نص مولَّد بالذكاء الاصطناعي بأداة ذكاء اصطناعي أخرى ومع ذلك أبرزه Turnitin الطرف الآخر من الأثر نفسه.

تصرّح وثائق Turnitin بوضوح بأن نتيجة كشف الذكاء الاصطناعي لا ينبغي التعامل معها بوصفها دليلاً قاطعاً على سوء السلوك.

"Our AI writing detection model may not always be accurate (it may misidentify human-written, AI-generated, and AI-paraphrased text), so it should not be used as the sole basis for adverse actions against a student." (قد لا يكون نموذجنا لكشف الكتابة بالذكاء الاصطناعي دقيقاً دائماً، إذ قد يسيء تمييز النص المكتوب بيد إنسان، والنص المولَّد بالذكاء الاصطناعي، والنص المُعاد صياغته بالذكاء الاصطناعي، لذا لا ينبغي استخدامه أساساً وحيداً لإجراءات ضارة بحق طالب.)

"It takes further scrutiny and human judgment in conjunction with an organization's application of its specific academic policies to determine whether academic misconduct has occurred." (الأمر يتطلّب مزيداً من التدقيق وحكماً بشرياً، إلى جانب تطبيق المؤسسة لسياساتها الأكاديمية الخاصة، لتحديد ما إذا كان قد وقع سوء سلوك أكاديمي.)

النتيجة معلومة واحدة من بين معلومات أخرى. فهي تتطلّب مزيداً من التدقيق وحكماً بشرياً، يُطبَّقان في إطار السياسات الأكاديمية الخاصة بالمؤسسة. ويمكن للنموذج أن يسيء التمييز في الاتجاهين: إبراز نص بشري بوصفه مولَّداً بالذكاء الاصطناعي، أو تفويت نص مولَّد به تماماً. واعتبار النسبة أساساً وحيداً يعني تجاهل توجيه الوثائق نفسها. وإن كنت أنت من يحمل التقرير المُبرَز، فإن تم إبرازه، لكنك كتبته بنفسك يشرح كيف تعرضه على المُقيِّم.

إن كنت تحاول فهم كيف يتعامل Turnitin مع الكتابة بمساعدة الذكاء الاصطناعي مقابل الكتابة المولَّدة به، فها هي الخلاصة:

• النموذج يرى النص النهائي. فهو لا يتتبع عملية كتابتك. بل يقسّم جمل النثر في المستند المُقدَّم ويقيّمها.
• تصحيحات الإملاء والنحو مختلفة. فالكاشف غير مضبوط لاستهداف تصحيحات الإملاء والنحو وعلامات الترقيم على طريقة Grammarly. وفي معظم الحالات لا تُبرَز.
• الميزات التوليدية ستُبرَز على الأرجح. فالمحتوى الناتج عن توليد المسودات وإعادة الصياغة والتلخيص وغيرها من ميزات Grammarly التوليدية يُعامَل معاملة المحتوى المولَّد بالذكاء الاصطناعي، وسيُبرَز على الأرجح.
• النتائج الإيجابية الخاطئة تحدث. فالنثر المسطَّح بنيوياً أو التكراري أو المُعاد صياغته أكثر عرضة للإبراز، حتى دون أي تدخل من الذكاء الاصطناعي.
• النتيجة ليست أساساً وحيداً. تقول الوثائق إنه لا ينبغي استخدامها أساساً وحيداً لإجراءات ضارة بحق طالب. والحكم البشري وسياسة المؤسسة هما المرجع.

يمكن إعادة تشغيل المقاطع المستوفية للشروط مجاناً.