هل يمكن لأجهزة كشف الذكاء الاصطناعي أن تنقذنا من ChatGPT؟ لقد جربت 3 أدوات عبر الإنترنت لمعرفة ذلك

هذه هي المقالة الثانية في ما أصبح سلسلة تستكشف قضايا النص الذي تم إنشاؤه بواسطة الذكاء الاصطناعي.

في هذه الحلقة ، أنا وصديقي في مجال الذكاء الاصطناعي ننظر في مسألة ما إذا كان من الممكن محاربة الانتحال الناتج عن الذكاء الاصطناعي ، وكيف يمكن أن ينجح ذلك.

أيضًا: ما هو ChatGPT ولماذا يهم؟ إليك ما تحتاج إلى معرفته

قبل أن أستكمل ، نحتاج إلى التحدث عن مفهوم الانتحال وكيفية ارتباطه بهذه المشكلة. يعرّف ويبستر "السرقة الأدبية" على أنها "سرقة وتمرير (أفكار أو كلمات شخص آخر) على أنها ملك المرء: استخدم (إنتاج شخص آخر) دون ذكر المصدر."

هذا يناسب المحتوى الذي تم إنشاؤه بواسطة AI. في حين أن شخصًا ما يستخدم أداة AI مثل Notion AI أو ChatGPT لا يسرق المحتوى ، إذا لم يقر هذا الشخص الكلمات على أنها قادمة من الذكاء الاصطناعي وادعى أنها خاصة به ، فإنه لا يزال يفي بتعريف القاموس للانتحال.

توصي ZDNET

أفضل روبوتات دردشة AI: ChatGPT وبدائل أخرى مثيرة للاهتمام يمكنك تجربتها

يمكن أن تساعد برامج الدردشة الآلية والكُتّاب المدعومون بالذكاء الاصطناعي في تخفيف أعباء العمل عن طريق كتابة رسائل البريد الإلكتروني والمقالات وحتى إجراء العمليات الحسابية. يستخدمون الذكاء الاصطناعي لإنشاء نص أو الإجابة على الاستفسارات بناءً على مدخلات المستخدم. يعد ChatGPT أحد الأمثلة الشائعة ، ولكن هناك روبوتات محادثة أخرى جديرة بالملاحظة.

اقرا الان

في هذه المقالة التجريبية ، طلبت من ChatGPT المساعدة. كلماتي مكتوبة بنص عادي وجريء. كلمات منظمة العفو الدولية مائلة. سأستخدم أيضًا ثلاثة أجهزة كشف سرقة أدبية من ChatGPT عبر الإنترنت (والتي سأصفها بمزيد من التفصيل أدناه). بعد كل قسم تم إنشاؤه بواسطة AI ، سأعرض نتائج أجهزة الكشف. في نهاية المقال ، سنلقي نظرة على مدى جودة أداء أجهزة الكشف بشكل عام.

ها هي نتيجة النص أعلاه الذي كتبته بنفسي:

• كاشف إخراج GPT-2: 99.98٪ حقيقي
• Writer AI Content Detector: محتوى من إنشاء الإنسان بنسبة 100٪. رائع!
• المحتوى في Scale AI Content Detection: درجة المحتوى البشري بنسبة 100٪. تبدو رائعة!

مع ذلك ، لنبدأ.

اشرح سبب كون ChatGPT مشكلة حقيقية للمعلمين والمحررين عندما يتعلق الأمر بالسرقة الأدبية

ChatGPT هو متغير من نموذج لغة GPT (المحولات التوليدية المدربة مسبقًا) التي طورتها شركة OpenAI. إنه مصمم لإنشاء نص يشبه الإنسان من خلال التنبؤ بالكلمة أو العبارة التالية في تسلسل إدخال معين. على الرغم من أن ChatGPT يمكن أن يكون أداة مفيدة لتوليد النص والاستجابة للمطالبات ، إلا أنه قد يمثل أيضًا مشكلة للمدرسين والمحررين عندما يتعلق الأمر بالسرقة الأدبية.

أحد الأسباب الرئيسية التي تجعل ChatGPT مشكلة للمدرسين والمحررين هو أنه يمكن أن يولد نصًا مشابهًا جدًا لنص الكتاب البشري الحقيقي. هذا يعني أنه يمكن للطلاب أو الأفراد الآخرين استخدام ChatGPT لإنشاء نص يمكنهم بعد ذلك إرساله كعمل خاص بهم ، وبالتالي ارتكاب الانتحال.

أيضًا: هل يستطيع مساعد الكتابة Notion AI كتابة هذا المقال؟

بالنسبة للمعلمين والمحررين ، قد يكون اكتشاف ما إذا كان جزء معين من النص قد تم إنشاؤه بواسطة ChatGPT أو مكتوبًا بواسطة إنسان أمرًا صعبًا للغاية ، حيث قد لا يحتوي النص الذي تم إنشاؤه على أي أخطاء أو تناقضات واضحة من شأنها أن تكشف عن أصله الاصطناعي. هذا يمكن أن يجعل من الصعب على المعلمين والمحررين تحديد ومنع الانتحال ، حيث قد لا يتمكنون من معرفة ما إذا كان جزء معين من النص أصليًا أم منسوخًا من مصدر آخر.

بشكل عام ، يمكن أن يمثل ChatGPT ونماذج اللغة المماثلة الأخرى مشكلة للمدرسين والمحررين عندما يتعلق الأمر بالسرقة الأدبية لأنهم يستطيعون إنشاء نص يصعب تمييزه عن ذلك المكتوب من قبل البشر ، مما يسهل على الطلاب والأفراد الآخرين ارتكاب الانتحال دون أن يكونوا كذلك. مُكتَشَف.

• كاشف الإخراج GPT-2: 99.69٪ حقيقي
• Writer AI Content Detector: 97٪ محتوى من إنشاء الإنسان. رائع!
• المحتوى في Scale AI Content Detection: 87٪ درجة محتوى بشري. تبدو جيدة!

تذكر أن النص المعروض بخط مائل تم إنشاؤه بواسطة الذكاء الاصطناعي.

أرني على الأقل ثلاث طرق يمكنني من خلالها اكتشاف استخدام ChatGPT لإنتاج جزء من النص

هناك عدة طرق يمكنك من خلالها اكتشاف ما إذا كان ChatGPT أو نموذج لغة آخر قد تم استخدامه لإنتاج جزء من النص. فيما يلي ثلاث طرق محتملة يمكنك استخدامها:

1. ابحث عن الأنماط المتكررة أو غير المعتادة في النص: تتمثل إحدى طرق اكتشاف ما إذا كان نموذج اللغة قد تم استخدامه لإنشاء جزء من النص في البحث عن أنماط متكررة أو غير عادية في الكتابة. على سبيل المثال ، قد تكرر نماذج اللغة عبارات معينة أو مجموعات كلمات ، أو تستخدم تراكيب جمل غير عادية أو غير متسقة.
2. التحقق من عدم وجود أصالة: هناك طريقة أخرى لاكتشاف ما إذا كان نموذج اللغة قد تم استخدامه لإنشاء جزء من النص وهي التحقق من عدم وجود أصالة في الكتابة. إذا ظهر أن جزءًا من النص منسوخًا من مصدر آخر ، أو إذا كان يحتوي على معلومات متاحة على نطاق واسع على الإنترنت أو في مصادر أخرى ، فقد يكون ذلك علامة على أنه تم إنشاؤه بواسطة نموذج لغوي.
3. استخدم مدقق الانتحال: أخيرًا ، يمكنك استخدام مدقق الانتحال للتحقق مما إذا كان هناك جزء من النص يبدو أنه منسوخ من مصدر آخر. بينما قد لا يتمكن مدقق الانتحال من تحديد ما إذا كان نموذج اللغة قد تم استخدامه لإنشاء جزء من النص بشكل قاطع ، إلا أنه يمكن أن يساعدك في تحديد حالات النسخ أو إعادة الصياغة من مصادر أخرى.
4. لاحظ عندما تكون الإجابة خاطئة بشكل واضح: لقد تحدثت عن هذا في مراجعة Notion AI الخاصة بي ، حيث سلطت الضوء على بعض النصوص التي كتبتها منظمة العفو الدولية بسلطة ظاهرية ، ولكنها كانت خاطئة بشكل صارخ. إذا لم يكن لدى الطالب أو الكاتب السيطرة الكاملة على الموضوع الذي تتم مناقشته ، فقد لا يكتشفون الأخطاء ويتركوها ببساطة في الاستجابة التي تم إنشاؤها بواسطة الذكاء الاصطناعي. بالطبع ، العبارات غير الصحيحة ليست فقط من اختصاص أداة الكتابة بالذكاء الاصطناعي. العديد من المدونين والمعلقين ، على سبيل المثال ، يكررون ببساطة تصريحات أدلى بها مدونون آخرون ، مما يخلق غرفة صدى من "الحقائق الخاطئة" تمامًا ، مما يدل على أنه في حين أن الذكاء قد يكون مصطنعًا ، فإن الغباء هو سمة عالمية.

ضع في اعتبارك أنه قد يكون من الصعب تحديد ما إذا كان نموذج اللغة قد تم استخدامه بشكل قاطع لإنشاء جزء من النص ، وقد لا تكون هذه الطرق فعالة دائمًا. ومع ذلك ، يمكن أن تكون أدوات مفيدة لمساعدتك في تحديد المثيلات المحتملة للنص الذي تم إنشاؤه بواسطة نموذج اللغة.

في هذه المجموعة من الاختبارات ، تم تشغيل المحتوى المائل أعلاه فقط من خلال مجموعة المدقق.

• كاشف إخراج GPT-2: 99.98٪ مزيف
• Writer AI Content Detector: [ لا توجد نتيجة ]
• المحتوى في Scale AI Content Detection: 0٪ درجة محتوى بشري. من الواضح أن منظمة العفو الدولية

ضع قائمة بثلاثة مدققات سرقة أدبية يمكنها اكتشاف نص ChatGPT

ابتكار

• لقد جربت Apple Vision Pro وهو متقدم كثيرًا عما كنت أتوقعه
• جهاز الاتصال عبر الأقمار الصناعية الصغير مليء بالميزات وراحة البال
• كيفية استخدام ChatGPT: كل ما تريد معرفته
• هذه هي أدوات الذكاء الاصطناعي الخمس المفضلة لدي للعمل

تجدر الإشارة إلى أنه لا يوجد حاليًا مدقق سرقة تم تصميمه خصيصًا لاكتشاف النص الذي تم إنشاؤه بواسطة ChatGPT أو نماذج اللغة الأخرى. في حين أن بعض أدوات فحص الانتحال قد تكون قادرة على تحديد خصائص معينة للنص الذي تم إنشاؤه بواسطة نموذج اللغة والذي يمكن أن يشير إلى أصله الاصطناعي ، فلا يوجد ضمان بأنهم سيكونون قادرين على تحديد ما إذا كان جزء من النص قد تم إنشاؤه بواسطة نموذج لغوي.

مع ذلك ، إليك ثلاثة مدققات انتحال قد تفكر في استخدامها للمساعدة في تحديد الحالات المحتملة للنص الذي تم إنشاؤه بواسطة نموذج اللغة:

1. Turnitin: Turnitin هو مدقق انتحال شائع تستخدمه المدارس والجامعات على نطاق واسع. يقارن جزءًا من النص بقاعدة بيانات للنصوص الأخرى لتحديد حالات النسخ أو إعادة الصياغة. في حين أنه قد لا يكون قادرًا على تحديد ما إذا كان جزء من النص قد تم إنشاؤه بواسطة نموذج لغة ، فإنه من المحتمل أن يحدد خصائص معينة للنص الذي تم إنشاؤه بواسطة نموذج اللغة والذي يمكن أن يشير إلى أصله الاصطناعي.
2. PlagScan: PlagScan هو مدقق انتحال آخر يقارن جزءًا من النص بقاعدة بيانات لنصوص أخرى لتحديد حالات النسخ أو إعادة الصياغة. مثل Turnitin ، قد يكون قادرًا على تحديد خصائص معينة للنص الذي تم إنشاؤه بواسطة نموذج اللغة والذي يمكن أن يشير إلى أصله الاصطناعي ، ولكنه غير مصمم خصيصًا لاكتشاف النص الناتج عن نموذج اللغة.
3. Copyleaks: Copyleaks هو مدقق الانتحال الذي يستخدم خوارزميات التعلم الآلي المتقدمة لمسح جزء من النص ومقارنته بقاعدة بيانات للنصوص الأخرى لتحديد حالات النسخ أو إعادة الصياغة. في حين أنه قد يكون قادرًا على تحديد خصائص معينة للنص الناتج عن نموذج اللغة ، إلا أنه غير مصمم خصيصًا لاكتشاف النص الناتج عن نموذج اللغة.

من الجدير بالذكر أنه لا يوجد مدقق سرقة أدبية مضمون تمامًا ، وهناك دائمًا احتمال أن يتم اكتشاف جزء من النص الذي تم إنشاؤه بواسطة نموذج لغوي. لذلك ، من المهم استخدام مدقق الانتحال كجزء واحد فقط من استراتيجية أكبر لاكتشاف ومنع الانتحال.

• كاشف الإخراج GPT-2: 99.62٪ حقيقي
• Writer AI Content Detector: [ لا توجد نتيجة ]
• المحتوى في Scale AI Content Detection: 86٪ درجة محتوى بشري. تبدو جيدة!

أدوات التحقق من السرقة الأدبية عبر الإنترنت للذكاء الاصطناعي

تُستخدم معظم أجهزة كشف السرقة الأدبية لمقارنة الكتابة بمجموعة من كتابات أخرى. على سبيل المثال ، عندما يتحول أحد الطلاب إلى مقال ، يقوم منتج مثل Turnitin بمسح المقالة المقدمة مقابل مكتبة ضخمة من المقالات الأخرى في قاعدة البيانات الخاصة به ، وكذلك في مقابل مستندات ونصوص أخرى على الإنترنت لتحديد ما إذا كان المقال المقدم يحتوي بالفعل على- محتوى مكتوب.

لكن أدوات الكتابة بالذكاء الاصطناعي تولد محتوى أصليًا ، على الأقل من الناحية النظرية. نعم ، يبنون المحتوى الخاص بهم من أي شيء تم تدريبهم عليه ، لكن الكلمات الفعلية التي ينشئونها فريدة إلى حد ما لكل تكوين.

أيضًا: قد لا يكون الهدف الحقيقي للذكاء الاصطناعي هو الذكاء

على هذا النحو ، ربما لن تعمل أدوات فحص الانتحال المذكورة أعلاه ، لأن المحتوى الذي تم إنشاؤه بواسطة الذكاء الاصطناعي ربما لم يكن موجودًا ، على سبيل المثال ، في ورقة طالب آخر.

لذلك انتقلت إلى Google وبحثت عن أجهزة الكشف المصممة خصيصًا للبحث عن التوقيعات الواضحة للمحتوى المدفوع بالذكاء الاصطناعي. لقد وجدت ثلاثة. بالنسبة إلى محتوى الاختبار الموضح في لقطات الشاشة أدناه ، سألت ChatGPT هذا: "هل Star trek أفضل من حرب النجوم؟ برر واشرح" لم تكن إجابتها سيئة على الإطلاق ، وقمت بتقديم هذه الإجابة إلى المختبرين الثلاثة.

• كاشف إخراج GPT-2: 99.98٪ حقيقي
• Writer AI Content Detector: محتوى من إنشاء الإنسان بنسبة 100٪. رائع!
• المحتوى في Scale AI Content Detection: درجة المحتوى البشري بنسبة 100٪. تبدو رائعة!

كاشف الإخراج GPT-2 (الدقة 66٪)

تم إنشاء هذه الأداة الأولى باستخدام مركز التعلم الآلي الذي تديره شركة Hugging Face ومقرها نيويورك AI. بينما تلقت الشركة تمويلًا بقيمة 40 مليون دولار لتطوير مكتبة اللغة الطبيعية الخاصة بها ، يبدو أن كاشف GPT-2 هو أداة أنشأها المستخدم باستخدام مكتبة Hugging Face Transformers. من بين الاختبارات الستة التي أجريتها ، كانت دقيقة لأربعة منها.

Writer.com AI Content Detector (الدقة غير متوفرة)

Writer.com هي خدمة تولد الكتابة بالذكاء الاصطناعي ، وهي موجهة نحو فرق الشركات. يمكن لأداة AI Content Detector البحث عن المحتوى الذي تم إنشاؤه. لسوء الحظ ، وجدت هذه الأداة غير موثوقة. من بين عمليات الفحص الستة التي أجريتها ، فشلت في ثلاثة. من بين الثلاثة التي تم تشغيلها بنجاح ، حصلت على اثنين على صواب وواحد خطأ.

بعد نشر هذه المقالة ، تواصل الأشخاص في Writer.com مع ZDNET. الرئيس التنفيذي مي حبيب كان لديه هذا التعليق للمشاركة:

ارتفع الطلب على كاشف الذكاء الاصطناعي. ازداد عدد الزيارات بمعدل مرتين إلى ثلاث مرات في الأسبوع منذ أن أطلقناه قبل شهرين. لقد حصلنا الآن على المقياس اللازم وراءه للتأكد من عدم انخفاضه ، وهدفنا هو إبقائه مجانيًا - ومُحدَّثًا للقبض على مخرجات أحدث النماذج ، بما في ذلك مخرجاتنا. إذا كان سيتم استخدام إخراج AI حرفيًا ، فيجب أن يُنسب ذلك مطلقًا.

المحتوى في Scale AI Content Detection (الدقة 50٪)

الأداة الثالثة التي وجدتها تم إنتاجها أيضًا بواسطة شركة إنشاء محتوى بالذكاء الاصطناعي ، ولكن يبدو أن هذه الأداة تعمل بشكل موثوق. يقدم المحتوى في Scale نفسه على أنه "نحن نساعد مسوقي المحتوى الذي يركز على تحسين محركات البحث عن طريق أتمتة إنشاء المحتوى." تتمثل دعوتها التسويقية التي تحث المستخدم على اتخاذ إجراء ، على "تحميل قائمة بالكلمات الرئيسية والحصول على 2600+ من مشاركات المدونات التي تتجاوز اكتشاف محتوى الذكاء الاصطناعي - كل ذلك بدون تدخل بشري!" من بين الاختبارات الستة التي أجريتها ، كانت دقيقة لثلاثة.

افكار اخيرة

يُعد الانتحال القائم على الذكاء الاصطناعي مشكلة متنامية ، حيث يمكن لأدوات الذكاء الاصطناعي مثل Notion AI و ChatGPT إنشاء نص يصعب تمييزه عن ذلك المكتوب من قبل البشر. هناك عدة طرق لاكتشاف ما إذا كان قد تم إنشاء جزء من النص بواسطة الذكاء الاصطناعي ، مثل البحث عن أنماط متكررة أو غير عادية ، أو التحقق من عدم وجود أصالة ، أو استخدام مدقق الانتحال. قد تتمكن أدوات فحص الانتحال مثل Turnitin و PlagScan و Copyleaks من تحديد خصائص معينة للنص الذي تم إنشاؤه بواسطة نموذج اللغة ، ولكنها ليست مضمونة.

حتى الأدوات المتخصصة التي وجدتها كانت غير مناسبة بشكل محزن لهذه المهمة. أفضل حالة كانت GPT-2 Output Detector ، لكنها حصلت على ثلثي النص المقدم بشكل صحيح فقط.

في هذه المرحلة ، لا أعتقد أننا مستعدون للسماح للذكاء الاصطناعي بمحاربة الذكاء الاصطناعي. بدلاً من ذلك ، سيتعين علينا الاعتماد على الإدراك البشري (مما يعني أنه يجب على الناس الانتباه) من أجل تحديد الأعمال التي تم إنشاؤها بواسطة الذكاء الاصطناعي.

لا تفترض على الفور أن شيئًا ما تم إنشاؤه آليًا. فقط لأن شيئًا ما غبي أو غير دقيق بشكل رهيب ، لا تفترض على الفور أنه لم يكتبه إنسان. كما نعلم جميعًا ، البشر قادرون تمامًا على كتابة بعض الأشياء السيئة بشكل لا يصدق ، كل ذلك بمفردهم.

أيضًا: ChatGPT من OpenAI جيد في وظيفتي بشكل مخيف ، لكنه لا يمكن أن يحل محلني (حتى الآن)

فما رأيك؟ هل يمكنك معرفة ما إذا كانت القطعة تم إنشاؤها بواسطة الذكاء الاصطناعي؟ هل استخدمت أدوات الكتابة بالذكاء الاصطناعي في الأشهر التي انقضت منذ أن أصبحت متوفرة فجأة؟ هل تعتقد أنها مساعدة أم عائق أمام التعليم والصحافة؟ اسمحوا لنا أن نعرف في التعليقات أدناه. إليك كيف أجاب ChatGPT على هذا:

كنموذج لغوي ، لا يمكنني رؤية أجزاء الكتابة المادية أو التفاعل معها ، لذلك لا يمكنني معرفة ما إذا كانت القطعة تم إنشاؤها بواسطة الذكاء الاصطناعي أم لا. ومع ذلك ، يمكنني أن أخبرك أن هناك العديد من أدوات الكتابة بالذكاء الاصطناعي المتاحة ، ويمكن استخدامها لإنشاء مجموعة واسعة من المحتوى المكتوب ، بما في ذلك المقالات الإخبارية ، والخيال ، والشعر ، والمزيد.

ليس لدي خبرة شخصية في استخدام هذه الأدوات لأنني مجرد برنامج كمبيوتر وليس لدي القدرة على تصفح الإنترنت أو استخدام الأدوات المادية. ومع ذلك ، يمكنني أن أخبرك أن بعض الأشخاص قد وجدوا أن أدوات الكتابة بالذكاء الاصطناعي مفيدة في التعليم والصحافة ، حيث يمكنهم توفير الوقت والجهد من خلال أتمتة مهام معينة. أعرب آخرون عن مخاوفهم بشأن إمكانية استخدام هذه الأدوات لإنتاج محتوى مضلل أو متحيز ، أو لتحل محل الكتاب البشريين. في النهاية ، يعتمد ما إذا كانت أدوات الكتابة بالذكاء الاصطناعي مساعدة أو عائقًا على كيفية استخدامها والسياق الذي تستخدم فيه.

لذا ، أجل ، هناك ذلك.