وطوّر الأداة باحثون من جامعة ميريلاند، وشركة جوجل ديب مايند، وجامعة سيمون فريزر، بهدف تحديد ما إذا كانت الأفكار الأساسية في الوثيقة قد نشأت لدى إنسان أم نظام ذكاء اصطناعي، حتى لو تولى شخص آخر كتابة النص النهائي أو إعادة صياغته.
كيف تعمل أداة IdeaLens لكشف النصوص المولدة بالذكاء الاصطناعي؟
تعتمد معظم أدوات كشف النصوص المولدة بالذكاء الاصطناعي على رصد الأنماط اللغوية المميزة في بناء الجمل واختيار الكلمات، بينما تتبع «IdeaLens» منهجًا مختلفًا يركز على المحتوى الفكري للنص.
ووفقًا للورقة البحثية، درّب الباحثون الأداة على نحو مليون وثيقة مصنفة مسبقًا باعتبارها مكتوبة بواسطة البشر أو مولدة بالذكاء الاصطناعي. واستخدموا نماذج لغوية لاستخلاص الحجج الرئيسية من النصوص وتحويلها إلى مخططات مبسطة، بما يسمح للنظام بالتعرف على الأفكار بعيدًا عن أسلوب الكتابة الأصلي.
ويهدف هذا النهج إلى التمييز بين مصدر الفكرة والشخص أو الأداة التي تولت صياغتها، وهي نقطة مهمة في ظل انتشار استخدام الذكاء الاصطناعي في إعداد الأبحاث والمقالات والواجبات الدراسية.
دقة IdeaLens في اكتشاف المحتوى المولد بالذكاء الاصطناعي
أظهرت الاختبارات الأولية نتائج لافتة عند فحص الوثائق التي كتبها بالكامل مصدر واحد، سواء كان إنسانًا أو نظام ذكاء اصطناعي.
وتمكنت «IdeaLens» من تحديد 91% من الأعمال المولدة بالذكاء الاصطناعي بصورة صحيحة، فيما بلغت نسبة تصنيف النصوص البشرية خطأً على أنها مولدة بالذكاء الاصطناعي 0.6% فقط، وفقًا للنتائج الواردة في الدراسة.
ورغم هذه المؤشرات، لم تتفوق الأداة في جميع الاختبارات على أدوات الكشف المعروفة، إذ ظل أداؤها في بعض الجوانب أقل من أداة «Pangram».
هل تتفوق IdeaLens على أدوات كشف الذكاء الاصطناعي التقليدية؟
برز اختلاف أداء «IdeaLens» عند اختبار نصوص بشرية خضعت لتعديلات طفيفة باستخدام الذكاء الاصطناعي. ففي هذه الحالات، صنفت الأداة 95% من الوثائق البشرية على أنها مكتوبة بواسطة البشر، مقابل متوسط بلغ 44% في اختبارات أداة «Pangram».
وتشير هذه النتيجة إلى أن التركيز على الأفكار قد يساعد في تقليل الاشتباه الخاطئ في النصوص البشرية التي استعانت بأدوات الذكاء الاصطناعي في التحرير أو تحسين الصياغة.
لكن النتائج لا تعني أن «IdeaLens» أكثر دقة في جميع الظروف، إذ يتوقف الأداء على طبيعة النص، ومصدر الأفكار، وطريقة استخدام الذكاء الاصطناعي أثناء إعداد المحتوى.
عندما يكتب الذكاء الاصطناعي الفكرة ويصوغ الإنسان النص
كشفت الاختبارات عن اختلاف واضح بين الأدوات عندما تتداخل مساهمة الإنسان والذكاء الاصطناعي في إنتاج المحتوى.
فعندما كتب الذكاء الاصطناعي النص اعتمادًا على مخطط تفصيلي أعده إنسان، رصدت أداة «Pangram» تدخل الذكاء الاصطناعي في 92% من الحالات، بينما بلغت النسبة لدى «IdeaLens» 7% فقط، لأن الأفكار الأساسية كانت بشرية في الأصل.
وفي السيناريو العكسي، عندما صاغ إنسان نصًا اعتمادًا على مخطط أنشأه الذكاء الاصطناعي، رصدت «IdeaLens» تأثير الذكاء الاصطناعي في 68% من الحالات، مقابل 8% لدى «Pangram».
وتوضح النتائج أن الأدوات لا تقيس بالضرورة الشيء نفسه؛ فبعضها يركز على مؤشرات الصياغة اللغوية، بينما تحاول «IdeaLens» تتبع مصدر الأفكار والحجج التي يقوم عليها النص.
كيف تميز الأداة بين الأفكار البشرية وأفكار الذكاء الاصطناعي؟
لاحظ الباحثون أن الأفكار التي ينتجها البشر تميل إلى تضمين تفاصيل ملموسة، ومصادر يمكن التحقق منها، وإشارات إلى القيود والمحددات المرتبطة بالموضوع.
في المقابل، قد تتسم الأفكار التي ينتجها الذكاء الاصطناعي بعموميات واسعة، وأرقام يصعب التحقق منها، ومزاعم كبيرة، وإجابات تبدو مثالية بصورة تثير الشك.
ومع ذلك، لا تمثل هذه السمات دليلًا قاطعًا على مصدر النص؛ فقد ينتج الإنسان محتوى عامًا، كما يمكن لنماذج الذكاء الاصطناعي تقديم معلومات دقيقة ومدعومة بمصادر. لذلك تعتمد موثوقية الكشف على الاختبارات المتكررة ومدى قدرة الأداة على التعامل مع أنواع مختلفة من المحتوى.
هل تصلح IdeaLens للاستخدام في الجامعات والمجلات العلمية؟
على الرغم من النتائج الأولية، لا تزال «IdeaLens» بحاجة إلى مزيد من الاختبارات قبل الاعتماد عليها على نطاق واسع في المجلات العلمية والفصول الدراسية.
وأشار الباحثون إلى أن الأداة تواجه صعوبات مع بعض نماذج الذكاء الاصطناعي الأحدث، ما يحد من إمكانية استخدامها حاليًا باعتبارها حكمًا نهائيًا في النزاعات المتعلقة بنسب التأليف.
وتبرز أهمية هذه النقطة في المؤسسات التعليمية والبحثية، حيث قد يؤدي الاعتماد على نتائج أدوات الكشف وحدها إلى اتهام أشخاص باستخدام الذكاء الاصطناعي دون أدلة كافية. لذلك، من الأفضل التعامل مع هذه الأدوات باعتبارها وسائل مساعدة ضمن عملية تقييم أوسع، لا بديلًا عن مراجعة المحتوى والأدلة وسياق إعداد العمل.
