الكشف عن استخدام ChatGPT في الأوراق الأكاديمية من خلال المفردات الزائدة

ليس سرًا أن الطلاب في هذه الأيام يحبون استخدام ChatGPT للمساعدة في التقارير ومهام الكتابة الأخرى، ولكنه أصبح أكثر انتشارًا بين الأكاديميين أيضًا. وهذا يثير التساؤل حول ما إذا كان من الممكن التمييز بين الكتابة الأكاديمية بمساعدة ChatGPT بطريقة أو بأخرى. وفق [Dmitry Kobak] وزملائي، من المؤشرات القوية لاستخدام ChatGPT هو وجود مفردات زائدة مع الكثير من النصوص المنمقة. كما هو مفصل في ورقة الحجز الخاصة بهميعد تكرار بعض الكلمات النمطية تغييرًا كبيرًا في المفردات المستخدمة في الأعمال المنشورة التي تمت دراستها.

في دراستهم، نظروا في أكثر من 14 مليون ملخص طبي حيوي تم استرجاعها من PubMed من عام 2010 إلى عام 2024. تم بعد ذلك تحليل هذه الملخصات فيما يتعلق باستخدام الكلمات وتكرارها، مما يوضح الزيادات الطبيعية في تكرار الكلمات (على سبيل المثال من جائحة SARS-CoV-2 وتفشي الإيبولا)، بالإضافة إلى الزيادات الهائلة في المفردات الزائدة بما يتوافق مع توفر ChatGPT للعامة. وأدوات مماثلة تعتمد على LLM.

تمت إضافة تعليقات توضيحية إلى إجمالي 774 مصطلحًا زائدًا عن الحاجة. تعني كلمة “الزائدة” هنا “خارجة عن القاعدة”، باتباع نمط “الوفيات الزائدة”، حيث تنحرف الوفيات في فترة ما بشكل كبير عن الأنماط التي تم تحديدها في الفترات السابقة. عثرة في هذا الصدد في كلمات مثل عمليه التنفس منطقية، ولكن ترتفع في أسلوب الكلمات مثل معقد و خاصة يبدو أن هذا يرجع إلى ميل LLMs إلى مثل هذه اللغة المنمقة والمبالغة في الدراما.

لقد طور الباحثون كود التحليل متاح للراغبين في تجربة مجموعة أخرى. أيضا المؤلف الرئيسي موجهة والسؤال هو ما إذا كان ChatGPT سيؤثر على الأشخاص لكتابة ماجستير العلوم. في هذه المرحلة، لا يزال السؤال مفتوحًا عما إذا كان الأشخاص سيرغبون في استخدام مصطلحات مثل ChatGPT أو محاولة تجنب الظهور مثل LLM.