الذكاء الاصطناعي٣ نوفمبر ٢٠٢٦
دراسة: تطور النماذج اللغوية يتجاوز الأبحاث العلمية المفسرة لها
اختبر باحثا ستانفورد أوين كوين وجيمس زو ٥٠ نتيجة شائعة عن النماذج اللغوية على ٢٠ نموذجًا، ووجدا أن التطور السريع يجعل كثيرًا من تلك النتائج لا تصف النماذج الأحدث. فقد انتهت صلاحية ٤٤٪ من النتائج، بينما تراجعت قوة ٣٤٪ أخرى؛ ومن بين ٢٢ نتيجة أمكن تقدير مدة بقائها، لم يتجاوز متوسطها ١٥٫٧ شهرًا. ويوصي الباحثان بتحديد النموذج وإصداره وتاريخ اختباره، وإتاحة الأوامر البرمجية والتحليل لإعادة التجربة على نماذج لاحقة.
الحقائق الأساسية
شملت الدراسة ٥٠ نتيجة شائعة و٢٠ نموذجًا لغويًا.
«Stanford researchers Owen Queen and James Zou tested 50 widely cited claims about large language models against 20 models and found that 44 percent have already "expired."»
عرض المصدر ←بلغ متوسط عمر النتائج الـ٢٢ التي قُدّرت مدة بقائها ١٥٫٧ شهرًا.
«Among the 22 findings with an estimated expiration date, the average lifespan was just 15.7 months.»
عرض المصدر ←يوصي الباحثان بتوثيق النموذج وإصداره وتاريخ الاختبار، ونشر الأوامر البرمجية والتحليل لإعادة فحص النتائج.
«Papers should document the model, version, and date, and publish prompts and analysis code so findings can be re-tested on future models.»
عرض المصدر ←
المصادر
شفت معلومة تحتاج تصحيح؟ بلّغنا ونتحقق ونصحّح — سياسة التصحيح
صحّح هذا الخبر