الذكاء الاصطناعي١٤ أكتوبر ٢٠٢٦
دراسة: وكلاء الذكاء الاصطناعي لا يزالون يخطئون في المهام الطويلة

خلصت ورقة من ServiceNow وجامعة McGill إلى أن أنظمة الذكاء الاصطناعي التي تقيّم أداء الوكلاء قد تفوّت أخطاء دقيقة في مهام استخدام الحاسوب الطويلة. ولا تضمن إضافة أدوات لهذه الأنظمة تحسّنًا في اكتشاف الأخطاء. وتستخدم فرق نماذج لغوية كبيرة لتقييم تشغيلات الوكلاء لأغراض التدريب والاختبار، وقد يتجاوز التشغيل ١٠٠ خطوة.
الحقائق الأساسية
قد تفوّت أنظمة الذكاء الاصطناعي المقيمة أخطاء دقيقة في مهام استخدام الحاسوب الطويلة، ولا تساعدها الأدوات الجديدة على نحو موثوق.
«New ServiceNow and McGill paper finds that AI judges still miss subtle mistakes in long computer-use tasks, and giving them tools does not reliably help.»
عرض المصدر ←تستخدم فرق نماذج لغوية كبيرة لتقييم تشغيلات الوكلاء في التدريب والاختبار، وقد تضمّ التشغيلات أكثر من ١٠٠ خطوة.
«Teams use LLMs to grade agent runs for training and evaluation. A run of 100+ steps can look finished while it drew the wrong»
عرض المصدر ←
المصادر
شفت معلومة تحتاج تصحيح؟ بلّغنا ونتحقق ونصحّح — سياسة التصحيح
صحّح هذا الخبر