Which tools do Claude, Codex and Cursor choose? We measured 17k runs to find out
أظهرت تجربة شملت ١٦٬٨٩٣ تشغيلًا أن Claude Code وCodex وCursor لا تختار الأدوات نفسها غالبًا، إذ اتفقت في ٤٢٪ فقط من الحالات. واعتمد Cursor على الويب في نحو ثلثي الجلسات، بينما استخدم Codex البحث الشبكي في ٩٤٪ منها، ولجأ Claude Code إليه في نحو ٣٠٪ من الحالات. كما غيّر مستودع الكود ولغة البرمجة النتيجة؛ فاختارت التجربة مزوّدات بريد إلكتروني مختلفة عند تنفيذ الطلب نفسه على TypeScript وPython وGo وJava. ونُشرت في المرحلة الأولى ٥٬٢٩٢ جلسة صالحة من ٥١ قاعدة كود و١٨ قطاعًا، مع إتاحة جميع الآثار للتحليل.
الحقائق الأساسية
احتُفظ بـ٥٬٢٩٢ جلسة صالحة من أصل ١٦٬٨٩٣ تشغيلًا، موزعة على ٥١ قاعدة كود و١٨ قطاعًا.
«Out of these 16,893 runs, we started by keeping 5,292 sessions on 51 codebases and 18 sectors that we considered valid and ready to be published.»
عرض المصدر ←اتفقت الوكلاء الثلاثة على اختيار الأداة نفسها في ٤٢٪ فقط من الحالات، بينما اختار Claude Code البناء الداخلي في ١٩٪ منها مقابل ١٠٪ لدى Codex وCursor.
«All three agents pick the same tool in only 42% of the cells»
عرض المصدر ←أعطى الطلب نفسه نتائج مختلفة باختلاف لغة المستودع: فاز Resend في TypeScript، وSendgrid في Python، وPostmark في Go، وAzure ACS في Java.
«With the exact same ask on 4 repositories in 4 different programming languages, we got 4 different email provider winners: Resend wins on Typescript (55/89 runs), Sendgrid on Python (22/24), Postmark on Go (20/24) and Azure ACS on Java (22/23).»
عرض المصدر ←
المصادر
شفت معلومة تحتاج تصحيح؟ بلّغنا ونتحقق ونصحّح — سياسة التصحيح
صحّح هذا الخبر