مبرمجون يشككون في قدرات استدلال Claude Opus 5.5 بناءً على سجلات الاستخدام
تحليل نحو 1400 سجل استخدام أشار إلى تغيّر في أسلوب التفكير حول الثالث من الشهر، بينما أرجع مبرمج آخر التغيّر إلى طريقة تلخيص التفكير.
تداول مبرمجون علنًا مزاعم بأن نموذج Claude Opus 5.5 من Anthropic شهد تراجعًا في قدراته على الاستدلال، استنادًا إلى تحليلات لسجلات استخدام Claude Code، وفق ما نقله موقع GIGAZINE.
قال المطور Shane Melaugh إنه حلّل نحو 1400 سجل استخدام لـ Claude Code، وإن تغيّرًا واضحًا في صياغة جمل ملخّصات التفكير وأسلوب العمل ظهر حول الثالث من الشهر. وأجرى التحليل باستخدام نموذج Gemini 4 Argon من Google على سجلات تمتد من التاسع من الشهر الماضي إلى السابع من الشهر الجاري.
وبحسب Melaugh، ارتفعت نسبة ملخّصات التفكير التي تبدأ بعبارة "I'm" من 20-30% إلى 61.3%، فيما انخفضت عبارات مثل "I should" و"I need to" من نحو 50% إلى 10.9%. وعند مقارنة نحو 29400 تفاعل حول الثالث من الشهر، وجد أن الوسيط لعدد رموز التفكير الظاهرة قبل المهمة الأولى انخفض من 84 إلى 54، أي بنحو 36%، بينما ارتفعت مؤشرات أخطاء تنفيذ الكود وتصحيحه بنسبة 47%.
وفي اختبار برمجي لإصلاح خلل واحد في تشغيل الصوت، فشل النموذج عند ضبط التفكير على "high" بعد 160 تفاعلًا، بينما أصلح الخلل خلال 5 تفاعلات عند ضبطه على "xhigh". لكن Melaugh أقرّ بأن تحقيقه لم يكن تقييمًا صارمًا للأداء.
قراءة مختلفة للبيانات
من جهته، حلّل المطور Theo Browne نحو 458 ألف رد ووجد أن أسلوب ملخّصات التفكير تغيّر، لكن توقيت التغيّر اختلف من حساب إلى آخر، كما ارتفع متوسط رموز التفكير لكل رد من 369 إلى 413. وقال Browne إنه لم يجد دليلًا على تراجع الأداء في بيئته، وطرح احتمال أن Anthropic تغيّر طريقة تلخيص التفكير حسابًا بحساب.
وتنص وثائق Anthropic الرسمية على أن نص التفكير المعروض للمستخدمين هو ملخّص يولّده نموذج منفصل، وليس الاستدلال الداخلي الفعلي للنموذج. ولم يتأكد ما إذا كانت Anthropic خفّضت أداء النموذج فعلًا، ما يستدعي مزيدًا من التحقق.
أسئلة سريعة
هل تأكد تراجع قدرات Claude Opus 5.5 على الاستدلال؟
لا، لم يتأكد ما إذا كانت Anthropic خفّضت أداء النموذج فعلًا، وأقرّ Shane Melaugh بأن تحقيقه لم يكن تقييمًا صارمًا للأداء.
كيف فسّر Theo Browne تغيّر ملخّصات التفكير؟
قال إنه لم يجد دليلًا على تراجع الأداء في بيئته، وطرح احتمال أن Anthropic تغيّر طريقة تلخيص التفكير من حساب إلى آخر.
ما الذي تقوله Anthropic عن نص التفكير الظاهر للمستخدمين؟
تنص وثائقها الرسمية على أنه ملخّص يولّده نموذج منفصل، وليس الاستدلال الداخلي الفعلي للنموذج.