وفقًا لمراقبة 1M AI News، فإن SWE-rebench هو اختبار مرجعي حي يُستخلص شهريًا من GitHub لمهام هندسة البرمجيات الجديدة (issues + PRs)، ولا يمكن للنموذج تحسين أدائه مسبقًا بناءً على الموضوع. قام المشرف إبراغيم بنشر تحديث التصنيف في 23 مارس، حيث ألغى العروض التوضيحية السابقة وقيود العمليات التي تتطلب 80 خطوة، وأضاف مهام تقييم مساعدة جديدة.
أعلى العشرة تصنيفات حديثًا:
يحتل النموذج المفتوح المصدر من Z.ai، وهو GLM-5 (بترخيص MIT)، المركز الثالث بنسبة 62.8%، وهو أعلى نموذج مفتوح المصدر في التصنيف. تمثل النماذج الصينية أربعة من العشرة الأوائل، بالإضافة إلى GLM-5، هناك DeepSeek-V3.2 (المركز السادس)، Qwen3.5-397B-A17B (المركز التاسع)، وStep-3.5-Flash (المركز العاشر). علق لي زوكسوان، المسؤول العالمي عن Z.ai، قائلاً إن النماذج الصينية كانت جميعها خارج العشرة الأوائل في التحديث السابق لـ SWE-rebench، وتعرضت للانتقاد بـ"benchmaxing" (تحقيق درجات عالية بشكل مصطنع).