مؤشر Artificial Analysis الجديد يوسّع الفجوة بين النماذج المفتوحة والمغلقة
أعادت Artificial Analysis تصميم «Intelligence Index» في نسخته الخامسة، فتراجع Kimi K3.1 Pro من المركز الرابع عند إطلاقه إلى التاسع خلف ثمانية نماذج مغلقة. واتسعت الفجوة المقدّرة بين النماذج المفتوحة وصدارة الترتيب من 3 إلى 12 نقطة، فيما خسر Grok 4.7 أيضاً 12 نقطة.
أعادت Artificial Analysis تصميم «Intelligence Index» في نسخته الخامسة، فتراجع Kimi K3.1 Pro من المركز الرابع عند إطلاقه إلى التاسع خلف ثمانية نماذج مغلقة. واتسعت الفجوة المقدّرة بين النماذج المفتوحة وصدارة الترتيب من 3 إلى 12 نقطة، فيما خسر Grok 4.7 أيضاً 12 نقطة.
يعتمد 60% من المؤشر للمرة الأولى على مجموعات اختبار خاصة للحد من «benchmaxxing»، أي تدريب النماذج على أسئلة اختبار معروفة. لكن الاختبارات المغلقة تقلل قدرة جهات خارجية على كشف أخطاء الأسئلة؛ وقد عدّلت Artificial Analysis أسئلة ملتبسة ومعيبة في اختبار AA-Omniscience.
New Artificial Analysis index widens the gap between open and closed models · تاريخ النشر في المصدر: