Memdoor: خمسة agents من نموذج Qwen3.8-27B المفتوح تتفوق على Fable 5 في اختبار برمجة

نشر مشروع Memdoor المفتوح نتيجة يقول فيها إن خمسة agents من نموذج Qwen3.8-27B المفتوح، تعمل معًا في workflow واحد، حققت نتيجة أعلى من نموذج Fable 5 وحده. والأرقام هنا منشورة من المشروع عن نفسه، لا من جهة قياس مستقلة.

جرى الاختبار على أول 10 مسائل من قائمة LiveCodeBench Hard التي جمعتها تجربة GVS5H على خمس نسخ من نموذج مفتوح، بخمس محاولات لكل مسألة. وكان المتوسط 9.8 من 10، مقابل 9.6 للـ harness الأصلي، و8.0 لنموذج Fable 5 في نداء واحد.

والمقارنة ليست متكافئة حرفيًا، فهي فريق من خمس نسخ مقابل نداء واحد. لكن هذا هو ما تريد التجربة إثباته: أن عدة نسخ من نموذج مفتوح أصغر وأرخص، إذا رُتّبت بطريقة مناسبة، تصل إلى نتيجة أعلى.

ونشر المشروع التشغيلات الخمسين كاملة: كل طلب، وكل رد، وكل برنامج، وكل مخرج من أداة التصحيح. وهذا يتيح لأي قارئ التحقق من النتيجة بنفسه بدل الاكتفاء بجدول.

والـ workflow نفسه ملف YAML لا يذكر اسم أي نموذج، فيمكن توجيهه إلى أي نموذج متاح، أو إلى نموذج يعمل على جهاز المستخدم بأمر memdoor connect local، مع Ollama أو llama.cpp أو vLLM أو LM Studio. والأداة ملف تنفيذي واحد مكتوب بـ Go، برخصة Apache 2.0، ولا تتطلب حسابًا.

وفي التوثيق شرط مهم: من يشغّل الأداة على حساب OpenRouter دون رصيد يعمل على نموذج مجاني، والجهات التي تستضيف النماذج المجانية تتدرّب على ما يُرسل إليها. أي أن هذا المسار صالح للتجربة لا للكود الخاص.

وبالنسبة لفرق المنطقة التي تتردد في إرسال كودها إلى مزوّد خارجي، تفتح النتيجة احتمالًا عمليًا: تشغيل نموذج مفتوح على أجهزتها، وتعويض جزء من فارق الحجم بتنظيم العمل.