2950 مليار معلمة يتم تفعيل 21 مليار فقط، هذا التصميم المتناثر مثير للاهتمام، يمكن استخدامه الآن على OpenRouter، سأختبره أولاً كتكريم.

تقرير من Binance News: أصدرت Tencent أحدث نموذج رئيسي من سلسلة Hunyuan، وهو Hy3 Preview، الذي يعتمد بنية MoE (خبراء مختلطون، يتم تنشيط شبكات خبراء صغيرة متعددة حسب الحاجة)، مع إجمالي معلمات يبلغ 295 مليارًا، ومعلمات نشطة تبلغ 21 مليارًا. تم إطلاق النموذج على OpenRouter API وHugging Face demo، لكن لم يتم نشر الأوزان مفتوحة المصدر بعد. هذا هو أول نموذج رئيسي تحت قيادة Yao Shunyu، الباحث السابق في OpenAI ورئيس علماء الذكاء الاصطناعي في Tencent، وهو أيضًا نتاج أقل من 3 أشهر بعد إعادة بناء نظام البحث والتطوير للنماذج الأساسية في Tencent في فبراير من هذا العام. وتضعه Tencent في مرتبة "مستوى مماثل لأفضل النماذج المحلية".