DeepSeek открытая модель V4, объем параметров достигает 1,6 триллионов

robot
Генерация тезисов в процессе

Odaily Planet Daily сообщает, что DeepSeek выпустила предварительный просмотр серии открытых моделей V4, лицензированных по MIT, веса уже доступны на Hugging Face и ModelScope.

Эта серия включает две модели MoE, из которых V4-Pro имеет примерно 1,6 триллиона параметров, 49 миллиардов активных параметров на один токен, а V4-Flash — 2840 миллиардов параметров, 130 миллиардов активных параметров, обе поддерживают контекст около 1 миллиона токенов. Официальные представители заявили, что по сравнению с версией V3.2, использование видеопамяти и вычислительные расходы при обработке длинных текстов значительно снизились.

Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • комментарий
  • Репост
  • Поделиться
комментарий
Добавить комментарий
Добавить комментарий
Нет комментариев
  • Закрепить