Компания NVIDIA выпустила с открытым исходным кодом модель ИИ «двойная башня», скорость генерации текста увеличена в 2,42 раза, качество изображения сохранено на 98,7%.

ME AI сообщает: NVIDIA выпустила дискретную диффузионную языковую модель Nemotron-Labs-TwoTower, решающую проблему медленной генерации токенов за токеном в больших моделях. Веса уже опубликованы с открытым исходным кодом на Huggingface. Модель использует предобученные веса существующей базовой сети, не требуя обучения с нуля, что значительно снижает затраты. Она採用 архитектуру с двумя башнями на 60B: две сети по 30B работают параллельно и совместно, каждая башня активирует 3B параметров и оснащена 128 маршрутизируемыми экспертными модулями, повышая эффективность генерации. (Источник: MLion)
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • комментарий
  • Репост
  • Поделиться
комментарий
Добавить комментарий
Добавить комментарий
Нет комментариев
  • Закреплено