PrismML сжал Qwen3.6 до 4 ГБ, поместив модель с 27 миллиардами параметров в iPhone.

robot
Генерация тезисов в процессе

По данным мониторинга Dongcha Beating, AI-лаборатория PrismML, сооснованная математиком из Калифорнийского технологического института Бабаком Хассиби, заявила, что сжала открытую модель Qwen3.6-27B от Alibaba и запустила её на iPhone 17 Pro.

Qwen3.6-27B — это плотная модель с 27 миллиардами параметров. При инференсе в ней задействуются все параметры, а не только часть, как в MoE-моделях.

В PrismML сообщили, что размер модели был уменьшен с примерно 54 ГБ до менее 4 ГБ без заметного снижения производительности. Она может использоваться для сложных диалогов, рассуждений, агентов и задач по коду.

Apple уже связалась с PrismML для обсуждения использования этой технологии. Компания давно стремится размещать больше AI-функций на устройствах, но продвинутая Siri по-прежнему полагается на облачные модели.

AAPL0,92%
Посмотреть Оригинал
На этой странице может содержаться сторонний контент, который предоставляется исключительно в информационных целях (не в качестве заявлений/гарантий) и не должен рассматриваться как поддержка взглядов компании Gate или как финансовый или профессиональный совет. Подробности смотрите в разделе «Отказ от ответственности» .
  • Награда
  • комментарий
  • Репост
  • Поделиться
комментарий
Добавить комментарий
Добавить комментарий
Нет комментариев
  • Закреплено