Код открытого исходного кода планировщика мировой модели GRASP, ретвитнутый Yann LeCun

ME Новости, сообщение от 1 апреля (UTC+8), код нового планировщика моделей мира GRASP, опубликованный Michael Psenka и процитированный (retweet) Yann LeCun, уже открыт (open source). GRASP — это параллельный стохастический планировщик для обучения моделей мира; его ключевая идея заключается в одновременной оптимизации действий и промежуточных «виртуальных» состояний в улучшенном пространстве траекторий. Он обеспечивает согласованность с обученной динамической моделью с помощью штрафа за динамическую согласованность и позволяет выполнять планирование эффективно в параллельном режиме. Ключевые элементы дизайна включают введение виртуальных состояний, пригодных для параллельных вычислений, исследование пространства состояний с помощью шума, использование техники остановки градиента, чтобы предотвратить отток градиента во входы состояний высокоразмерной визуальной модели, а также сочетание формирования цели и периодических последовательных шагов развертывания для синхронизации и обеспечения стабильности. Планировщик построен поверх проекта DINO-WM, но также может быть интегрирован с другими моделями мира (например, LeWorldModel, JEPA-WMs) через адаптеры, и подходит для различных сред, включая PushT и TwoRoom. Репозиторий содержит реализацию основных алгоритмов и скрипты установки адаптеров. (Источник: InFoQ)