Команда Byte's Seed выпускает Seed3D 2.0, улучшая геометрическую точность и систему генерации материалов

Согласно мониторингу Dongcha Beating, команда Seed компании ByteDance выпустила Seed3D 2.0 — модель, которая генерирует 3D-активы с материалами из одного изображения. Этот апгрейд сосредоточен на геометрической точности и реалистичности материалов, при этом API теперь доступен на Volcano Ark. Геометрическая генерация использует двухэтапную стратегию «Грубое — Детальное»: сначала создается грубая топология с помощью DiT с большим количеством параметров, затем восстанавливаются острые края и тонкие поверхности. В области материалов применяется архитектура MoE для повышения детализации в высоком разрешении, вводятся приоритеты VLM для улучшения стабильности разложения материалов при неизвестных условиях освещения, выводя полные текстуры PBR, которые можно напрямую интегрировать в стандартные рендеринговые пайплайны. Шестьдесят оценщиков с опытом 3D-моделирования провели слепые оценки примерно 200 тестовых случаев, сравнивая Seed3D 2.0 с Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0 и предыдущим Seed3D 1.0. Уровень предпочтения геометрической генерации варьировался от 65,1% до 98,3%, а уровень предпочтения 3D-активов с материалами превысил 69%. В части downstream-задач Seed3D 2.0 способен разлагать 3D-активы на независимые компоненты по функциональности и добавлять информацию о соединениях, выводя в формате URDF, совместимом с симуляторами, такими как Isaac Sim, что подходит для сценариев динамического взаимодействия, например, для захвата роботами. На уровне сцены он поддерживает ввод текста, многовидовых изображений или видео, объединяя несколько активов для создания полноценных сцен.