Команда Byte's Seed випускає Seed3D 2.0, оновлюючи геометричну точність та фреймворк генерації матеріалів

Згідно з моніторингом Dongcha Beating, команда Seed від ByteDance випустила Seed3D 2.0 — модель, яка генерує 3D-активи з матеріалами з одного зображення. Ця оновлення зосереджена на геометричній точності та реалістичності матеріалів, з API, що тепер доступний на Volcano Ark. Геометричне генерування використовує двоступеневу стратегію від грубого до точного: спочатку створюється груба топологія за допомогою DiT з великим числом параметрів, а потім відновлюються гострі краї та дрібні поверхні. Щодо матеріалів, використовується архітектура MoE для покращення деталей високої роздільної здатності, з впровадженням пріорітетів VLM для підвищення стабільності розкладу матеріалів за умов невідомого освітлення, що дає змогу отримати повні текстури PBR, які можна безпосередньо інтегрувати у стандартні рендерингові пайплайни. Шістдесят оцінювачів з досвідом у 3D-моделюванні провели сліпі оцінювання на приблизно 200 тестових випадках, порівнюючи Seed3D 2.0 з Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0 та попереднім Seed3D 1.0. Рейтинги переваги для геометричного генерування коливалися від 65,1% до 98,3%, тоді як перевага для 3D-активів з матеріалами перевищила 69%. Щодо downstream-завдань, Seed3D 2.0 може розкладати 3D-активи на незалежні компоненти за функціональністю та додавати спільну інформацію, виводячи у форматі URDF, сумісному з імітаційними двигунами, такими як Isaac Sim, що підходить для сценаріїв динамічної взаємодії, наприклад, для захоплення роботами. На рівні сцени він підтримує введення тексту, багатоглядів або відео, поєднуючи кілька активів для створення повних сцен.