Đội Ngũ Seed của Byte phát hành Seed3D 2.0, nâng cấp độ chính xác hình học và khung tạo vật liệu

robot
Đang tạo bản tóm tắt
Theo dõi của Dongcha Beating cho thấy, nhóm Seed của ByteDance đã phát hành Seed3D 2.0, một mô hình tạo ra tài sản 3D với vật liệu từ một hình ảnh đầu vào duy nhất. Cải tiến này tập trung vào độ chính xác hình học và tính chân thực của vật liệu, với API hiện đã hoạt động trên Volcano Ark. Quá trình tạo hình học sử dụng chiến lược hai giai đoạn Từ thô đến tinh: đầu tiên, thiết lập kết cấu thô bằng DiT có tham số lớn, sau đó phục hồi các cạnh sắc nét và bề mặt tinh xảo. Phần vật liệu sử dụng kiến trúc MoE để nâng cao chi tiết độ phân giải cao, giới thiệu các priors VLM để cải thiện độ ổn định của phân tích vật liệu dưới điều kiện ánh sáng không xác định, xuất ra các kết cấu PBR hoàn chỉnh có thể tích hợp trực tiếp vào các pipeline render tiêu chuẩn. Sáu mươi người đánh giá có kinh nghiệm mô hình 3D đã thực hiện các đánh giá mù bằng khoảng 200 trường hợp thử nghiệm, so sánh Seed3D 2.0 với Hunyuan3D-2.5/3.1, Tripo 3.0, Rodin Gen2, HiTem v2.0, và Seed3D 1.0 trước đó. Tỷ lệ ưa thích cho tạo hình học dao động từ 65,1% đến 98,3%, trong khi tỷ lệ ưa thích cho tài sản 3D có vật liệu vượt quá 69%. Về các nhiệm vụ hạ nguồn, Seed3D 2.0 có thể phân tích các tài sản 3D thành các thành phần độc lập dựa trên chức năng và thêm thông tin khớp nối, xuất ra định dạng URDF phù hợp với các engine mô phỏng như Isaac Sim, thích hợp cho các kịch bản tương tác động như bắt đồ của robot. Ở cấp độ cảnh, nó hỗ trợ đầu vào là văn bản, hình ảnh đa góc hoặc video, kết hợp nhiều tài sản để tạo ra các cảnh hoàn chỉnh.
Xem bản gốc
Trang này có thể chứa nội dung của bên thứ ba, được cung cấp chỉ nhằm mục đích thông tin (không phải là tuyên bố/bảo đảm) và không được coi là sự chứng thực cho quan điểm của Gate hoặc là lời khuyên về tài chính hoặc chuyên môn. Xem Tuyên bố từ chối trách nhiệm để biết chi tiết.
  • Phần thưởng
  • Bình luận
  • Đăng lại
  • Retweed
Bình luận
Thêm một bình luận
Thêm một bình luận
Không có bình luận
  • Đã ghim