Đầu tiên thích ứng nguyên bản với Ascend: Huawei chính thức mở mã nguồn openPangu-2.0-Flash với 92 tỷ tham số.

robot
Đang tạo bản tóm tắt
ME News tin tức, ngày 30 tháng 6 (UTC+8), theo giám sát của Beating, Huawei chính thức công bố mã nguồn mở mô hình openPangu-2.0-Flash, và sắp ra mắt trên cộng đồng Ascend Tribe của GitCode. Mô hình có tổng số tham số 92 tỷ (92B), sử dụng kiến trúc hỗn hợp chuyên gia (MoE), thực tế chỉ kích hoạt 6 tỷ tham số, hỗ trợ ngữ cảnh siêu dài 512K. Là thương hiệu mô hình AI mã nguồn mở của Huawei, openPangu cam kết cung cấp tài liệu tham khảo thực hành phát triển sức mạnh tính toán Ascend cho ngành thông qua công nghệ huấn luyện và suy luận bản địa Ascend. Theo kế hoạch mã nguồn mở, nội dung ra mắt đợt đầu của phiên bản Flash bao gồm trọng số mô hình, mã suy luận cơ bản và toán tử huấn luyện suy luận; trọng số và mã suy luận của openPangu-2.0-Pro có hiệu suất mạnh hơn sẽ được ra mắt vào tháng 7, và nhiều thành phần khác sẽ được mã nguồn mở trong nửa cuối năm. (Nguồn: BlockBeats)
Xem bản gốc
Trang này có thể chứa nội dung của bên thứ ba, được cung cấp chỉ nhằm mục đích thông tin (không phải là tuyên bố/bảo đảm) và không được coi là sự chứng thực cho quan điểm của Gate hoặc là lời khuyên về tài chính hoặc chuyên môn. Xem Tuyên bố từ chối trách nhiệm để biết chi tiết.
  • Phần thưởng
  • Bình luận
  • Đăng lại
  • Retweed
Bình luận
Thêm một bình luận
Thêm một bình luận
Không có bình luận
  • Đã ghim