Amazon phát hành khung Promptimus, tự động tối ưu hóa các gợi ý LLM

robot
Đang tạo bản tóm tắt
AIMPACT Tin nhắn, ngày 15 tháng 5 (UTC+8), các nhà khoa học của Amazon đã đề xuất khung công tác tự động hóa các câu lệnh hướng dẫn mang tên Promptimus, giúp cải thiện các câu lệnh hướng dẫn chất lượng cao của LLM hiện có mà không cần can thiệp của con người. Phương pháp này thông qua chiến lược tối ưu hóa lặp đi lặp lại, sử dụng mô hình "bộ tối ưu hóa" phụ trợ phân tích các tương tác giữa câu lệnh hướng dẫn và đầu ra của mô hình, tự động nhận diện và điều chỉnh các khía cạnh như độ rõ ràng của chỉ thị, lựa chọn ví dụ. Trong các bài kiểm tra chuẩn như suy luận toán học (độ chính xác GSM8K từ 78% nâng lên 85%), câu hỏi kiến thức thông thường và sinh mã, các câu lệnh hướng dẫn đã được tối ưu hóa đạt hiệu suất trung bình tăng từ 5% đến 15%. Khung công tác này không phụ thuộc vào kiến trúc LLM cụ thể hoặc loại nhiệm vụ, có tính tổng quát, và thông qua các điều khoản chuẩn hóa cùng cơ chế xác thực chéo để tránh tối ưu quá mức, đảm bảo khả năng tổng quát hóa. (Nguồn: InFoQ)
Xem bản gốc
Trang này có thể chứa nội dung của bên thứ ba, được cung cấp chỉ nhằm mục đích thông tin (không phải là tuyên bố/bảo đảm) và không được coi là sự chứng thực cho quan điểm của Gate hoặc là lời khuyên về tài chính hoặc chuyên môn. Xem Tuyên bố từ chối trách nhiệm để biết chi tiết.
  • Phần thưởng
  • 7
  • 9
  • Retweed
Bình luận
Thêm một bình luận
Thêm một bình luận
AutumnTranquility
· 7giờ trước
Câu hỏi về kiến thức thông thường cũng có thể tăng điểm? Điều đó cho thấy không chỉ là tinh chỉnh định dạng, thực sự đã động đến mức độ hiểu biết rồi
Xem bản gốcTrả lời0
GateUser-6319729f
· 10giờ trước
Cuối cùng cũng không cần luyện đan để tự động điều chỉnh prompt nữa
Xem bản gốcTrả lời0
GateUser-9076f8b9
· 10giờ trước
Chuẩn hóa + xác thực chéo để tránh quá khớp, làm ML thấy câu này sẽ gật đầu
Xem bản gốcTrả lời0
GammaRunner
· 10giờ trước
5-15% trung bình nâng cao khả năng nghe modest, nhưng nghĩ kỹ đây là tối ưu hóa tự động zero-shot, tiết kiệm bao nhiêu nhân công
Xem bản gốcTrả lời0
IceCreamUnderTheNeonLights
· 10giờ trước
Amazon lần này có vẻ đang chuẩn bị cho việc mở rộng AWS Bedrock của riêng mình, khung làm việc chung + không ràng buộc kiến trúc, tham vọng không nhỏ
Xem bản gốcTrả lời0
GateUser-656cc6e4
· 10giờ trước
Chờ đã, có cần điều chỉnh mô hình tối ưu hóa phụ trợ không? Cảnh báo lồng ghép
Xem bản gốcTrả lời0
PocketValidator
· 10giờ trước
Promptimus cái tên mang đậm phong cách cyber, hiệu quả trông khá vững chắc, GSM8K tăng 7 điểm không phải là con số nhỏ
Xem bản gốcTrả lời0
  • Đã ghim