Amazon lanza el marco Promptimus, optimización automática de indicaciones para LLM

robot
Generación de resúmenes en curso
AIMPACT Mensaje, 15 de mayo (UTC+8), científicos de Amazon propusieron un marco de trabajo automatizado para la ingeniería de indicaciones llamado Promptimus, que mejora las indicaciones de alta calidad existentes en LLM sin intervención humana.
El método utiliza una estrategia de optimización iterativa, aprovechando un modelo auxiliar de "optimizador" para analizar la interacción entre las indicaciones y las salidas del modelo, identificando y ajustando automáticamente aspectos como la claridad de las instrucciones y la selección de ejemplos.
En pruebas de referencia en razonamiento matemático (la precisión en GSM8K aumentó del 78% al 85%), preguntas de conocimiento general y generación de código, las indicaciones optimizadas mejoraron en promedio un 5%-15% en rendimiento.
Este marco no depende de arquitecturas específicas de LLM ni de tipos de tareas, lo que le confiere versatilidad, y evita el sobreajuste mediante términos de regularización y mecanismos de validación cruzada, asegurando la capacidad de generalización. (Fuente: InFoQ)
Ver original
Esta página puede contener contenido de terceros, que se proporciona únicamente con fines informativos (sin garantías ni declaraciones) y no debe considerarse como un respaldo por parte de Gate a las opiniones expresadas ni como asesoramiento financiero o profesional. Consulte el Descargo de responsabilidad para obtener más detalles.
  • Recompensa
  • 5
  • 13
  • Compartir
Comentar
Añadir un comentario
Añadir un comentario
TransparentDomeCity
· hace9h
¡Finalmente ya no es necesario hacer magia con prompts automáticos, los investigadores están encantados!
Ver originalResponder0
GovernanceMoodboard
· hace9h
El aumento promedio del 5-15% parece modesto, pero no se puede negar que es completamente automático.
Ver originalResponder0
StopLossSparrow
· hace9h
Regularización + validación cruzada para prevenir el sobreajuste, los detalles están bien cuidados
Ver originalResponder0
GateUser-f49a50d4
· hace9h
El nombre Promptimus suena como Transformers, pero el efecto es realmente tangible.
Ver originalResponder0
MoonlightTake-ProfitLine
· hace9h
GSM8K del 78% al 85%, la lógica matemática es realmente sólida
Ver originalResponder0
  • Fijado