A Amazon lança o quadro Promptimus, otimizando automaticamente os prompts de LLM

robot
Geração de resumo em curso
AIMPACT mensagem, 15 de maio (UTC+8), cientistas da Amazon propuseram uma estrutura de engenharia de prompts automatizada chamada Promptimus, que melhora prompts de alta qualidade existentes em LLMs sem intervenção humana.
Este método utiliza uma estratégia de otimização iterativa, aproveitando um modelo auxiliar de "otimizador" para analisar o padrão de interação entre prompts e saídas do modelo, identificando e ajustando automaticamente aspectos como clareza das instruções e seleção de exemplos.
Em testes de referência múltiplos, incluindo raciocínio matemático (precisão GSM8K de 78% para 85%), perguntas de conhecimento geral e geração de código, os prompts otimizados apresentaram uma melhoria média de desempenho de 5% a 15%.
Este framework não depende de uma arquitetura específica de LLM ou tipo de tarefa, possuindo uma abordagem geral, e evita overfitting por meio de termos de regularização e mecanismos de validação cruzada, garantindo capacidade de generalização. (Fonte: InFoQ)
Ver original
Esta página pode conter conteúdos de terceiros, que são fornecidos apenas para fins informativos (sem representações/garantias) e não devem ser considerados como uma aprovação dos seus pontos de vista pela Gate, nem como aconselhamento financeiro ou profissional. Consulte a Declaração de exoneração de responsabilidade para obter mais informações.
  • Recompensa
  • 7
  • 9
  • Partilhar
Comentar
Adicionar um comentário
Adicionar um comentário
AutumnTranquility
· 7h atrás
As perguntas de conhecimento comum também podem aumentar? Então isso indica que não é apenas uma otimização de formato, realmente houve uma mudança na compreensão
Ver originalResponder0
GateUser-6319729f
· 10h atrás
Ajuste automático de prompts finalmente não precisa mais de "meditação alquímica"
Ver originalResponder0
GateUser-9076f8b9
· 10h atrás
Regularização + validação cruzada para evitar overfitting, quem faz ML vai concordar com essa frase
Ver originalResponder0
GammaRunner
· 10h atrás
5-15% de aumento médio na compreensão auditiva é modesto, mas pense que isto é uma otimização automática zero-shot, quanto tempo de trabalho humano isso economiza
Ver originalResponder0
IceCreamUnderTheNeonLights
· 10h atrás
A Amazon desta vez está a preparar o caminho para o seu AWS Bedrock, com uma estrutura genérica + sem amarrar a arquitetura, uma ambição notável.
Ver originalResponder0
GateUser-656cc6e4
· 10h atrás
Espera, será que precisamos ajustar o próprio modelo do otimizador auxiliar? Aviso de cadeia de nested dolls
Ver originalResponder0
PocketValidator
· 10h atrás
O nome Promptimus tem um toque cibernético, o efeito parece bastante sólido, o aumento de 7 pontos no GSM8K não é uma quantia pequena
Ver originalResponder0
  • Fixado