Active-Prompt

Summary (confidence: high)

  • Abordagem que adapta LLMs a exemplos específicos da tarefa com raciocínio CoT (Diao et al., 2023).
  • Usa métricas de incerteza (discordância entre múltiplas respostas) para selecionar as perguntas mais incertas.
  • Perguntas incertas são anotadas por humanos e usadas como novos exemplares.

Definição (confidence: high)

Active-Prompt resolve a limitação de conjuntos fixos de exemplos anotados por humanos. Ele primeiro gera k respostas para perguntas de treinamento, calcula a incerteza (discordância), seleciona as mais incertas para anotação humana, e usa esses novos exemplares para inferência.

prompt-engineering-techniques | chain-of-thought | few-shot-prompting

Sources

  • raw/prompts/articles/promptingguide-pt-techniques-activeprompt.md