Modelo de Registo de Avaliação
Folha para comparares versões de prompt com os mesmos casos de teste e decidires com dados.
Folha para comparares versões de prompt com os mesmos casos de teste, em vez de decidires qual funciona melhor por impressão.
Campos a incluir
- Caso de teste (a entrada usada)
- Resultado da versão A
- Resultado da versão B
- Qual cumpriu melhor o objetivo, e porquê
- Data do teste
Exemplo preenchido (fictício)
- Caso de teste: pedido de cliente sem número de encomenda mencionado
- Versão A: pediu o número de encomenda de forma direta
- Versão B: assumiu um número de encomenda inexistente e respondeu incorretamente
- Melhor versão: A — pede esclarecimento em vez de inventar dados
- Data: exemplo ilustrativo
Usa sempre os mesmos casos de teste para todas as versões que compares — mudar o caso de teste ao mesmo tempo que mudas o prompt torna a comparação inútil.
Escolhe um prompt com duas versões diferentes e testa ambas com os mesmos três casos, registando os resultados nesta estrutura.
Sem os mesmos casos de teste para todas as versões, estás a comparar coisas diferentes e a chamar-lhe avaliação.
Continua a aprender
Guia Completo de Prompt Engineering para Iniciantes
Do prompt improvisado ao sistema fiável — estrutura, contexto, exemplos e avaliação, num só documento.
AcederChecklist de Revisão de um Prompt
Objetivo claro, contexto suficiente, formato de saída definido e casos-limite previstos.
AcederModelo de Instrução de Sistema
Estrutura reutilizável com papel, regras, formato de resposta e aquilo que nunca deve ser feito.
AcederPrompts para Melhorar Outros Prompts
Prompts que pegam numa instrução fraca e devolvem uma versão mais clara e testável.
Aceder