Avaliações e feedback: como melhorar um prompt já publicado

Um autor publicou um prompt que prepara planos de aula para instrutores. Chegam três avaliações: “5/5, muito útil”, “2/5, longo demais para o que eu queria”, “3/5, não funciona bem com a minha ferramenta”. Ele fica tentado a tomar tudo como um veredito sobre a qualidade do prompt. Ao reler, percebe que são três assuntos diferentes: um prompt que agrada, uma página que prometeu algo diferente do que o comprador queria e uma questão de compatibilidade com uma ferramenta.

Uma avaliação costuma misturar várias coisas. Antes de mudar qualquer coisa, é preciso separar o que diz respeito ao prompt, à página e à expectativa do comprador.

O que as avaliações mostram

No YouPrompt, só quem comprou um prompt pode deixar uma avaliação: uma nota de 1 a 5, com um comentário opcional. São relatos de uso, então contam. No começo elas são raras, e uma única avaliação muito severa ou muito entusiasmada não basta para concluir nada. Procure os padrões que se repetem.

Separe o feedback em quatro famílias

Essa triagem evita complicar o prompt por causa de uma expectativa que a página nunca anunciou, e evita também defender um prompt que de fato tem um defeito. Com várias avaliações, a IA pode ajudar você a classificá-las, desde que você tire os nomes e releia o resultado:

Aqui estão avaliações de compradores sobre um prompt que [O QUE O PROMPT FAZ]:

[AVALIAÇÕES COLADAS, SEM NOMES]

Classifique cada avaliação em uma destas famílias: defeito do prompt, descompasso com a descrição, depende da ferramenta ou do caso, preferência pessoal. Para cada avaliação, cite a frase que justifica a classificação. Depois, indique os padrões que se repetem pelo menos duas vezes. Não invente nenhum feedback e não proponha nenhuma alteração até que eu peça.

Corrigir sem quebrar o que funcionava

Resista à vontade de reescrever tudo. Uma alteração de cada vez, como na iteração de um prompt:

1. Reproduza o problema num caso parecido com o do comprador, numa conversa nova. Se não conseguir reproduzir, anote as condições: ferramenta, tamanho da entrada, tipo de caso.
2. Guarde a versão atual num arquivo, para comparar e poder voltar atrás.
3. Mude um único ponto: uma instrução, uma variável mais bem definida, um exemplo para o caso que faltava.
4. Rode de novo os casos antigos e o novo. Uma correção que resolve um caso e quebra outro não melhora nada. O método de teste descreve o protocolo.
5. Confira a página. O trecho de amostra, o exemplo de resultado e a descrição ainda precisam corresponder ao que o prompt produz.

Você altera um prompt publicado pelo seu painel, com o botão “Modificar”.

Ajustar a página em vez do prompt

Muitas vezes, a resposta a uma avaliação cabe em duas frases na descrição. Se dois compradores acharam que o prompt servia a um público mais amplo, escreva “para instrutores de adultos, não para a escola”. Se ele funciona melhor em certas ferramentas, cite as que você testou. Um comprador avisado do limite antes de pagar não tem mais motivo para reclamar. A página que vende detalha a redação.

O exemplo de resultado precisa continuar sendo um resultado real, obtido com a versão publicada. Se você mudar o prompt, refaça o exemplo, como no artigo sobre o exemplo de resultado. Não pressione um comprador insatisfeito para mudar a nota: uma avaliação obtida sob pressão não ensina nada a você. E não mude o objetivo do prompt: para outro uso, publique outro prompt.

Hoje à noite

Releia todas as avaliações de uma vez e anote a família de cada uma. Se um padrão se repetir, faça uma única alteração: reproduza o defeito, corrija, teste nos casos antigos e atualize a página. Caso contrário, não mexa em nada e volte ao assunto quando tiver mais algumas avaliações.