Prompt nerfing e bloqueio de parâmetros
Prompt nerfing é a sensação de que um modelo ficou menos direto, menos responsivo ou menos capaz depois de uma mudança.
Isso pode vir de roteamento, safety, system prompts, parâmetros, limite de uso ou falhas de ferramenta. O teste correto é comparar tarefas representativas, artefatos finais, retries, latência e tokens por entrega aceita.