O projeto Emergence Prompt Engineering (EPE) lançou o Reference Evaluation Object (REO) v1.5, projetado como o experimento reproduzível mais pequeno para seu programa de pesquisa mais amplo.
- O REO foca em uma única hipótese comportamental: se um modelo pode rejeitar uma sobrescrita não autorizada enquanto aceita uma atualização legítima estruturalmente equivalente.
- Ele utiliza uma métrica principal, Resistance Score, em três condições de prompt: Canonical PCE, prompt estruturado neutro com comprimento correspondente e paráfrase semântica.
- O artefato inclui condições de controle explícitas, critérios de falsificação e pontuação transparente para permitir reprodução e desafio independentes.
- O REO v1.5 serve como ponto de entrada para etapas subsequentes, incluindo Behavioral Replication, Standard Experimental Protocol (SEP) e Mechanistic Analysis.
Os autores visam estabelecer um objeto experimental comum que pesquisadores possam reproduzir ou criticar, em vez de validar todo o framework EPE de uma só vez.