Os autores apresentam uma decomposição em canal ruidoso da decodificação de Risco Bayesiano Mínimo (MBR) que incorpora efeitos bidirecionais para abordar assimetrias em métricas de avaliação como BLEU e COMET. Esta abordagem decompõe o MBR em quatro componentes interagentes: verossimilhança hipótese-para-referência, verossimilhança referência-para-hipótese, prior da hipótese e prior da referência.

  • A decomposição fornece uma interpretação unificada das variantes existentes do MBR ao isolar a contribuição de cada canal.
  • A análise revela que as contribuições por canal exibem características distintas entre métricas enquanto permanecem consistentes entre tarefas.
  • O estudo sugere que o ponderamento adequado dos canais pode levar a melhorias em relação à decodificação MBR original.

Este framework permite interpretabilidade específica para métricas e tarefas, oferecendo um caminho para uma geração de texto mais robusta ao considerar os efeitos direcionais na seleção de hipóteses.