A IFM lançou o checkpoint final para o K2-Horizon-MoVA-36B-A4B, um modelo Mixture-of-Experts que apresenta atenção Mixture-of-Values, armazena 36B de parâmetros mas executa apenas 4B por token. O lançamento inclui formatos GGUF e links para variantes menores da família K2-Horizon.

  • Alcança resultados de classe líder em benchmarks agênticos e de raciocínio, superando modelos densos abertos de ~30B e modelos MoE até 15× seu tamanho.
  • Suporta uma janela de contexto nativa de 524,288 tokens a partir das etapas de treinamento intermediário em diante.
  • A IFM lançará checkpoints intermediários, dados de treinamento, receita e código para garantir total abertura.

O modelo é posicionado como uma alternativa altamente eficiente a modelos densos maiores enquanto mantém desempenho competitivo contra sistemas frontier fechados.