Moonshot AI lanza Kimi K3, un modelo MoE de 2.8T con contexto de millón de tokens
Moonshot AI presenta Kimi K3, un modelo Mixture-of-Experts de código abierto que cuenta con 2.8 billones de parámetros totales y 104 mil millones de parámetros activados por token. La arquitectura utiliza capacidades nativas de visión y admite una ventana de contexto de 1 millón de tokens, habilitada por Kimi Delta Attention y Stable LatentMoE.