Laboratoire · Moonshot AI
arxiv arXiv cs.LG · il y a 18 j · 3 vues

Moonshot AI publie Kimi K3, un modèle MoE de 2,8 T de paramètres avec un contexte de million de tokens

Moonshot AI a présenté Kimi K3, un modèle Mixture-of-Experts open-source comportant 2,8 billions de paramètres au total et 104 milliards de paramètres activés par token. Le modèle prend en charge des capacités visuelles natives et une fenêtre de contexte d'un million de tokens, exploitant l'attention Delta Kimi et Stable LatentMoE pour atteindre une efficacité de mise à l'échelle d'environ 2,5 fois supérieure à celle de son prédécesseur, Kimi K2.

blog Simon Willison · il y a 18 j · 8 vues

Moonshot publie les poids de Kimi K3 et de nouvelles conditions de licence commerciale

Moonshot a publié les poids de son modèle Kimi K3 à 2,8 billions de paramètres, disponibles en téléchargement de 1,56 To sur Hugging Face. La publication inclut une licence modifiée qui exige que les grandes entités commerciales concluent un accord séparé avec Moonshot AI si leur chiffre d'affaires cumulé dépasse 20 millions de dollars sur n'importe quelle période de 12 mois consécutifs.

media Together AI Blog · il y a 21 j · 8 vues

Kimi K3 égale Claude Fable 5 sur la qualité DeepSWE pour un tiers du coût

Kimi K3, un modèle à poids ouverts de Moonshot AI, atteint des performances comparables à celles de Claude Fable 5 d'Anthropic sur le benchmark DeepSWE tout en coûtant nettement moins par tâche. Lors d'une évaluation du 16 juillet 2026, Kimi K3 a obtenu un taux de réussite pass@1 de 68,5 % contre 69,9 % pour Fable 5, mais l'a surpassé dans les scénarios à multiples tentatives et a offert une efficacité coûts supérieure.

media The Batch · il y a 22 j LMSYS Arena (Elo) · 1760.0Elo · 3 vues

Lancement de Kimi K3, le plus grand modèle à poids ouverts ; sortie de Muse Spark 1.1

Moonshot AI a présenté Kimi K3, un modèle vision-langage de 2,8 billions de paramètres disponible via API, avec des poids promis pour le 27 juillet, se positionnant comme le plus grand modèle à poids ouverts connu à ce jour. Parallèlement, Meta a lancé Muse Spark 1.1, un modèle vision-langage entraîné pour des tâches agentic, accompagné de son premier accès payant à l'API Meta Model.

media Latent Space · il y a 29 j · 3 vues

Moonshot AI lance Kimi K3, un modèle de pointe ouvert à 2,8 T de paramètres

Moonshot AI a présenté Kimi K3, un nouveau modèle open-weights de classe frontière comportant 2,8 billions de paramètres au total et des capacités natives d'entrée multimodale. Officiellement positionné comme « Intelligence Frontière Ouverte », le modèle prend en charge une fenêtre de contexte de 1 million de tokens et utilise des composants architecturaux novateurs tels que l'attention Kimi Delta (KDA) et les résidus d'attention pour améliorer l'efficacité.