dots-studio 发布了其 dots3 系列中的首个开源权重模型,名为 dots3-note preview。该 Mixture-of-Experts 模型拥有 280B 总参数,其中激活了 16B,并支持高达 512K token 的上下文。

  • 它是一个多模态模型,能够理解文本、图像、视频和音频,同时生成文本输出。
  • 该架构针对通用知识、数学推理、工具使用、代码生成和长上下文处理进行了优化。
  • 作为 dots3 系列中最轻量的成员,它在能力与延迟及推理成本之间取得了平衡,相较于其他潜在系列成员具有更低的优势。