dots-studio는 자신의 dots3 계열의 첫 번째 오픈 가중치 모델을 dots3-note preview라는 이름으로 출시했습니다. 이 Mixture-of-Experts 모델은 총 280B 파라미터를 가지고 있으며 16B가 활성화되고 최대 512K 토큰의 컨텍스트를 지원합니다.

  • 텍스트, 이미지, 비디오 및 오디오를 이해하면서 텍스트 출력을 생성할 수 있는 멀티모달 모델입니다.
  • 아키텍처는 일반 지식, 수학 추론, 도구 사용, 코드 생성 및 긴 컨텍스트 처리에 최적화되어 있습니다.
  • dots3 계열의 가장 경량 멤버로서 다른 잠재적 계열 멤버와 비교하여 능력과 낮은 지연 시간 및 추론 비용 사이의 균형을 맞춥니다.