StepFun은 소프트웨어 엔지니어링, 전문 지식 작업 및 금융을 위해 설계된 새로운 플래그십 희소 Mixture-of-Experts (MoE) 모델인 Step 5 Preview를 출시했습니다. 이 모델은 총 6000억 개의 파라미터와 토큰당 270억 개의 활성 파라미터, 1M 토큰 컨텍스트 윈도우, 그리고 텍스트, 이미지, 비디오 입력 지원을 특징으로 합니다.
- 아키텍처: 온-폴리시 장기 관점 강화 학습으로 훈련된 좁고 깊은 레이아웃의 92개 Transformer 레이어.
- 벤치마크: FrontierFinance에서 66.4, DRACO에서 83.3, DeepSWE v1.1에서 67.7, Artificial Analysis의 Intelligence Index에서 44점.
- 가격: 입력 토큰 1M당 $1.00, 출력 토큰 1M당 $2.70으로, 유사한 모델 대비 낮은 비용으로 포지셔닝되었습니다.
- 가용성: API를 통해 호스팅되며, 오픈 가중치는 2026년 10월 15일에 출시 예정입니다.
StepFun은 이 모델이 상당히 낮은 작업 비용으로 비교 가능한 지능을 제공하며, 에이전트 워크로드에 대한 파레토 프론티어 도달을 목표로 한다고 밝혔습니다.