中国の企業Tencentは、オープンウェイトのテキスト入力大規模言語モデルであるHy4 Previewをリリースしました。このモデルは7700億個の総パラメータと490億個のアクティブパラメータを特徴としています。今回のリリースは、295Bの総パラメータと256,000トークンのコンテキストウィンドウを持つ同年7月の以前のHy3モデルを大幅に拡張するものです。

  • モデルは100万トークンのコンテキストウィンドウをサポートします。
  • テキスト専用であり、ビジョン機能はありません。
  • チャットテンプレートは2つの推論努力レベルを強制します:"high"(デフォルト)と"no_think"(推論無効)。

記事では、自転車に乗るペリカンのSVG画像を生成することでモデルの能力を実証しており、ヘルメットやサングラスなどのデザイン選択に関する内部推論プロセスに言及しています。