Anthropicは、推論、コーディング、視覚処理の能力を向上させたClaude 3.5 Haikuと、Claude 3.5 Sonnetのアップグレード版を発表した。アップグレードされたSonnetモデルで最も重要な新機能は、GUIスクリーンショットを解釈し、自律的にタスクを実行するためのツール呼び出しを生成する能力である。

  • アップグレードされたClaude 3.5 Sonnetは、スクリーンショット入力のみを使用してOSWorldベンチマークで平均成功率14.9%という最先端の成績を達成し、インタラクションステップを増やすと22%に向上する。
  • 新しいClaude 3.5 Haikuモデルは、推論と指示の追従において強力なパフォーマンスを示し、元のClaude 3.5 SonnetやClaude 3 Opusと同等の性能を発揮することが多い。
  • 両モデルはコンピュータ操作に関するリスクに対するマルチモーダルレッドチームングなど、広範な安全評価を経ており、米国および英国のAI安全研究所による共同事前デプロイメントテストも実施された。
  • アップグレード版Claude 3.5 Sonnetの知識のカットオフ日は2024年4月であり、Claude 3.5 Haikuは2024年7月である。

これらのアップデートにより、コンピュータ操作と改善されたエージェント型タスク完了を通じてユーザーに高度な自動化能力が提供されつつ、Anthropicの責任あるスケーリングポリシーに準拠した厳格な安全基準が維持されている。