AlphaAvatar v0.6.4は、コア、RTC、エージェント、プラグイン、ツール、チャネルの6つの主要領域を中核とした新しいアーキテクチャで、オープンソースのマルチモーダルアシスタントランタイムを更新します。

  • この更新では、RTCアダプターがメディアを一度パブリッシュし、ペルソナ、ビジョン、メモリなどの複数のコンシューマーが独立して処理できる共有知覚パスを実装しています。
  • 会話テキストだけでなく、連続したマルチモーダルコンテキストから構造化された環境メモリを抽出するオンラインENVメモリを導入しました。
  • エージェントコンポーネントはセッション、コンテキスト、知覚、IO、エージェントの並列ランタイムに分離され、プラグインの依存関係を明確にするためにAvatarEngineがオーケストレーターとして機能します。

この変更により、AlphaAvatarはフロントエンドというよりも、永続的なリアルタイムマルチモーダルエージェントのための再利用可能なランタイムレイヤーとして位置づけられます。