研究者らは、LightMem-Egoを発表しました。これは、モバイルおよびウェアラブルデバイス上のパーソナルAIアシスタントが、視覚および音声ストリームを通じて長期のユーザー体験を管理するのを支援するために設計されたシステムです。アーキテクチャはエゴセントリックデータを継続的にキャプチャし、共有タイムライン上でアライメントし、現在のメモリ、短期メモリ、長期メモリの3つのレベルに整理します。

  • ユーザーのクエリに基づいて、適切なメモリレベルへ検索を動的にルーティングします。
  • 階層型メモリ構造からのマルチモーダル証拠に基づいて回答を生成します。
  • オブジェクトの検索、会話の想起、生活の要約、ルーティンの発見、パーソナライズされたアシスタンスなどのアプリケーションをサポートします。
  • スマートフォンおよびAIグラスでのデプロイメントを示しました。

このシステムは、過去の体験に関するクエリに答えるという課題に対処し、長期メモリを継続的に蓄積・取得するための軽量なメカニズムを提供します。