（１）研究開発プロジェクト間連携のための課題抽出と連携体制構築

全プロジェクトからの参加によりCAプラットフォーム意見交換会を４回開催し、共通課題として、CAサービス基盤、認証、通信、共通データベース、CA遠隔操縦、連携課題として、BMI連携、生体内CAとの連携、細胞内CAとの連携のテーマがあることを確認しました。各課題に対して、ロードマップの作成を行い、タイムテーブル、課題の共通化を行うことができました。また、年末の合宿時の意見交換からは、CA技術をM×N世界に発展させるためには、遠隔操作者、CA、ユーザ全てを仮想空間上で表現し、M×N世界が作り出す未知空間にてシミュレーションする、デジタルツイン技術が必要不可欠であるとの共通認識も持つことができました。

（２）マルチモーダルバイオメトリクスデータベース構築

ユーザ認証、遠隔操作者認証において特に重要であると判断された継続認証の場面を想定したデータ収集のセットアップを行いました。具体的には、オンライン会議システムを用いた、しりとりや連想ゲームによる対話シーンに対して、複数視点のカメラにより多視点顔映像・ズームした虹彩映像・手元映像を撮影、マイクにより対話内容を収録、時計型ウェアラブルセンサにより生体信号を計測、脳波計により脳波を計測することで、継続対話時のマルチモーダルバイオメトリクスデータを収集可能な装置を作成しました。結果として、被験者数912名、６つのモダリティを含む、世界最大規模の継続認証を対象とした、マルチモーダルバイオメトリクスデータを収集しました。

研究開発項目2と共同で、遠隔操作者の継続認証において主要なモダリティとなる顔認証について、顔動画像から個人認証を高精度に行うCAFace [Kim+ NeurIPS 2022]の手法を標準技術として、WebRTCで動作するクライアント・サーバ型の動画からの顔認証のプロトタイプシステムを構築しました。今後は、実装したシステムを運用しつつ、性能向上を期待できる手法の研究開発を実施します。