身体の不自由な方々が望む通りの支援を受けられるAI支援型 Trusted BMI-CA*の構築のためには、脳や身体から CA へ情報を伝達する技術の開発が必要です。また、伝達された情報に基づいてユーザーの望む通りの支援を行えるようなCAの技術開発も欠かせません。「IoBミドルウェア開発」はこれらの「脳とCAの間の通信技術」の開発に向けて、機械学習や情報理論などの数理的手法を用いて取り組んでいます。

【ChatGPT支援型Brain-Gmail Interface】

生成AIは、近年目覚ましい発展を遂げております。生成AIは、与えられた答えから選択するのでなく、自ら答えを生成できるAIであるため、BMIと融合させることでユーザーの機能を拡張することが期待されます。株式会社アラヤの笹井俊太朗CROらのグループは、ユーザーとの対話を通して文章を生成できるAIであるChatGPTを援用することで、脳計測によってE-mailの返信を行うことができるBMIシステムの構築に成功しました。このシステムは、ユーザーが発話した色を脳活動から解読し、それに基づいてGmailなど、E-mailのweb interfaceを操作できます。さらに、受信したメールの内容や過去の返信履歴からChatGPTが自動で返信の候補を生成し、その候補の中から所望の返信を選択することによって、半自動的なE-mailの返信を可能にしました。

【言語入力によるロボットアームの自動制御】

株式会社アラヤの笹井俊太朗CRO、Kai Arulkumaranチームリーダーにより、脳活動から解読された言語に基づいて、ロボットアームを半自動的に操作してタスクを遂行することができる、AI支援型BMIの開発が進められました。これまで言葉で指示された内容に基づき自動的にロボットアームを制御することで、ユーザーによる細かな制御が必要なくなるようなAIエージェントの開発を進めてきました。このAIエージェントへユーザーの脳活動から解読された単語をインターネットを介してインプットすることで、遠隔地に存在するロボットアームによってタスクを遂行できることを示す実験に成功しました。