未踏プロジェクトダッシュボード

IPA未踏事業 プロジェクト一覧

修正・お問い合わせはこちら
一覧に戻る
2024年度未踏IT

ユーザとモノのネットワーク体験を創作するためのARシステム

プロジェクト概要

本プロジェクトでは、生活空間内に存在するモノに着目して、ユーザが自由に創作できる「モノのエージェント」を作り出し、ユーザとエージェントによるネットワークを生活の中に組み込みためのARシステムを開発する。

本システムは、ユーザがシステム上でモノのエージェントを作成するところから始まる。システムがモノ(例えばマグカップやゴミ箱など)を認識した後に作られるエージェントは、AR空間上ではモノに目がついたような見た目で、特定のキャラクターを持つ。ユーザはそのキャラクターを設定し、自分の世界観を反映することができる。作成されたエージェントは自然言語による会話とアイコンタクトを通してユーザとのインタラクションを行い、その内容は設定された性格によって決まる。また、エージェントを複数体作ることもできる。エージェントが複数体存在するとき、エージェントはユーザとのみならずエージェント同士でのインタラクションを勝手に行う。

本システムを実現するために、視覚的・聴覚的なAR、画像認識、生成エージェント、自然言語処理などの技術を使い、既存の機器の活用に加えて、ユーザへの聴覚提示と視覚提示を行うための専用デバイスと専用アプリケーションも開発する。

本システムにより、エージェントによってモノとのネットワークが正確に組み込まれた空間での新しい生活体験をユーザが楽しく作っていく世界を実現し、それを多くの人々に体感してもらうことで、新しい文化を生み出したい。さらに、いまだ日常的ではないXRデバイスを生活に落とし込むための方法論として、XRデバイスによって可能となる体験と日常体験の中間層を作り出すアプローチを提示したい。

採択理由

ユーザが自由に創作できるエージェントを生活の中に取り入れるシステムであり、八百万の神の実体化ともいえるプロジェクトである。

同様の発想のプロジェクトはこれまでにも多数提案されているが、絵心のあるクリエータによるかわいく魅力的なキャラクターデザインと、ユーザの行動変容にしっかり繋げられるチャットAIとしての発展を期待し採択とした。

PM

稲見 昌彦

東京大学 総長特任補佐 先端科学技術研究センター 副所長・教授

クリエータ

後藤 汰誓

九州大学 芸術工学部 芸術工学科 音響設計コース

大塚 敏郎

九州大学 芸術工学部 芸術工学科 メディアデザインコース

石山 遼

九州大学 大学院システム情報科学府 情報理工学専攻

採択金額

2,880,000

成果報告会

関連リンク