イベントカメラ用高速画像処理ライブラリとアプリケーション開発
プロジェクト概要
自動運転、AR/VR、ドローン/ロボット等の分野で共通して必要なリアルタイム画像処理において、情報取得から出力までのセンサ遅延をいかに減らすかが制御の精度やユーザー体験の質を向上させるために重要である。生物の網膜の仕組みに着想を得たイベントカメラと呼ばれる新しいビジョンセンサは、画素ごとに非同期的に差分検知できるメカニズムによって、遅延の少なさ、データ量や消費電力の効率で従来のカメラを大きく上回っている。しかし、センサそのものが開発されてからまだ日が浅く、データの扱い方も既存のコンピュータビジョンの理論体系と異なる部分が多いため、実利用のアプリケーションはおろか開発者向けのライブラリさえ未だに存在せず、開発人口も少ない。
そこで、本プロジェクトでは、イベントカメラを用いたコンピュータビジョンアルゴリズムとそのライブラリを開発、公開することで開発環境を整備し開発者や研究者への普及を図る。さらに、イベントカメラの高速画像処理を利用した応用技術の開発に取り組み、市場性のあるアプリケーションを決定・実装することで将来的な市場拡大を推進する。
採択理由
イベントカメラは、人間の網膜のように輝度変化を非同期に捉えることができるカメラです。本提案は、イベントカメラを活用するための開発者ライブラリとデモアプリケーションの開発を目指します。従来のカメラでは不可能であった低消費電力、低レイテンシ、データ量圧縮をエッジ側で実現でき、またその特徴を簡単に活用できる開発ライブラリができれば、IoTサービスの目としてイベントカメラを活かした新たなサービスが生まれるであろうと考えています。
PM
藤井 彰人
KDDI株式会社 理事 ソリューション事業本部 ソリューション事業企画本部長
クリエータ
荒川 陸
東京大学
芝 慎太朗
トヨタ自動車株式会社
採択金額
8,000,000円