「ドローン × AI」(5)   MITが研究するAIとVRを組み合わせた仮想空間の自律飛行

「ドローン × AI」(5)  MITが研究するAIとVRを組み合わせた仮想空間の自律飛行

マサチューセッツ工科大学( Massachusetts Institute of Technology:MIT)のSertac Karaman(セルタック カラマン)准教授は、AI(人工知能)とVR(仮想現実)を活用してドローンが障害物を回避するリアルタイム ビジュアルSLAMを研究している。


VRゴーグルを着けたドローンが仮想空間で自律飛行の強化学習を行う

 カラマン准教授が開発したシステムは、図のようになっている。

VRによるリアルタイム ビジュアルSLAMの構造図

 NVIDIAのJetson TX2を搭載したSparrow(スズメ)というミニドローンに、NVIDIA TITAN Xベースのワークステーションから仮想現実の屋内映像をWiFiで送信する。Sparrowドローンは、実際には障害物がない空の屋内を飛行するが、VRゴーグルを着けているかのように、送られてくる屋内の映像が現実の飛行空間だと認識して、飛行と回避を行う。

シミュレーション飛行のイメージ

 飛行しているドローンの位置情報は、モーションキャプチャ システムを用いてリアルタイムでワークステーションに送信される。そしてワークステーションでは、送られてきたドローンの位置情報からVR空間の位置をリアルタイムに計算して、Sparrowにフィードバックする。

実際のドローンが飛行している空間

 この繰り返しによって、ドローンが実際の屋内を飛行することなく、安全に障害物を回避するための強化学習が可能になる。実験動画によれば、370mの連続飛行で、エラー率は0.37%(3.7mm)だった。

実験の結果

 カラマン准教授は「今後は、DGX-1(NVIDIAのディープラーニングシステム)を使用して、すべてのデータを取得し、強化学習を実施したいと考えています」と話す。VRを活用した仮想飛行による学習システムは、ドローンが実際に衝突したり物理的な損傷を受けることなく、自律飛行と衝突回避を短期間に学習する可能性を広げる。

MITのSertac Karaman(セルタック カラマン)准教授

 実験に利用されたSparrowドローンには、GPSは搭載されていない。オンボードのカメラに装備されているIMU( Inertial Measurement Unit:慣性計測装置)を利用しているだけで、衝突回避などはカメラからの映像をJetson TX2でリアルタイムに解析して処理している。VRとAIの効果的な活用により、画像認識だけで自律飛行と衝突回避が可能になれば、ドローンの活躍できる領域はさらに広がる。

実験に利用されたドローン

この記事のライター

関連する投稿


NVIDIAが小型でパワフルな99 ドルのNVIDIA CUDA-X AI コンピューターJetson Nano を発表

NVIDIAが小型でパワフルな99 ドルのNVIDIA CUDA-X AI コンピューターJetson Nano を発表

2019 年 3 月 18 日 - カリフォルニア州サンノゼ。NVIDIA は米国で開催したGPU Technology Conferenceで、数百万のインテリジェントなシステムの開発を可能にする AI コンピューター Jetson Nano を発表した。


ドローンとAIのマッチングをサポートするNVIDIAの"Inception Connect"イベント

ドローンとAIのマッチングをサポートするNVIDIAの"Inception Connect"イベント

2019年1月28日。AIのリーディングカンパニーNVIDIA(東京都)は、AIスタートアップとAIソリューションを必要とする企業をつなげるイベントプログラム「Inception Connect」を都内で開催した。


ヤマハ発動機がドローンも含めた陸・海・空の自律動作マシンに Jetson AGX Xavier を採用

ヤマハ発動機がドローンも含めた陸・海・空の自律動作マシンに Jetson AGX Xavier を採用

2018 年 9 月 13 日 - NVIDIA (NASDAQ: NVDA) は、ヤマハ発動機株式会社 (以下、「ヤマハ発動機」) が、同社のドローンや無人農業用車両などの次世代製品群の共通開発プラットフォームとしてNVIDIA Jetson AGX Xavier を採用したと発表した。


MITの研究者が水中と空気中での通信を可能にするワイヤレス技術を開発

MITの研究者が水中と空気中での通信を可能にするワイヤレス技術を開発

2018年8月22日、米国。MITの研究者が、水中と空気中で無線データを伝送する技術を発表した。


「Rock Garage」がNVIDIA Inception Programのパートナー企業に認定

「Rock Garage」がNVIDIA Inception Programのパートナー企業に認定

株式会社ロックガレッジは、GPUディープラーニング プラットフォームを提供しているAIコンピューティング カンパニーNVIDIA Corporationより、AIスタートアップを支援するプログラムである「Inception Program」のパートナー企業に認定された。


最新の投稿


都築電気、空飛ぶクルマの開発プロジェクト「CARTIVATOR」への協賛を決定

都築電気、空飛ぶクルマの開発プロジェクト「CARTIVATOR」への協賛を決定

都築電気株式会社(東京都港区)は、 空飛ぶクルマの開発を進める有志団体CARTIVATORへの協賛を決定。


テラドローン、テラドローンインド、インド工科大学(IIT)ハイデラバード校がインドにおけるドローン業界強化を目的とした三者間協定

テラドローン、テラドローンインド、インド工科大学(IIT)ハイデラバード校がインドにおけるドローン業界強化を目的とした三者間協定

テラドローン(東京都)は、テラドローンインドとインド工科大学(IIT)ハイデラバード校がインドにおけるドローン業界強化を目的とした三者間協定を締結し、インド工科大学ハイデラバード校に、世界初のドローンソリューション専門機関「センター・オブ・エクセレンス」を共同で設立した。


【国際ドローン展】カスタマイズ開発ドローンでビジネスを広げる日本サーキット

【国際ドローン展】カスタマイズ開発ドローンでビジネスを広げる日本サーキット

都内でDJI ARENAなどのトレーニング施設を運営している日本サーキット(神奈川県)は、DJI SDKを使ったカスタマイズ開発やオリジナルドローンを展示していた。


【国際ドローン展】パワフルな国産オリジナルドローンを開発する石川エナジーリサーチ

【国際ドローン展】パワフルな国産オリジナルドローンを開発する石川エナジーリサーチ

ドローンの開発・製造・操作技術などの最新テクノロジーを一堂に紹介する専門展示会の「第5回国際ドローン展」が4月17日から19日の3日間、千葉県の幕張メッセで開幕した。点検・メンテナンス、物流・輸送、警備・監視、災害対応、測量、撮影、農業など多岐にわたる産業分野のドローン関連企業が約40社が出展した。


迫力ある空撮映像を実現するFlying-Cam社(米国)のヘリコプター型ドローン

迫力ある空撮映像を実現するFlying-Cam社(米国)のヘリコプター型ドローン

Game of ThronesやMission Impossible 6で迫力ある空撮映像を実現している制作現場では、30年以上のキャリアがあるFlying-Cam社(米国)のヘリコプター型ドローンが活躍している。