「ドローン × AI」(5)   MITが研究するAIとVRを組み合わせた仮想空間の自律飛行

「ドローン × AI」(5)  MITが研究するAIとVRを組み合わせた仮想空間の自律飛行

マサチューセッツ工科大学( Massachusetts Institute of Technology:MIT)のSertac Karaman(セルタック カラマン)准教授は、AI(人工知能)とVR(仮想現実)を活用してドローンが障害物を回避するリアルタイム ビジュアルSLAMを研究している。


VRゴーグルを着けたドローンが仮想空間で自律飛行の強化学習を行う

 カラマン准教授が開発したシステムは、図のようになっている。

VRによるリアルタイム ビジュアルSLAMの構造図

 NVIDIAのJetson TX2を搭載したSparrow(スズメ)というミニドローンに、NVIDIA TITAN Xベースのワークステーションから仮想現実の屋内映像をWiFiで送信する。Sparrowドローンは、実際には障害物がない空の屋内を飛行するが、VRゴーグルを着けているかのように、送られてくる屋内の映像が現実の飛行空間だと認識して、飛行と回避を行う。

シミュレーション飛行のイメージ

 飛行しているドローンの位置情報は、モーションキャプチャ システムを用いてリアルタイムでワークステーションに送信される。そしてワークステーションでは、送られてきたドローンの位置情報からVR空間の位置をリアルタイムに計算して、Sparrowにフィードバックする。

実際のドローンが飛行している空間

 この繰り返しによって、ドローンが実際の屋内を飛行することなく、安全に障害物を回避するための強化学習が可能になる。実験動画によれば、370mの連続飛行で、エラー率は0.37%(3.7mm)だった。

実験の結果

 カラマン准教授は「今後は、DGX-1(NVIDIAのディープラーニングシステム)を使用して、すべてのデータを取得し、強化学習を実施したいと考えています」と話す。VRを活用した仮想飛行による学習システムは、ドローンが実際に衝突したり物理的な損傷を受けることなく、自律飛行と衝突回避を短期間に学習する可能性を広げる。

MITのSertac Karaman(セルタック カラマン)准教授

 実験に利用されたSparrowドローンには、GPSは搭載されていない。オンボードのカメラに装備されているIMU( Inertial Measurement Unit:慣性計測装置)を利用しているだけで、衝突回避などはカメラからの映像をJetson TX2でリアルタイムに解析して処理している。VRとAIの効果的な活用により、画像認識だけで自律飛行と衝突回避が可能になれば、ドローンの活躍できる領域はさらに広がる。

実験に利用されたドローン

この記事のライター

関連する投稿


ヤマハ発動機がドローンも含めた陸・海・空の自律動作マシンに Jetson AGX Xavier を採用

ヤマハ発動機がドローンも含めた陸・海・空の自律動作マシンに Jetson AGX Xavier を採用

2018 年 9 月 13 日 - NVIDIA (NASDAQ: NVDA) は、ヤマハ発動機株式会社 (以下、「ヤマハ発動機」) が、同社のドローンや無人農業用車両などの次世代製品群の共通開発プラットフォームとしてNVIDIA Jetson AGX Xavier を採用したと発表した。


MITの研究者が水中と空気中での通信を可能にするワイヤレス技術を開発

MITの研究者が水中と空気中での通信を可能にするワイヤレス技術を開発

2018年8月22日、米国。MITの研究者が、水中と空気中で無線データを伝送する技術を発表した。


「Rock Garage」がNVIDIA Inception Programのパートナー企業に認定

「Rock Garage」がNVIDIA Inception Programのパートナー企業に認定

株式会社ロックガレッジは、GPUディープラーニング プラットフォームを提供しているAIコンピューティング カンパニーNVIDIA Corporationより、AIスタートアップを支援するプログラムである「Inception Program」のパートナー企業に認定された。


MITがミニドローン用の制御チップ「Navion」をアップグレード

MITがミニドローン用の制御チップ「Navion」をアップグレード

2018年6月20日 – 米国マサチューセッツ州。マサチューセッツ工科大学(MIT)の研究者は、2017年に設計したミニドローン用の制御チップをアップグレードし、さらに小さく省電力になったと発表した。


KDDIが5Gによるドローン空撮のリアルタイム映像配信を展示

KDDIが5Gによるドローン空撮のリアルタイム映像配信を展示

KDDI株式会社 (本社: 東京都千代田区、代表取締役社長: 髙橋 誠、以下 KDDI) は、ワイヤレスジャパンの展示コーナーで、ドローンで空撮した360°映像をVR(仮想現実)ゴーグルで体験するデモンストレーションを披露していた。


最新の投稿


バヌアツ、83の島々の子どもたちにワクチンをドローン輸送 試験運用実施

バヌアツ、83の島々の子どもたちにワクチンをドローン輸送 試験運用実施

バヌアツの保健大臣のノリス・ ジャック・カルメは、 同国の島々に住む子どもたちにワクチンを届ける、 ドローンによる輸送試験が公式に開始されたと12月5日、発表した。


サン電子とドコモ、5GとARスマートグラスを活用したドローンの遠隔支援で実証実験開始

サン電子とドコモ、5GとARスマートグラスを活用したドローンの遠隔支援で実証実験開始

 サン電子株式会社と株式会社NTTドコモ東海支社は、第5世代移動通信方式(5G)と、サン電子のARスマートグラス「AceReal One」を活用したドローンの遠隔支援などの実証実験を12月4日から開始した。


米国の橋梁点検で効果を発揮するインテルのドローンソリューション

米国の橋梁点検で効果を発揮するインテルのドローンソリューション

米半導体大手のインテルは、米国の2つの輸送部門と協力して、オハイオ州とケンタッキー州を結ぶダニエル・カーター・ビアード・ブリッジとミネソタ州のストーン・アーチ・ブリッジの手動検査をドローンで補完して、橋の検査を改善したと12月5日、発表した。


国際航業ドローンスクール・ドローンタイムズのスタッフが三次元計測まで挑戦

国際航業ドローンスクール・ドローンタイムズのスタッフが三次元計測まで挑戦

ドローンの操縦技術から3次元計測の実践スキルを一貫して習得できる国際航業のドローンスクールに、ドローンタイムズのスタッフが挑戦した。果たして、JUIDA認定カリキュラムをクリアして、彼らは晴れてドローンパイロットになれるのだろうか。


カーシエル が仏セルベア社のアンチドローンシステム公開

カーシエル が仏セルベア社のアンチドローンシステム公開

カーシエル株式会社(東京都中央区)が、仏セルベア(CerBair)社のアンチドローンシステムを関係者に紹介。