[論文レビュー] PlanetSense: A Real-time Streaming and Spatio-temporal Analytics Platform for Gathering Geo-spatial Intelligence from Open Source Data

Gautam S. Thakur, Budhendra Bhaduri+4 more|arXiv (Cornell University)|Jul 19, 2015

Data Management and Algorithms参考文献 8被引用数 8

ひとこと要約

PlanetSense は、リアルタイムのストリーミングおよび空間時間的分析プラットフォームであり、ライブのオープンソースデータとアーカイブ済みの地理空間データセットを統合することで、動的で運用に即したインテリジェンスを可能にする。クラウドベースのデータアーキテクチャ、リアルタイムのデータインジェスト、高度な分析、インタラクティブな可視化を組み合わせることで、環境人口および建物の占有状況のスケーラブルなモデリングが可能となり、災害対応などの時間的に敏感な状況での価値を示している。

ABSTRACT

Geospatial intelligence has traditionally relied on the use of archived and unvarying data for planning and exploration purposes. In consequence, the tools and methods that are architected to provide insight and generate projections only rely on such datasets. Albeit, if this approach has proven effective in several cases, such as land use identification and route mapping, it has severely restricted the ability of researchers to inculcate current information in their work. This approach is inadequate in scenarios requiring real-time information to act and to adjust in ever changing dynamic environments, such as evacuation and rescue missions. In this work, we propose PlanetSense, a platform for geospatial intelligence that is built to harness the existing power of archived data and add to that, the dynamics of real-time streams, seamlessly integrated with sophisticated data mining algorithms and analytics tools for generating operational intelligence on the fly. The platform has four main components - i. GeoData Cloud - a data architecture for storing and managing disparate datasets; ii. Mechanism to harvest real-time streaming data; iii. Data analytics framework; iv. Presentation and visualization through web interface and RESTful services. Using two case studies, we underpin the necessity of our platform in modeling ambient population and building occupancy at scale.

研究の動機と目的

• 従来の地理空間インテリジェンスツールが静的でアーカイブ済みのデータに依存しており、リアルタイム意思決定をサポートできないという制限を解消すること。
• リアルタイムのストリーミング地理空間データと歴史的データセットの両方を受容・処理・分析できる統合プラットフォームの開発。
• 避難計画や緊急対応などの時間的に重要な応用分野において、最新の状況認識を提供することで運用インテリジェンスを実現すること。
• 環境人口および建物の占有状況モデリングの実世界の事例を通じて、プラットフォームのスケーラビリティと有効性を実証すること。

提案手法

• プラットフォームは、アーカイブ済みおよびリアルタイムの両方のデータソースを含む多様な地理空間データセットを格納・管理するための GeoData Cloud アーキテクチャを採用している。
• ソーシャルメディア、交通フィード、センサーネットワークなどのオープンソースソースから継続的にストリーミングデータをインジェストするためのリアルタイムデータハーベスティングメカニズムを実装している。
• 空間時間的マイニングおよび機械学習技術を適用するカスタマイズ可能なデータ分析フレームワークを導入し、統合されたデータからパターンを検出し、意思決定に役立つインサイトを生成している。
• ウェブベースのインタラクティブ可視化インターフェースと RESTful API を通じて、結果を公開し、外部システムとの統合およびプログラムによるアクセスを可能にしている。
• データストリーム間の時間的および空間的相関を分析することで、イベント検出および変化モニタリングを実現している。
• 実世界のデータを用いた事例研究により、大規模な都市地域における動的かつ変化する人口分布および建物の占有状況のモデリングを検証している。

実験結果

リサーチクエスチョン

• RQ1 リアルタイムの地理空間データストリームを、静的でアーカイブ済みの地理空間アーカイブと効果的に統合することで、動的意思決定を支援する方法は何か？
• RQ2 オープンソースデータ上で、スケーラブルで低レイテンシの空間時間的分析を実現するために必要なアーキテクチャ的および分析的コンポーネントは何か？
• RQ3 多様なデータソースを用いて、環境人口ダイナミクスおよび建物の占有状況をリアルタイムで正確にモデリングできるか？
• RQ4 ライブデータと歴史的データの統合は、静的データのみを用いる場合と比較して、緊急対応シナリオにおける状況認識をどの程度向上させるか？

主な発見

• PlanetSense は、リアルタイムのデータストリームとアーカイブ済みの地理空間データを効果的に統合し、運用用途に即した動的かつ応答性の高い分析を可能にした。
• プラットフォームは、多様なオープンソースデータソースを活用して、大規模都市地域における環境人口および建物の占有状況のモデリングにおいてスケーラビリティを示した。
• システムは、空間的および時間的変化のニアリアルタイム検出を可能にし、災害対応や都市計画などの時間的に敏感な応用分野を支援している。
• 事例研究により、ライブデータと歴史的データの統合が、静的データのみを用いる手法と比較して、状況認識を顕著に向上させることを確認した。
• ウェブインターフェースおよび RESTful サービスにより、エンドユーザーおよびサードパーティアプリケーションに対して、効果的で低レイテンシの分析結果へのアクセスが可能になった。
• プラットフォームのモジュラーアーキテクチャにより、最小限の再構成で新しいデータソースや分析ワークロードのサポートが可能になった。