[論文レビュー] FBase: A Replication Service for Data-Intensive Fog Applications

Jonathan Hasenburg, Martin Grambow+1 more|arXiv (Cornell University)|Dec 6, 2019

IoT and Edge/Fog Computing参考文献 31被引用数 8

ひとこと要約

FBase は、異種で地理的に分散したフォグノードにわたる宣言的でアプリケーション制御の可能なデータ配置を可能にすることで、データ集約型フォグアプリケーションの開発を簡素化することを目的としたミドルウェアレプリカションサービスです。インフラの非均一性を抽象化し、マルチテナントをサポートすることで、開発者が低レベルの調整を一切行わずにデータ分散ポリシーを指定できるようになり、実世界のシナリオにおけるアプリケーションコードの複雑さが顕著に低減することが評価で示されました。

ABSTRACT

The combination of edge and cloud in the fog computing paradigm enables a new breed of data-intensive applications. These applications, however, have to face a number of fog-specific challenges which developers have to repetitively address for every single application. In this paper, we propose a replication service specifically tailored to the needs of data-intensive fog applications that aims to ease or eliminate challenges caused by the highly distributed and heterogeneous environment fog applications operate in. Furthermore, we present our prototypical proof-of-concept implementation FBase that we have made available as open source.

研究の動機と目的

• 開発者が繰り返し低レベルのデータ分散およびレプリケーション問題を解決しなければならない、非常に分散化され、非均一な環境におけるデータ集約型フォグアプリケーションの開発課題に対処すること。
• アプリケーション論理とインフラ管理を分離するミドルウェア抽象化を提供することで、アプリケーションの複雑さを低減すること。
• インフラの非均一性を隠蔽し、既存のシステムとの統合を可能にしながら、アプリケーション制御のレプリカ配置を可能にすること。
• エッジ環境におけるリソースの効率的利用を実現するため、ネイティブにマルチテナントをサポートするサービスを設計すること。
• プロトタイプの概念実証と実世界のユースケースを通じて、アプローチの実現可能性と利点を評価すること。

提案手法

• FBase は、低レベルのレプリケーションおよび分散ロジックを抽象化する BigTable に類似したキー値インターフェースをデータ管理に提供する。
• 宣言的構成を用いて、データ配置ポリシー（レプリカトポロジー、TTL 設定など）を定義する。
• 同じフォグノード上に複数のアプリケーションが共存できるように、1つのサービスインスタンスを複数のアプリケーションで共有することでマルチテナントを実現する。
• 構成可能なデータインジェストおよびエグレスインターフェースを介して、外部システム（例：センサー、ストリームプロセッサ）との統合を可能にする。
• 負荷分散および障害耐性メカニズムを含む、アプリケーションが指定したルールに基づいてレプリケーションが自動的に管理される。
• プロトタイプはオープンソースソフトウェアとして実装され、マイクロベンチマークおよび3つの実世界のフォグアプリケーションシナリオを用いて評価された。

実験結果

リサーチクエスチョン

• RQ1 高並列かつ非均一な環境におけるデータ集約型フォグアプリケーションの開発を簡素化するため、レプリケーションサービスはどのように設計すべきか？
• RQ2 インフラの複雑さを隠蔽しつつ、アプリケーション制御のデータ配置を可能にするために必要な抽象化は何か？
• RQ3 エッジ環境におけるリソースの効率的共有を実現するため、マルチテナントをサポートするレプリケーションサービスはどのように設計すべきか？
• RQ4 TTL、障害モード、ネットワークパーティショニングを含むレプリケーション構成におけるパフォーマンスと正しさのトレードオフは何か？
• RQ5 実世界のフォグユースケースにおいて、FBase はアプリケーションコードの複雑さをどの程度低減できるか？

主な発見

• FBase はアプリケーション開発者が宣言的にデータ分散ポリシーを定義できるようにし、フォグアプリケーションにおけるカスタムデータ管理コードの必要性を低減した。
• プロトタイプ実装は、複雑なデータ分散ロジックを非常に簡潔に表現でき、アプリケーション側で必要なコード量が最小限に抑えられることを示した。
• マイクロベンチマークの結果、FBase は変動するネットワークおよび負荷条件下でも予測可能な遅延を維持しながら、高スルーレートのデータレプリケーションをサポートしていることが確認された。
• センサー・データパイプラインやマルチサイト分析などの実世界のシナリオにおいて、FBase はフォグノード間でのデータフロー管理の複雑さを顕著に低減した。
• TTL 設定やレプリカトポロジーといった重要なトレードオフを、構成可能なスイッチとして公開することで、開発者がデータ耐久性とパフォーマンスのバランスを調整できるようになった。
• FBase はデータベースではないが、将来的にリレーショナルまたは時系列ワークロードをサポートする拡張が可能な、分散フォグデータストアの基盤として機能する可能性を有している。