オーリック・システムズ・ジャパンのビッグデータ分析基盤「Pivotbillions」、540億件の位置情報データから移動パターンを抽出可能に

近年、IoTやモバイルアプリの利用拡大で、GPSなどの位置情報を含むビッグデータの解析ニーズが増えている。しかし、位置情報データ活用のためのデータ解析作業は、データ量が非常に多いことに加え、滞在時間や移動距離などの複雑な時系列データ処理、さらに外部データとの連結処理や多様なフィルターが必要になることが多く、データの解析には高額な費用と月単位の時間が必要だった。

このため、位置情報データ分析ではサンプリングしたほんの一部のデータを解析することが多く、ビッグデータが活用されない状況となっていた。

オーリック・システムズ・ジャパン株式会社のビッグデータ分析基盤「Pivotbillions」は、Master NodeとWorker Nodeを基本構成としたシンプルな構成で、メモリに読み込んだデータを並列分散で処理する。多種多様がデータ構造に対応しており、xcelを操作する感覚でソートや検索、フィルタリングや集計、分析が可能だ。そのほか、データプレパレーションを短期間で低コストに提供できるため、企業のAIや機械学習への取り組みに適するという。

そして今般、オーリック・システムズ・ジャパンはPivotbillionsを強化し、540億件以上の位置情報データに対して複数条件でのフィルタ、距離差・時間差での曖昧結合、集計といった処理を数秒から数十秒程度の応答できるようになった。解析者は短時間で様々な仮説検証を繰り返すことができ、ビッグデータを有用なレポートに変換することができる。

オーリック・システムズ・ジャパンのビッグデータ分析基盤「Pivotbillions」、540億件の位置情報データから移動パターンを抽出可能に
解析結果の可視化例:空港を中心にし移動パターンを可視化(ダミーデータ)
上記データはPivotbillionsによってコントロールされたAmazon Web Serviceを利用した最大500台のAmazon EC2の並列処理で実現されている。一般的なシステムで同じデータ量を処理した場合と比較すると、費用、処理時間とも1/10以下になるという。

同機能により、データベース不要でAmazon S3に保存されている大量の生データファイルを直接解析できるため、中間データ処理を不要とし、解析要件の追加や変更に柔軟に対応することができる。

【関連記事】
オーリック・システムズ・ジャパン、数十億件のデータをリアルタイム処理可能な「PivotBillions」サブスクリプションライセンスを提供開始

無料メルマガ会員に登録しませんか?

膨大な記事を効率よくチェック!

IoTNEWSは、毎日10-20本の新着ニュースを公開しております。 また、デジタル社会に必要な視点を養う、DIGITIDEという特集コンテンツも毎日投稿しております。

そこで、週一回配信される、無料のメールマガジン会員になっていただくと、記事一覧やオリジナルコンテンツの情報が取得可能となります。

  • DXに関する最新ニュース
  • 曜日代わりのデジタル社会の潮流を知る『DIGITIDE』
  • 実践を重要視する方に聞く、インタビュー記事
  • 業務改革に必要なDX手法などDXノウハウ

など、多岐にわたるテーマが配信されております。

また、無料メルマガ会員になると、会員限定のコンテンツも読むことができます。

無料メールから、気になるテーマの記事だけをピックアップして読んでいただけます。 ぜひ、無料のメールマガジンを購読して、貴社の取り組みに役立ててください。

無料メルマガ会員登録