基盤の構築 モノのインターネットのために Pivotal Software 戦略およびビジネス開発担当ディレクター

基盤の構築
モノのインターネットのために
Pivotal Software
戦略およびビジネス開発担当ディレクター
SEAN LEE
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
1
IoTが新たな基盤を求める理由
ボリューム
拡張性
多くのモノを管理する
のは難しい
プラットフォームに
拡張性はあるか？
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
スピード
プラットフォームを迅速に
拡張できるか？
2
IoTのパターン
アプリケー
ション
分析
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
データ
IoT市場の業種
• 多様な産業メーカー
– セキュリティ、小売
•
•
•
•
自動車メーカー、コネクテッド カー
コンシューマー、コネクテッド ホームなど
メディア（モバイル デバイス使用）
都市インフラストラクチャ、都市
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
IoTの基盤
優れた魅力あるデータ集約型
構成 運用モニタリング
アプリケーションを提供する
P2Pソリューション
プラットフォーム
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
IoTのデータ フロー
反応
エッジ
取得
IoT API/アプリケーション
ストリーミング
分析
ビッグデ
ータ分析
ストレージ
サービスとしてのIoTバックエンド（クラウド ネイティブ プラットフォーム上）
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
IoTのデータ フロー：データ ストリーミングおよび処理
反応
IoT API/アプリケーション
RabbitMQ
エッジ
取得
ストリーミング分析
Spring XD
ビッグデ
ータ分析
ストレージ
サービスとしてのIoTバックエンド（クラウド ネイティブ プラットフォーム上）
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
RabbitMQ：超高速メッセージ ブローカー
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
Spring XD：データ パイプラインの自動化
取得/シンク
• コーディングは不要
• 多数の組み込み型コネクタ
• Kafka、Sqoopとシームレスに
統合
• Springで簡単に新規コネク
タを作成
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
プロセス
分析
• Spark、Reactor、RxJavaの
呼び出し
• PMMLジョブを簡単にインポート
して起動
• 構成可能な組み込み型フィルタ
リング、分割、変換
• Python、R、Madlibなどさまざま
なツールの呼び出し
• そのまま使える構成可能なジョ
ブでバッチ処理
• 構成可能な組み込み型カウン
ターおよびゲージ
IoTのデータ フロー：高度な分析
反応
エッジ
取得
IoT API/アプリケーション
ストリーミング
分析
ビッグデータ分析
HAWQ
ストレージ
サービスとしてのIoTバックエンド（クラウド ネイティブ プラットフォーム上）
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
HAWQ：Hadoopでの高度なSQL分析
• オープン ソース
• HadoopでのRDBMSの超並列
処理
• Hadoop上のANSI SQL
• 非常に優れた分析パフォーマン
ス（Hiveとは異なる）
• すべてのデータをHDFSに直接
格納
SQLは今でもデータ サイエンスにNo. 1の選択肢
SQLとHadoopの組み合わせが分析にとって鍵
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
IoTのデータ フロー：イン メモリ キャッシュとHadoop
反応
エッジ
取得
IoT API/アプリケーション
ストリーミング
分析
Greenplum
GemFire
ビッグデ
ータ分析
ストレージ
Pivotal HD
サービスとしてのIoTバックエンド（クラウド ネイティブ プラットフォーム上）
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
Greenplum：超並列クエリー エンジン
• オープン ソース
• 大量のデータ セットながら完全なSQL
– Hadoop上のMPP SQL、SQL
• 複雑な分析クエリー
• 高パフォーマンス
• Tableauなどの認定
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
GemFire：イン メモリのリアルタイム データ グリッド
• オープン ソース
• イン メモリのエンタープライズ データ
グリッド
• 水平的な拡張性、整合性、高可用性
• イベント処理
• 連続クエリー
• エンタープライズ データのジオ分散
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
Pivotal Hadoop：オープン データ プラットフォーム
• オープン ソース
• ODPによる構築
• Hortonworksとの
パートナー関係
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
IoTのデータ フロー：データ主導型アプリケーション
およびAPI
反応
エッジ
取得
Pivotal CF
モバイル
サービス
IoT API/アプリケーション
ストリーミング
分析
ビッグデ
ータ分析
ストレージ
サービスとしてのIoTバックエンド：Pivotal Cloud Foundry
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
クラウド ネイティブのアプリケーション プラットフォーム
従来
オペレーティング
システム
仮想化プラットフォーム
IAAS
物理サーバー
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
PaaS
メッセ
ージング
Web
サーバー
IoTアプリケーション
データ
ベース
メッセ
ージング
Web
サーバー
IoTアプリケーション
データ
ベース
クラウド ネイティブ
IAAS
仮想インフラ
ストラクチャ
IoTアプリケーション
Pivotal Cloud Foundryのメリット
コード
実装
実行
環境にセルフ
サービス
アクセス
ビルドパック：
ランタイムを
標準化
ブルー/
グリーン アッ
プグレード
ビジネス
コードに
フォーカス
自動インスト
ールおよび
構成
ローリング
パッチ
モノリス型で
ないマイクロ
サービス
マルチ
クラウド
コンテナー ベ
ース：使用率
の向上
機器を組み
込み
連携した処理：Pivotal IoTプラットフォーム
RabbitMQ
取得
データ レイク
ストリーミング処理
JSON/HTTP
拡充
モバイル サービス
変換
Spring XD
シンク
Pivotal HD
リアルタイムのデータ インサイト
高度な分析機能
GemFire
HAWQ
プッシュ
マイクロサービス
IoTアプリケ
ーション
Pivotal CF
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
ダッシュボード
分析アプリケーション
シミュレータ
IoT分野のPivotalカスタマー
Pivotal Big Data SuiteとPivotal Cloud Foundryの使用
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
20
風力発電：リアルタイムのIoT
毎秒100,000件以上のセンサー イベント
継続的なリアルタイム分析
高速データ
毎秒100,000件以上のデータ
ポイント
• ミリ秒からサブミリ秒のクライアント レーテンシー
Pivotal HD
• リアルタイムの分散イベント処理
• イン メモリHAによる高パフォーマンス
GemFire
非同期書き込み
ビッグデータ
HAWQ
レポート作成
運用
詳細な分析
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
課金
21
Mercedes-Benzの
「Mercedes me」
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
23
RabbitMQ
モバイル
アプリケーション
JSON
ストリーミング処理
+ タイム スタンプ
とGUID
+ MPG、rangE、
経路
Spring XD
シンク
タップ
データ レイク
Pivotal HD
高度な分析機能
拡充機能
予測分析
HAWQ
車両センサー
ダッシュボード
水平的な拡張性
フォルト トレラント
拡張可能
オープン ソース
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
リアルタイムのデータ インサイト
GemFire
24
IoTを変革する
Pivotal
の方法
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
BDS
PCF
IoT
25
オープン
俊敏性、
クラウド対応
© Copyright 2015 Pivotal.All rights reserved. （不許複製・禁無断転載）
26