Upgrade to Pro — share decks privately, control downloads, hide ads and more …

10分で詰め込むHadoop

Sponsored · SiteGround - Reliable hosting with speed, security, and support you can count on.
Avatar for kanga333 kanga333
April 02, 2018

 10分で詰め込むHadoop

MicroAd 社内LT会資料

Avatar for kanga333

kanga333

April 02, 2018

More Decks by kanga333

Other Decks in Technology

Transcript

  1. Storm / Spark Streaming 分散リアルタイムバッチ処理フレームワーク リアルデータに対して細かくバッチ処理を行う リアルタイム処理フレームワークは乱立していてカオス リアルタイム処理フレームワーク Apache Flink,

    Apache Apex, Heron, Kafka streams 各種リアルタイム処理をDSLで書ける Apache Beam リアルタイム処理をGUIで定義 Apache Nifi, Stream Sets リアルタイム処理 with SQL KSQL, Spark Structured Streaming