もょもとの技術ノート
もょもとの技術ノート
読者になる

もょもとの技術ノート

トップ > Flume

Flume

2014-10-26

Apache FlumeとSpark Streaming

Spark Flume

はじめに Flumeから流れてきたデータをSpark Streamingする。 実現したいことのイメージ。 netcatサーバーでデータ生成 Flumeはクライアントからデータを受け取り、Sparkに流し込む Spark Streamingでデータを集計 環境 Scala IDE for Ecipse : 2.10.4 flume…

はてなブックマーク - Apache FlumeとSpark Streaming
プロフィール
id:moyomot id:moyomot

マルチスレッドとか分散コンピューティングとか
https://twitter.com/moyomot_

読者です 読者をやめる 読者になる 読者になる
このブログについて
最新記事
  • Deep Learning環境はKeras + Docker + Jupyter Notebook + GPUがいいカンジ はてなブックマーク - Deep Learning環境はKeras + Docker + Jupyter Notebook + GPUがいいカンジ
  • GPUでTensorFlowを動かす はてなブックマーク - GPUでTensorFlowを動かす
  • Kerasでシンプルなニューラルネットワークを実装する はてなブックマーク - Kerasでシンプルなニューラルネットワークを実装する
  • ScalikeJDBCでMySQLにBulk Insertする はてなブックマーク - ScalikeJDBCでMySQLにBulk Insertする
  • gensimソースコードリーディング はてなブックマーク - gensimソースコードリーディング
  • Web企業のログ基盤まわりをまとめてみた はてなブックマーク - Web企業のログ基盤まわりをまとめてみた
  • Apache SparkでカスタムStreamingする はてなブックマーク - Apache SparkでカスタムStreamingする
    Spark
  • 最弱のHadoopクラスタをRaspberry Piで構築する はてなブックマーク - 最弱のHadoopクラスタをRaspberry Piで構築する
    Hadoop Raspberry Pi
  • Apache FlumeとSpark Streaming はてなブックマーク - Apache FlumeとSpark Streaming
    Spark Flume
  • EcilpseでSpark Streaming はてなブックマーク - EcilpseでSpark Streaming
    Spark
月別アーカイブ
  • ▼ ▶
    2016
    • 2016 / 10
    • 2016 / 7
  • ▼ ▶
    2015
    • 2015 / 12
    • 2015 / 9
  • ▼ ▶
    2014
    • 2014 / 12
    • 2014 / 11
    • 2014 / 10
    • 2014 / 9
    • 2014 / 7
    • 2014 / 6
    • 2014 / 5
もょもとの技術ノート もょもとの技術ノート

Powered by Hatena Blog | ブログを報告する

引用をストックしました

引用するにはまずログインしてください

引用をストックできませんでした。再度お試しください

限定公開記事のため引用できません。

読者です 読者をやめる 読者になる 読者になる