2014-09-01から1ヶ月間の記事一覧

EcilpseでSpark Streaming

はじめに Scala IDE for Eclipseを利用して、Apache Sparkで、Twitter Streamingする。 バージョン Scala IDE for Ecipse : 2.10.4 Apache Spark : 1.1.0 for Hadoop 2.4 twitter4j : 3.0.3 Scala IDE for Eclipseはこちらから2.10.4をダウンロード Download…

Raspberry PiでHadoop(擬似分散モード)を動かす

はじめに Raspberry PiでHadoopを動かす。 ただし、擬似分散モード。 Raspbianの導入と固定IPの設定まで完了している前提。 Raspberry PiにRaspbianを導入する - もょもとの技術ノート ゴールはName Node, Data Node, Resource Managerを稼働させ、 円周率を…

Raspberry PiにRaspbianを導入する

はじめに 1. DebianベースのRaspberry Pi用OS、Raspbianを導入する 2. HDMIは使用しないで、SSHで設定する 3. 固定IPを設定する使用したのはRaspberry Pi Model B+ CPU : 700 MHz メモリ : 512MB ストレージ : microSD 16GB (別途購入、ハードディスクとか付…

PassengerでRailsアプリを複数稼働させながら、静的コンテンツも提供する

はじめに Phusion PassengerでRailsアプリを複数稼働させながら、 静的コンテンツもApacheサーバーから同時に提供しようとしたら、 アレってなって、調べたメモ。 やりたいこと /var/www/html/contentsとかで静的コンテンツを提供する /opt/appとかにrailsア…

プロキシ環境下でElasticsearchにRubyから接続できない

問題 プロキシ環境下で、localhostに立てたElasticsearchに gem elasticsearchを用いて、Rubyプログラムから接続を試みると、 プロキシサーバーを通して外に接続しに行こうとする orz... バージョン Ruby 2.1.2p95 Elasticsearch 1.3.2 elasticsearch(gem) 1…