BigData

Apache nifi ローカルファイル_to_Database

前回はインストールと簡単な動作確認を行いました。 kashigeru.hatenablog.com 今回はローカルのファイルからDATABASE(PosgreSQL)へデータを移行してみます。 設定 まず[GetFile][ConvertJSONToSQL][PutSQL]を配置します。 1.[GetFile]を設定しま…

HP VerticaでConnector for HDFSを試してみる

HP Vertica Club - 概要 | 日本HPh50146.www5.hp.com Verticaは前回のGreenPlum同様にカラムナーDBです。 Masterレスアーキテクチャというのが特徴のようです。 詳しくは上記を。 今回はCommunity Editionをインストールしました。 3ノードクラスター、1Tbyt…

GreenPlumをインストールする

GreenPlumがオープンソース化されるという事で早速インストールしてみました。 Pivotal Introduces World’s First Open Source-based, Enterprise-Class Big Data Product Suite | Press Release pivotal.io GreenPlumはMaster-Slaveのアーキテクチャです。 …