Happy-Camper Street: Pigアーカイブ

Pigの最近のブログ記事

擬似分散モードの動作確認

Takuya UESHIN (2010年5月20日 19:48) | # Comments

先日セットアップした擬似分散モードの動作確認を行います。

テストに使うサンプルはいつものやつと、そのScala版、Pig版です。

を利用します。
それぞれインストールが完了していて、Hadoopは擬似分散モードの準備が出来ているものとします。

続きを読む: 擬似分散モードの動作確認

Takuya UESHIN (2010年5月 3日 22:41) | # Comments | 1 Trackback

Pigという、Hadoopをお手軽に使いましょうツールを使ってみました。
また、 Scala によるユーザー定義関数(UDF)の記述、組み込みをしてみました。

題材はいつもと同じです。

を利用しています。

$ git clone https://github.com/ueshin/pig-scala-aggregate.git
$ cd pig-scala-aggregate
$ git checkout pig-scala-aggregate-0.6.1

続きを読む: Pig Latin / UDF in Scala