2008年10月アーカイブ

OutOfMemoryError

Takuya UESHIN (2008年10月 9日 23:39) | # Comments
Maven2でプロジェクト管理していると、モジュールの数がどんどん多くなってきます。

すると、ビルドやプロジェクトサイト生成の時にOutOfMemoryErrorが出るようになってしまいます。
特にレポートをたくさん出力するように設定されているプロジェクトサイトを生成する時にはより多くのメモリを使うので、頻繁にOutOfMemoryErrorになります。

なお、物理メモリが不足している場合にはメモリの増設が必要です。
続きを読む: OutOfMemoryError

Maven Javadoc Plugin

Takuya UESHIN (2008年10月 7日 02:58) | # Comments
Maven Javadoc Pluginです。

Javadocを生成するプラグインです。
インストール/デプロイの際にJavadocの出力をしておくとまとめたjarファイルをインストール/デプロイすることが出来、Javadocの共有が出来るようになります。
また、IDEによってはJavadocを表示してくれるようにもなります。

siteフェーズ実行時にJavadocレポートを生成するのもこのプラグインです。
続きを読む: Maven Javadoc Plugin

Maven Source Plugin

Takuya UESHIN (2008年10月 6日 19:05) | # Comments
Maven Source Pluginです。

インストール時やデプロイ時にこのプラグインの設定をしているとソースコードをまとめたjarファイルもインストール/デプロイされるので、他の人がこのアーティファクトを利用する際にいちいちSCMからチェックアウトしなくてもソースコードを参照できるようになり、IDEなどでの開発がより便利になります。
続きを読む: Maven Source Plugin

hadoop-aggregate-0.0.2

Takuya UESHIN (2008年10月 5日 00:28) | # Comments | 1 Trackback
昨日のhadoop-aggregateをちょこっとバージョンアップ。

  • アクセス日をキーに入れた。
  • 拡張子.html以外を除外した。
  • ステータスコード 200/304 以外を除外した。
  • 外部ライブラリcommons-langを使うようにした。 

$ git clone https://github.com/ueshin/hadoop-aggregate.git
$ cd hadoop-aggregate
$ git checkout hadoop-aggregate-0.0.2

で利用できます。

また https://github.com/ueshin/hadoop-aggregate/tree/hadoop-aggregate-0.0.2 でブラウズできます。
続きを読む: hadoop-aggregate-0.0.2

hadoop-aggregate開発

Takuya UESHIN (2008年10月 4日 03:43) | # Comments | 1 Trackback
オリジナルのHadoop MapReduceアプリケーション第一弾、hadoop-aggregateを開発しました。

ApacheのアクセスログCombined形式のファイルから、

  • どこから (IPアドレス)
  • どのページに (URL)
  • 何回アクセスしたか。

をTSV形式のファイルで出力します。
続きを読む: hadoop-aggregate開発

Maven Jar Plugin

Takuya UESHIN (2008年10月 3日 20:18) | # Comments
今回はMaven Jar Pluginを見てみます。

主に<packaging>jar</packaging>の時のpackageフェーズ担当です。
JWS(Java Web Start)などで配布するjarファイルへの署名もこのプラグインで行うことができます。
続きを読む: Maven Jar Plugin

Maven Compiler Plugin

Takuya UESHIN (2008年10月 2日 18:59) | # Comments
基本的なMaven2プラグインである、 Maven Compiler Pluginを紹介します。

Javaソースコードをコンパイルするのに必要なプラグインです。
、、、と思いきや、設定によってはC#もコンパイルできるらしいです。
続きを読む: Maven Compiler Plugin

MapReduceプログラム開発準備

Takuya UESHIN (2008年10月 1日 19:27) | # Comments | 1 Trackback
以前GFS(Google File System)とMapReduceのオープンソース版であるHadoopを紹介しましたが、引き続きHadoop MapReduceプログラムの開発を行うため、HadoopとMaven2の準備を行います。

以下の手順では、JavaTM 1.5.x以上をインストールの上、環境変数 JAVA_HOME が適切に設定されているものとします。
また、Windowsを利用している場合はあらかじめCygwinをインストールしておいてください。
続きを読む: MapReduceプログラム開発準備
« 2008年9月 | メインページ | アーカイブ | 2009年1月 »

Twitter Icon

Twitter Icon
by Twitter Backgrounds

AdSense

Creative Commons License
このブログはクリエイティブ・コモンズでライセンスされています。
Powered by Movable Type 5.14-ja

Google検索

カスタム検索

2013年10月

日 月 火 水 木 金 土
    1 2 3 4 5
6 7 8 9 10 11 12
13 14 15 16 17 18 19
20 21 22 23 24 25 26
27 28 29 30 31    

カテゴリ

月別 アーカイブ