Ganglia
Gangliaのデータの保存期間はデフォルトで最大約1年で、rrdtoolを使っているので古いデータが廃棄されます。しかし、もっと長く保存したいので保存期間を拡大します。最初からわかっていれば、gmetad.confのRRAsの設定を、例えば、 RRAs "RRA:AVERAGE:0.5:1…
CapacityRemainingGBと、CapacityTotalGBと、CapacityUsedGBの値はgangliaで取れているとします(昨日のブログを見てください)。これを元に、HDFS容量のグラフを書きます。昨日のブログの作業はNameNodeでしたが、今日の作業はgangliaのweb画面を生成してい…
hadoopのログ /var/log/hadoop/hdfsmetrics.log のデータを読み出して、Gangliaに登録する方法です。なお、OSはCentOSです。 NameNodeにpyhonモジュールをインストールします。 #cat > /usr/lib64/ganglia/python_modules/Hdfsmetrics.py <