Niftyクラウド環境の構築(13)

●pig 実行時に一時領域不足のため、各datanodeにディスクを増設する

niftyクラウドのマニュアル参照

●結局、再構築

cdh00 /hadoop/conf.nfs/hdfs-site.xml

/data/dfs/name -> /hdfs_area/dfs/name
/data/dfs/data -> /hdfs_area/dfs/data

cdh00 /hadoop/conf.nfs/mapred-site.xml

/data/mapred/local -> /hdfs_area/mapred/local


不整合なのでnamenode再初期化のため再作成!

/var/run/hadoop <<--pidの残骸はここだ!

rm -rf /var/run/hadoop
mkdir /var/run/hadoop
chown -R hdfs:hadoop /hdfs_disk1
chown -R hdfs:hadoop /var/run/hadoop
chmod 777 /hdfs_disk1

rm -rf /hdfs_disk1/*
mkdir -p /hdfs_disk1/dfs/name /hdfs_area/dfs/data
chown -R hdfs:hadoop /hdfs_disk1/dfs/name /hdfs_disk1/dfs/data
chmod -R 700 /hdfs_disk1/dfs/name/
chmod -R 755 /hdfs_disk1/dfs/data/

mkdir -p /hdfs_disk1/mapred/local
chown -R mapred:hadoop /hdfs_disk1/mapred/local/
chmod -R 755 /hdfs_disk1/mapred/local/

 

- Sponsored Link -