hadoop cluster notes

namenode : app port: 9000, web server: 50070
jobtracker: app port:9001, web server:50030

datanode, tasktracker 运行于slaves上

core-sites.xml 用fs-default-name指定namenode
hdfs-sites.xml 指定namenode存放临时文件地址，指定datanode存放临时文件地址

临时文件夹必须存在，启动namenode前需要先先hadoop namenode -format一下

运行输入数据和输出数据都位于hdfs上，需要用hadoop fs -put或者-get 来获取，输出目录不能已存在，需要用-rmr来删除

用ip地址指示机器的话需要在hosts里填上对应关系 不然reduce的时候会出错