当前位置: > Linux集群 > Hadoop >

hadoop(1.2) 伪分布式部署

时间:2014-12-02 15:38来源:linux.it.net.cn 作者:IT
1. 部署环境
系统:  CentOS 6.3
JDK和hadoop的下载直接参考分布式安装...

2. 伪分布式环境
不需要配置/etc/hosts
本机也需要免密码ssh登录      
1 ssh localhost
 



3. 配置修改    1. conf/core-site.xml
1
2
3
4
5
<configuration>
<property>
<name>fs.default.name</name>
<value>hdfs://localhost:9000</value>
</property>
 



    2.  conf/hdfs-site.xml
1
2
3
4
5
6
<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
 



    3.  conf/mapred-site.xml
1
2
3
4
5
6
<configuration>
<property>
<name>mapred.job.tracker</name>
<value>localhost:9001</value>
</property>
</configuration>
 



     4.  conf/hadoop-env.sh
1 export JAVA_HOME=/usr/java/jdk1.7.0_67
 



    5. 不需要修改masters和slave文件
    6. 格式化名称节点
1
2
3
4
5
cd hadoop-1.2.1
./bin/hadoop namenode -format

如果最后面的信息有下面这样的表示成功...
14/08/30 11:37:05 INFO common.Storage: Storage directory /home/hadoop/hadoop-1.2.1/tmp/dfs/name has been successfully formatted.
 



4.  启动hadoop
1 ./bin/start-all.sh
 



5.  启动后的检查
通过jps命令查看,    java的进程统计列表
1 /usr/java/jdk1.7.0_67/bin/jps
 

(责任编辑:IT)
------分隔线----------------------------