Hadoop安装-分布式-Fully
〇、所需资料
一、配置
1、基础配置
(1)系统安装
(2)hostname主机名配置
(3)ip地址、dns、hosts映射文件配置
(4)关闭防火墙与selinux
(5)开启ntpd时钟同步
(6)jdk安装与环境变量配置
(7)机器克隆、配置
(8)ssh免密设置
2、部署配置
(1)包含内容
(2)hadoop环境变量配置
vi /etc/profile
(3)etc/hadoop下配置-core-site.xml
<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://hadoop01:9000</value>
</property>
<property>
<name>hadoop.tmp.dir</name>
<value>/var/bigdata/tmp/hadoop/full</value>
</property>
</configuration>
(4)etc/hadoop下配置-hdfs-site.xml
<configuration>
<property>
<name>dfs.replication</name>
<value>2</value>
</property>
<property>
<name>dfs.namenode.name.dir</name>
<value>/var/bigdata/hadoop/full/dfs/name</value>
</property>
<property>
<name>dfs.datanode.data.dir</name>
<value>/var/bigdata/hadoop/full/dfs/data</value>
</property>
<property>
<name>dfs.namenode.secondary.http-address</name>
<value>hadoop02:50090</value>
</property>
<property>
<name>dfs.namenode.checkpoint.dir</name>
<value>/var/bigdata/hadoop/full/dfs/secondary</value>
</property>
</configuration>
(3)etc/hadoop下配置-slave配置dn
hadoop02
hadoop03
(4)目录分发到其他节点
scp -r ./hadoop/ hadoop02:pwd
二、启动
1、nn格式化
bin/hdfs namenode -format
2、启动dfs
sbin/start-dfs.sh
三、验证
1、nn验证
2、dn验证
3、页面验证
原文地址:http://www.cnblogs.com/liujinhui/p/16852167.html
1. 本站所有资源来源于用户上传和网络,如有侵权请邮件联系站长!
2. 分享目的仅供大家学习和交流,请务用于商业用途!
3. 如果你也有好源码或者教程,可以到用户中心发布,分享有积分奖励和额外收入!
4. 本站提供的源码、模板、插件等等其他资源,都不包含技术服务请大家谅解!
5. 如有链接无法下载、失效或广告,请联系管理员处理!
6. 本站资源售价只是赞助,收取费用仅维持本站的日常运营所需!
7. 如遇到加密压缩包,默认解压密码为"gltf",如遇到无法解压的请联系管理员!
8. 因为资源和程序源码均为可复制品,所以不支持任何理由的退款兑现,请斟酌后支付下载
声明:如果标题没有注明"已测试"或者"测试可用"等字样的资源源码均未经过站长测试.特别注意没有标注的源码不保证任何可用性