这篇文章主要介绍“hadoop分布式安装步骤”,在日常操作中,相信很多人在hadoop分布式安装步骤问题上存在疑惑,小编查阅了各式资料,整理出简单好用的操作方法,希望对大家解答”hadoop分布式安装步骤”的疑惑有所帮助!接下来,请跟着小编一起来学习吧!
创新互联-专业网站定制、快速模板网站建设、高性价比港北网站开发、企业建站全套包干低至880元,成熟完善的模板库,直接使用。一站式港北网站制作公司更省心,省钱,快速模板网站建设找我们,业务覆盖港北地区。费用合理售后完善,十余年实体公司更值得信赖。
1、防火墙;
1) 重启后生效
开启: chkconfig iptables on
关闭: chkconfig iptables off
2) 即时生效,重启后失效
开启: service iptables start
关闭: service iptables stop
3)查看防火墙状态:service iptables status
2、HDFS 启动
sbin/hadoop-daemon.sh start/stop namenode
sbin/hadoop-daemon.sh start/stop secondarynamenode
sbin/hadoop-daemon.sh start/stop datanode
需要在sbin目录下操作
yarn jar /opt/cloud/hadoop-2.6.0-cdh6.4.2/ws/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.0-cdh6.4.2.jar wordcount /wordcount /output
sbin/yarn-daemon.sh start resourcemanager
sbin/yarn-daemon.sh start nodemanager
./yarn-daemon.sh stop nodemanager
./yarn-daeon.sh stop resourcemanager
如何克隆虚拟机:http://www.centoscn.com/CentOS/2015/0208/4656.html
CentOS Linux 克隆完后,连接问题 http://my.oschina.net/u/2356966/blog/469248
一定要保证,集群中的所有节点的配置都是一样的,
因此,我是在同一个节点上配置,然后同步到其他的机器上。
临时修改用户名:hostname 新名
永久性修改:vim /etc/sysconfig/network
ssh这是个命令,可以放到shell脚本,那么这样就能够实现自动化的连接到其他的机器,同时,执行相应的命令。
设置步骤
生成自己的公私钥对:ssh-keygen -t rsa
将自己的公钥复制到对方的机器下,并授权;ssh-copy-id root@master
别忘了给自己也设置下
使用ssh直接登录,不需要添写密码
ssh-keygen -t rsa 生成一次
ssh-copy-id root@master 多次授权给不同的机器
同步;
scp -r hadoop-2.6.0-cdh6.4.2/ root@slave01:/opt/cloud/
scp -r jdk1.7.0_45/ root@slave01:/opt/cloud/
scp -r /etc/profile root@slave01:/etc/profile
master节点格式化:hdfs namenode -format
datanode节点启动,需要删除dfs中的dn文件
到此,关于“hadoop分布式安装步骤”的学习就结束了,希望能够解决大家的疑惑。理论与实践的搭配能更好的帮助大家学习,快去试试吧!若想继续学习更多相关知识,请继续关注创新互联网站,小编会继续努力为大家带来更多实用的文章!
文章题目:hadoop分布式安装步骤
当前链接:http://lswzjz.com/article/jsjccg.html