以下为《1.Hadoop集群搭建实验(5台)》的无排版文字预览,完整格式请下载
下载前请仔细阅读文字预览以及下方图片预览。图片预览是什么样的,下载的文档就是什么样的。
Hadoop集群环境搭建
一、网络配置
新建虚拟机,典型安装centOS6.7操作系统.
完整克隆创建好的虚拟机,并以如下方式命名:hadoop01,hadoop02,hadoop03,hadoop04,hadoop05
修改4台虚拟机的网卡信息,
第1种情况:首先查看右上电脑连接,如果有多余的网卡eth1,先删除此网卡信息,然后修改此文件
vim /etc/udev/rules.d/70-persistent-net.rules
先删除原来eth0这行内容,然后修改网卡名称name=eth1 为name=eth0
然后重启机器(必须)
第2种情况:上角电脑连接处无多余eth1网卡,那么只需要直接删除此文件
rm -f /etc/udev/rules.d/70-persistent-net.rules
然后重启机器
修改ip地址 (其它均按照此方法配置)
DEVICE=eth0
TYPE=Ethernet
ONBOOT=yes
BOOTPROTO=static
IPADDR=192.168.10.101
NETMASK=255.255.255.0
修改主机名(其它4台同样按照此方法修改)
临时修改:hostname hadoop01 / hadoop02 ,hadoop03
su – 切换
永久修改:vi /etc/sysconfig/network
NETWORKING=yes
HOSTNAME=hadoop01
修改hosts文件
vim /etc/hosts
192.168.10.101 hadoop01
192.168.10.102 hadoop02
192.168.10.103 hadoop03
192.168.10.104 hadoop04
192.168.10.105 hadoop05
7. 关闭所有主机01-05的防火墙 linux 以及 windows
临时: service iptables stop
永久: chkconfig ipta 内容过长,仅展示头部和尾部部分文字预览,全文请查看图片预览。 p05
然后启动
sbin/start-yarn.sh
查看jps进程
hadoop02 应该有 resourceManager
hadoop03 04 05 应该有nodeManager
10. 查看管理界面
hdfs的管理界面, 查看有效地子节点信息
192.168.10.101:50070
yarn的管理界面,查看有效地子节点信息
192.168.10.102:8088
用于单独启动某个进程的命令
sbin/hadoop-daemon.sh start datanode
sbin/yarn-daemon.sh start nodemanager
[文章尾部最后300字内容到此结束,中间部分内容请查看底下的图片预览]请点击下方选择您需要的文档下载。
以上为《1.Hadoop集群搭建实验(5台)》的无排版文字预览,完整格式请下载
下载前请仔细阅读上面文字预览以及下方图片预览。图片预览是什么样的,下载的文档就是什么样的。