1.Hadoop集群搭建实验(5台)

本文由用户“闲人安书”分享发布 更新时间:2021-12-21 08:09:48 举报文档

以下为《1.Hadoop集群搭建实验(5台)》的无排版文字预览,完整格式请下载

下载前请仔细阅读文字预览以及下方图片预览。图片预览是什么样的,下载的文档就是什么样的。

Hadoop集群环境搭建

一、网络配置

新建虚拟机,典型安装centOS6.7操作系统.

完整克隆创建好的虚拟机,并以如下方式命名:hadoop01,hadoop02,hadoop03,hadoop04,hadoop05

修改4台虚拟机的网卡信息,

第1种情况:首先查看右上电脑连接,如果有多余的网卡eth1,先删除此网卡信息,然后修改此文件

vim /etc/udev/rules.d/70-persistent-net.rules

先删除原来eth0这行内容,然后修改网卡名称name=eth1 为name=eth0

然后重启机器(必须)

第2种情况:上角电脑连接处无多余eth1网卡,那么只需要直接删除此文件

rm -f /etc/udev/rules.d/70-persistent-net.rules

然后重启机器

修改ip地址 (其它均按照此方法配置)

DEVICE=eth0

TYPE=Ethernet

ONBOOT=yes

BOOTPROTO=static

IPADDR=192.168.10.101

NETMASK=255.255.255.0

修改主机名(其它4台同样按照此方法修改)

临时修改:hostname hadoop01 / hadoop02 ,hadoop03

su – 切换

永久修改:vi /etc/sysconfig/network

NETWORKING=yes

HOSTNAME=hadoop01

修改hosts文件

vim /etc/hosts

192.168.10.101 hadoop01

192.168.10.102 hadoop02

192.168.10.103 hadoop03

192.168.10.104 hadoop04

192.168.10.105 hadoop05

7. 关闭所有主机01-05的防火墙 linux 以及 windows

临时: service iptables stop

永久: chkconfig ipta 内容过长,仅展示头部和尾部部分文字预览,全文请查看图片预览。 p05

然后启动

sbin/start-yarn.sh

查看jps进程

hadoop02 应该有 resourceManager

hadoop03 04 05 应该有nodeManager

10. 查看管理界面

hdfs的管理界面, 查看有效地子节点信息

192.168.10.101:50070

yarn的管理界面,查看有效地子节点信息

192.168.10.102:8088

用于单独启动某个进程的命令

sbin/hadoop-daemon.sh start datanode

sbin/yarn-daemon.sh start nodemanager

[文章尾部最后300字内容到此结束,中间部分内容请查看底下的图片预览]请点击下方选择您需要的文档下载。

  1. 新版人版pep小学英语3至6年级知识点归纳
  2. 产品设计规范文件修改履历表
  3. PEP小升初英语招生真题卷无答案)
  4. 已签批文件修改申请表(1)
  5. 高一英语写作指导与提高
  6. Altium Designer 13安装教程
  7. vmware-ESXI6.5安装教程虚拟化部署

以上为《1.Hadoop集群搭建实验(5台)》的无排版文字预览,完整格式请下载

下载前请仔细阅读上面文字预览以及下方图片预览。图片预览是什么样的,下载的文档就是什么样的。

图片预览