admin管理员组

文章数量:1530335


网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化资料的朋友，可以戳这里获取

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

8.⽹络类型选 使⽤⽹络地址转换(NAT) 。

  1. I/0类型默认（LSI Logic）

  2. 磁盘类型，默认（SCSI）

  3. 由于是新虚拟机，所以我们创建新的虚拟磁盘。磁盘的容量由于是动态增长，将虚拟磁盘拆分成多个⽂件，并为将来

安装做准备，根据⾃⼰电脑的性能，建议改成40G。

  1. 指定磁盘⽂件，默认。

  2. 最后将配置清单列出来，确认，点击完成。

  • 安装centos7
  1. 打开我们上⼀个⽂档建⽴的虚拟机，并双击CD/DVD(IDE)配置光驱，加载CentOS 7系统镜像。

2.开启“hadoop106”虚拟机。

  1. 系统会⾃动启动光驱，进⼊CentOS 7的安装界⾯，此界⾯有1分钟的停留时间，请快速将⿏标点击黑⾊部分。

  2. 移动键盘上的上下键，选择图中的 Install CentOS 7 选项。

  1. 进⼊系统安装界⾯。

  2. 选择安装过程中⽤到的语⾔，必然选简体中⽂

  1. 点击安装位置，选⾃动。或者⼿动（/boot 1g ext4、swap 4g xfs、/ 35g xfs）

  1. ⽹络和主机名，我们做如下的更改：

打开以太⽹，这样在启动时就使⽹卡处于激活状态。

主机名改成hadoop106，点应用

IP:192.168.100.106，子网掩码：255.255.255.0，网关：192.168.100.2，DNS：192.168.100.2。

9.然后就点开始安装，在这个期间创建root密码123123，由于我们的密码不符合系统安全要求，所以需要点击两次完成。等进度条⾛完，就可以点重启了。此时CentOS7安装完成并启动，等待我们输⼊账户，密码。

此时可打开 mobaxterm 新建session 输⼊192.168.100.106 连接

  1. 安装 rsync yum -y install rsync
  2. 安装 nano yum -y install nano
  3. 安装 ntpd yum -y install ntp

  • 配置centos7
  1. 关闭防⽕墙，集群⼀般搭建在局域⽹内，公司在外部建⽴专业的防⽕墙，为了⽅便集群之间通信，请关闭集群中各节点的防⽕墙。

·在root⽤户下直接关闭防⽕墙 systemctl stop firewalld.service

· 禁⽌firewall开机启动 systemctl disable firewalld.service

· 关闭SELinux命令（永久关闭） nano /etc/selinux/config 注释掉下面两行：

 #SELINUX=enforcing

 SELINUX=disabled

 #SELINUXTYPE=targeted

重启

  • 查看防⽕墙状态 systemctl status firewalld

  1. 在/opt ⽬录下创建 module（程序⽂件夹）、software（安装包） ⽂件夹

[root@hadoop100 ~]# mkdir /opt/module

[root@hadoop100 ~]# mkdir /opt/software

2**.**在Hadoop106节点安装JDK、Hadoop

·安装JDK

  1. 将jdk-8u341-linux-x64.tar.gz 利⽤xftp上传到/opt/software

  2. 解压jdk到/opt/module⽂件夹

[root@hadoop100 ~]# tar -zxvf /opt/software/jdk-8u341-linux-x64.tar.gz -C /opt/module/

  1. nano /etc/profile.d/my_path.sh ⽂件，输⼊
#JAVA_HOME

export JAVA_HOME=/opt/module/jdk1.8.0_341

export PATH=$PATH:$JAVA_HOME/bin
  1. source ⼀下 /etc/profile ⽂件，让新的环境变量 PATH ⽣效

[root@hadoop100 ~]# source /etc/profile

  1. 检验⼀下成功不

[root@hadoop100 ~]# java -version

·安装Hadoop

  1. 将hadoop-3.3.3.tar.gz利⽤xftp上传到/opt/software

  2. 解压hadoop到/opt/module⽂件夹

[root@hadoop100 ~]# tar -zxvf /opt/software/hadoop-3.3.3.tar.gz -C /opt/module/

  1. 在 /etc/profile.d/my_path.sh ⽂件，加⼊下⾯内容
#HADOOP_HOME

export HADOOP_HOME=/opt/module/hadoop-3.3.3

export PATH=$PATH:$HADOOP_HOME/bin

export PATH=$PATH:$HADOOP_HOME/sbin

  1. source ⼀下 /etc/profile ⽂件，让新的环境变量 PATH ⽣效

[root@hadoop100 ~]# source /etc/profile

  1. 测试

[root@hadoop100 ~]# hadoop version

·新增ens37网卡

  1. 关闭 hadoop106

  2. 右击虚拟机选项卡 -> 配置 -> 添加 -> ⽹络适配器 -> 改成桥接

  3. 启动 hadoop106

  4. nmcli connection add type ethernet con-name ens37 ifname ens37 autoconnect yes

  5. nano /etc/sysconfig/network-scripts/ifcfg-ens37

  6. 更改 ifcfg-ens37 ⽂件

TYPE=Ethernet

PROXY_METHOD=none

BROWSER_ONLY=no

BOOTPROTO=static

DEFROUTE=yes

IPV4_FAILURE_FATAL=no

IPV6INIT=yes

IPV6_AUTOCONF=yes

IPV6_DEFROUTE=yes

IPV6_FAILURE_FATAL=no

IPV6_ADDR_GEN_MODE=stable-privacy


![img](https://img-blog.csdnimg/img_convert/09ec2dccb226aaf798405015e30061fe.png)
![img](https://img-blog.csdnimg/img_convert/63369702061270a100f72bf4d6659353.png)

**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化资料的朋友，可以戳这里获取](https://bbs.csdn/forums/4f45ff00ff254613a03fab5e56a57acb)**


**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**

[外链图片转存中...(img-rj9cyT7F-1715324696649)]

**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化资料的朋友，可以戳这里获取](https://bbs.csdn/forums/4f45ff00ff254613a03fab5e56a57acb)**


**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**

本文标签： 节点自用集群环境内容

版权声明：本文标题：Hadoop增加新节点环境配置（自用）_hadoop集群添加新的节点需要改什么内容(1) 内容由热心网友自发贡献，该文观点仅代表作者本人， 转载请联系作者并注明出处：https://m.elefans.com/xitong/1725845092a1045313.html， 本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如发现本站有涉嫌抄袭侵权/违法违规的内容，一经查实，本站将立刻删除。