网站建设捌金手指下拉二五,千峰培训,中国商业网点,网站建设非功能需求一、需求描述
给Hadoop集群动态扩容一个节点 那么#xff0c;这个节点是全新的#xff0c;我们需要做哪些准备工作#xff0c;才能将它融入集群了#xff1f;
二、初始化配置
1、修改IP和hostname
vim /etc/sysconfig/network-scripts/ifcfg-ens33
vim /etc/hostname2、…一、需求描述
给Hadoop集群动态扩容一个节点 那么这个节点是全新的我们需要做哪些准备工作才能将它融入集群了
二、初始化配置
1、修改IP和hostname
vim /etc/sysconfig/network-scripts/ifcfg-ens33
vim /etc/hostname2、复制102的hadoop、jdk安装包和环境变量文件
复制安装包可以用普通账号进行复制
scp -r module/* atguiguhadoop105:/opt/module/复制环境变量文件必须用root权限进行复制
sudo scp /etc/profile.d/my_env.sh roothadoop105:/etc/profile.d/my_env.sh新节点上
source /etc/profile3、新节点上删除data和logs目录
cd /opt/module/hadoop-3.1.3
rm -rf data/ logs/4、配置各个节点到新增节点的免密登陆
102、103、104到新节点的免密登陆
cd /home/atguigu/.ssh
ssh-copy-id hadoop105ssh atguiguhadoop105 验证免密登陆5、修改Hadoop集群配置文件
在workers文件中加入新节点域名 在whitelist文件中加入新节点域名 在blacklist文件中确保没有新节点域名
cd /opt/module/hadoop-3.1.3/etc/hadoop
vim workers
vim whitelist
vim blacklist6、修改常用的集群工具文件
这里主要是修改jpsall、xsync文件 加入新节点的域名
cd /home/atguigu/bin/
