记录hadoop3.1.3搭建遇到的各种坑

一:准备三台虚拟机,配置同步

1 创建模板机,关闭防火墙、静态IP、主机名称

这里三台虚拟机使用4g4核50g内存,centos7,主机名为hadoop100,IP地址192.168.88.100,root密码为000000;

修改主机名

修改静态IP

记录hadoop3.1.3搭建遇到的各种坑

修改脚本 xsync 具有执行权限
[atguigu@hadoop102 bin]$
(c)测试脚本
[atguigu@hadoop102 ~]$
(d)将脚本复制到/bin中,以便全局调用
[atguigu@hadoop102 bin]$
(e)同步环境变量配置(root所有者)
[atguigu@hadoop102 ~]$
注意:如果用了sudo,那么xsync一定要给它的路径补全。
让环境变量生效
[atguigu@hadoop103 bin]$
[atguigu@hadoop104 opt]$

2.6 配置免密登录

(1)生成公钥和私钥
[atguigu@hadoop102 .ssh]$ pwd
/home/atguigu/.ssh

[atguigu@hadoop102 .ssh]$
然后敲(三个回车),就会生成两个文件id_rsa(私钥)、id_rsa.pub(公钥)
(2)将公钥拷贝到要免密登录的目标机器上
[atguigu@hadoop102 .ssh]$
[atguigu@hadoop102 .ssh]$
[atguigu@hadoop102 .ssh]$
注意:
还需要在hadoop103上采用atguigu账号配置一下无密登录到hadoop102、hadoop103、hadoop104服务器上。
还需要在hadoop104上采用atguigu账号配置一下无密登录到hadoop102、hadoop103、hadoop104服务器上。
还需要在hadoop102上采用root账号,配置一下无密登录到hadoop102、hadoop103、hadoop104;

2.7配置集群

(1)核心配置文件
配置core-site.xml
[atguigu@hadoop102 ~]$ cd H A D O O P H O M E / e t c / h a d o o p [ a t g u i g u @ h a d o o p 102 h a d o o p ] HADOOP_HOME/etc/hadoop [atguigu@hadoop102 hadoop] HADOOPH/span>OME/etc/hadoop[atguigu@hadoop102hadoop] vim core-site.xml
文件内容如下:

<ml version=”1.0″ encoding=”UTF-8″gt; <ml-stylesheet type=”text/xsl” href=”configuration.xsl”gt;

来源:澜的大数据

声明:本站部分文章及图片转载于互联网,内容版权归原作者所有,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2022年5月4日
下一篇 2022年5月4日

相关推荐