Hadoop学习笔记(7)Hadoop解压安装以及配置

一、安装Hadoop之前说明

安装Hadoop需要在官网把Hadoop文件下载好,并且上传到Linux中。上传步骤请参考:
Hadoop学习笔记(6)如何使用Xshell从Windows向Linux上传文件

二、解压安装Hadoop

输入命令查看文件存放

开始解压安装

解压完毕后,可以查看到hadoop-3.1.4的信息

三、配置环境变量hadoop-env.sh

打开hadoop-2.5.2/etc/hadoop目录,然后编辑hadoop-env.sh

在图中位置加入一句代码,然后保存退出

Hadoop学习笔记(7)Hadoop解压安装以及配置
YARN环境变量配置完毕。

五、配置核心组件core-site.xml

core-site.xml主要内容:用于定义系统级别的参数,如HDFS URL、Hadoop的临时目录等。

在每个几点创建一个hadoopdata目录,用于存放数据

打开hadoop-2.5.2/etc/hadoop目录,然后编辑core-site.xml

编辑如下内容

Hadoop学习笔记(7)Hadoop解压安装以及配置

七、配置资源管理和任务调度yarn-site.xml

yarn-site.xml主要内容:配置 ResourceManager,NodeManager 的通信端口,web监控端口等。

打开hadoop-2.5.2/etc/hadoop目录,然后编辑yarn-site.xml

编辑如下内容

来源:柏冉看世界

声明:本站部分文章及图片转载于互联网,内容版权归原作者所有,如本站任何资料有侵权请您尽早请联系jinwei@zod.com.cn进行处理,非常感谢!

上一篇 2021年1月2日
下一篇 2021年1月2日

相关推荐