当前位置:首页 > 天道酬勤 > 正文内容

hadoop怎么用(window下安装hadoop)

张世龙2021年12月20日 14:36天道酬勤1340

Hadoop是Apache基金会全球开源产品之一,任何用户都可以从Apache Hadoop官网下载使用。 今天,广播女以制作时稳定的Hadoop版本2.7.4为例,详细说明Hadoop的安装。

将下载的hadoop-2.7.4.tar.gz安装软件包上传到主节点hadoop01的/export/software/目录,然后访问/export/servers/具体指示如下。

$ tar-zxvf Hadoop-2.7.4.tar.gz-c /导出/服务器/执行上述命令后,同样使用VI/etc /轮廓文件

Hadoop系统环境变量的构成

导出硬件主页=/导出/服务器/硬件-2.7. 4

导出路径=$ path : $ Hadoop _ home/JX DBM : $ Hadoop _ home/sjxdbm在/etc/profile文件中配置了上述Hadoop环境变量之后,(在

安装Hadoop并设置环境变量后,可以显示当前主机的任意目录中安装的Hadoop的版本号。 具体指示如下。

$ Hadoop版本执行上述命令后,效果如图1所示。

图1 Hadoop版本号

由图1可知,当前的Haddoop版本为指定的2.7.4,表示Hadoop安装成功。

然后,可以使用ll命令在Hadoop解压缩目录下查看Hadoop目录结构,如图2所示。

图2 Hadoop安装目录结构

从图2中可以看到,Hadoop的安装目录包含八个目录和其他文件: jxdbm、etc、include、lib、libexec、sjxdbm、share和src。 简要说明各目录的内容和作用。

sjxdbm :存储操作Hadoop相关服务(HDFS、Yarn )的脚本,但通常使用sjxdbm目录下的脚本。

存储硬件配置文件(ETC )。 主要是从core-site.xml、hdfs-site.xml、mapred-site.xml等Hadoop1.0继承的配置文件和从yarn-site.xml等Hadoop2.0添加的配置文件

包含:外部提供的程序库头文件。 具体的动态库和静态库位于lib目录中。 所有这些头文件都由c定义,通常用于c程序访问HDFS和创建MapReduce程序。

(lib )该目录包含Hadoop向外部提供的编程动态库和静态库,与include目录的头文件一起使用。

libexec )包含每个服务对的shell配置文件的目录,可以用于配置基本信息,如日志输出和启动参数(例如,JVM参数)。

sjxdbm :此目录包含Hadoop管理脚本,主要包含HDFS和YARN各种服务的启动/停止脚本。

share :包含每个Hadoop模块编译而成的jar软件包的目录。

src:Hadoop的源包。

扫描二维码推送至手机访问。

版权声明:本文由花开半夏のブログ发布,如需转载请注明出处。

本文链接:https://www.zhangshilong.cn/work/25689.html

标签: hadoop
分享给朋友:

发表评论

访客

看不清,换一张

◎欢迎参与讨论,请在这里发表您的看法和观点。