博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
ubuntu14.04下安装Hadoop
阅读量:6040 次
发布时间:2019-06-20

本文共 1349 字,大约阅读时间需要 4 分钟。

hot3.png

一、环境准备

1、ubuntu 14.04 

190539_YNZz_2391658.png

2、hadoop 2.7.2

文件较大(202M),选择一种下载方式下载。下载地址:

3、jdk 1.7以上

安装方法(若已安装,请忽略):

二、安装Hadoop

1、安装命令

sudo addgroup hadoopsudo adduser -ingroup hadoop hadoop        tar xzf hadoop-2.4.0.tar.gz        mv hadoop-2.7.2 /usr/local/hadoop chmod 774 /usr/local/hadoop

编辑:/etc/sudoers,为hadoop用户添加root权限。

210056_4cEn_2391658.png

切换hadoop账户登陆系统。

2、配置hadoop

1)jdk安装路径获取

首先需要获取jdk安装路径,通过以下命令获取:

update-alternatives --config java

193129_Z0dD_2391658.png

2)配置.bashrc

编辑.bashrc,并添加如下配置:

export JAVA_HOME=/usr/lib/jvm/java-8-oracleexport HADOOP_INSTALL=/usr/local/hadoopexport PATH=$PATH:$HADOOP_INSTALL/binexport PATH=$PATH:$HADOOP_INSTALL/sbinexport HADOOP_MAPRED_HOME=$HADOOP_INSTALLexport HADOOP_COMMON_HOME=$HADOOP_INSTALLexport HADOOP_HDFS_HOME=$HADOOP_INSTALLexport YARN_HOME=$HADOOP_INSTALLexport HADOOP_COMMON_LIB_NATIVE_DIR=$HADOOP_INSTALL/lib/nativeexport HADOOP_OPTS="-Djava.library.path=$HADOOP_INSTALL/lib"

最后使配置立即生效:source ~/.bashrc

193529_0zA9_2391658.png

3)编辑hadoop-env.sh

vim /usr/local/hadoop/etc/hadoop/hadoop-env.sh

4)修改hadoop-env.sh中jdk_home的配置

193941_34Tq_2391658.png

5)保存并退出

三、测试Hadoop

下面通过执行hadoop自带实例WordCount验证是否安装成功。

1、/usr/local/hadoop路径下创建input文件夹 

2、拷贝README.txt到input 

3、执行WordCount命令

bin/hadoop jar share/hadoop/mapreduce/sources/hadoop-mapreduce-examples-2.7.2-sources.jar org.apache.hadoop.examples.WordCount input output

以上步骤命令:

194622_Wz4A_2391658.png

4、执行过程

194829_lev9_2391658.png

5、执行结果

194858_KygO_2391658.png

说明我们的hadoop 2.7.2已经安装成功了。

 

转载于:https://my.oschina.net/u/2391658/blog/700830

你可能感兴趣的文章
java 获取系统当前时间的方法
查看>>
Ubuntu 10.04升级git 到1.7.2或更高的可行方法
查看>>
Spring Security4实战与原理分析视频课程( 扩展+自定义)
查看>>
第一周博客作业
查看>>
thinkpython2
查看>>
oracle recyclebin与flashback drop
查看>>
svmlight使用说明
查看>>
Swing 和AWT之间的关系
查看>>
Mysql设置自增长主键的初始值
查看>>
Android计时器正确应用方式解析
查看>>
获取post传输参数
查看>>
ASP生成静态页面的方法
查看>>
HDU 1325 Is It A Tree? 判断是否为一棵树
查看>>
Shell命令-文件压缩解压缩之gzip、zip
查看>>
个人总结
查看>>
uva 673 Parentheses Balance
查看>>
Bzoj 2252: [2010Beijing wc]矩阵距离 广搜
查看>>
css 禁止选中文本
查看>>
bzoj2165
查看>>
算术运算表达式正则及分析
查看>>