博客
关于我
强烈建议你试试无所不能的chatGPT,快点击我
hadoop 安装2
阅读量:7106 次
发布时间:2019-06-28

本文共 1127 字,大约阅读时间需要 3 分钟。

hot3.png

前面我们讲到hadoop 安装的环境

现在正是安装下hadoop

安装前,我们先进入hadoop用户下面

把下载好的hadoop安装包,放入/home/hadoop2

cp /opt/hadoop-2.7.3.tar.gz /home/hadoop2/

进行解压

tar xzvf hadoop-2.7.3.tar.gz

然后配置hadoop环境变量

vim /etc/profile

export JAVA_HOME=/home/jdk1.8.0_74

export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$JAVA_HOME/bin:$JAVA_HOME/jre/bin:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
export HADOOP_HOME=/home/hadoop2/hadoop-2.7.3

配置完后用  source /etc/profile  执行下让我们配置的环境变量生效

修改hadoop-2.7.3文件的权限 

hadoop2代表用户名称

hadoop-2.7.3代表文件夹名称

chown -R hadoop2:hadoop2  /home/hadoop2/hadoop-2.7.3

修改hadoop-env.sh 启动hadoop时需要javaJDK环境,需要修改java_home路径

 vim etc/hadoop/hadoop-env.sh

export JAVA_HOME=/home/jdk1.8.0_74

这样我们就部署好单点的hadoop

我们使用  hadoop 命令可以看到启动成功了

143821_9KDM_1386996.png

我们使用hadoop fs -ls /

143905_e2nV_1386996.png

hadoop 会读到根目录 ,因为我们没有配置文件系统,hadoop默认读取的是localhost本地文件系统,现在hadoop 也可以执行文件

我们可以新建一个目录

mkdir inputfile

vim inputfile/test.txt

aaa bbb ccc dd aa

然后执行

hadoop jar /home/hadoop2/hadoop-2.7.3/share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.3.jar wordcount ./input ./out1

执行成功后我们进入out1目录下面会看到

part-r-00000 这个文件夹

144531_ZbHA_1386996.png

hadoop会帮我们算出用的个数

转载于:https://my.oschina.net/u/1386996/blog/852047

你可能感兴趣的文章
Java中的get()和set()方法
查看>>
hdoj 2795 Billboard 【线段树 单点更新 + 维护区间最大值】
查看>>
ZOJ 3827 Information Entropy (2014牡丹江区域赛)
查看>>
Cocos2D-X2.2.3学习笔记10(几何图形)
查看>>
SQL优化之OR
查看>>
Linux的启动流程
查看>>
隔代无法继承
查看>>
EZOJ #201
查看>>
蓝桥杯:算法提高 9-2 文本加密
查看>>
从零开始学android -- CilpDrawable 徐徐展开的风景
查看>>
js数组去重的方法
查看>>
LeetCode-151-Reverse Words in s String
查看>>
贴吧回复
查看>>
linux 获取本机外网IP
查看>>
CentOS 设置mysql的远程访问
查看>>
android学习笔记(一)
查看>>
web application 访问控制
查看>>
JWT能够干什么,不应该干什么?
查看>>
Python 读写文件 小应用:生成随机的测验试卷文件
查看>>
SwaggerUI--SosoApi
查看>>