2019-01-16
阅读量:
744
Hadoop的单机模式运行
Hadoop 默认模式为非分布式模式(本地模式),无需进行其他配置即可运行。非分布式即单 Java 进程,方
便进行调试。此处运行部分Hadoop自带MapReduce例子来验证Hadoop能够正常运行,同时对Hadoop中
MapReduce运行命令格式进行简单说明
在命令行中输入
rm -r ./output
在命令行中输入
出现下述结果则说明运行成功
注:若要重复运行程序,需更改输出文件夹位置,或清空原输出文件夹
删除原文件夹使用命令
附录一:Virtual Box下载与安装
1.Virtual Box下载
可从Virtual Box官方下载地址下载最新版本Virtual Box安装包(以5.2.4为例),官方下载地址同时提供
Windows和Mac OS系统对应的版本。
2.Virtual Box安装
打开已下载安装程序
cd /usr/local/hadoop # 进入Hadoop安装文件夹mkdir ./input # 创建输入文件夹cp ./etc/hadoop/*.xml ./input # 将配置文件作为输入文件
./bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar grep ./input ./output
'dfs[a-z.]+' # 运行MapReduce中grep例子,筛选符合正则表达式dfs[a-z]+的单词并统计其出现的次
数
cat ./output/* # 查看运行结果
99.4764
1
1
关注作者
收藏
评论(0)
发表评论
暂无数据
推荐帖子
0条评论
0条评论
1条评论