热线电话:13121318867

登录
2019-01-16 阅读量: 744
Hadoop的单机模式运行

Hadoop 默认模式为非分布式模式(本地模式),无需进行其他配置即可运行。非分布式即单 Java 进程,方

便进行调试。此处运行部分Hadoop自带MapReduce例子来验证Hadoop能够正常运行,同时对Hadoop中

MapReduce运行命令格式进行简单说明

在命令行中输入

rm -r ./output

在命令行中输入

出现下述结果则说明运行成功

注:若要重复运行程序,需更改输出文件夹位置,或清空原输出文件夹

删除原文件夹使用命令

附录一:Virtual Box下载与安装

1.Virtual Box下载

可从Virtual Box官方下载地址下载最新版本Virtual Box安装包(以5.2.4为例),官方下载地址同时提供

WindowsMac OS系统对应的版本。

2.Virtual Box安装

打开已下载安装程序

cd /usr/local/hadoop # 进入Hadoop安装文件夹mkdir ./input # 创建输入文件夹cp ./etc/hadoop/*.xml ./input # 将配置文件作为输入文件

./bin/hadoop jar ./share/hadoop/mapreduce/hadoop-mapreduce-examples-*.jar grep ./input ./output

'dfs[a-z.]+' # 运行MapReducegrep例子,筛选符合正则表达式dfs[a-z]+的单词并统计其出现的次

cat ./output/* # 查看运行结果

99.4764
1
关注作者
收藏
评论(0)

发表评论

暂无数据
推荐帖子