hadoop学习(5)—— 伪分布下运行一个简单的实例
发布日期:2021-10-04 02:53:35 浏览次数:4 分类:技术文章

本文共 807 字,大约阅读时间需要 2 分钟。

1.创建目录

[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -mkdir /user[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -mkdir /user/cyhp[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -mkdir /user/cyhp/input[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -ls -R /[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -put etc/hadoop/*.xml /user/cyhp/input[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -ls /user/cyhp/input

2.本地运行,注销mapred-site.xml中关于yarn的配置

3.运行,

[root@hadoop-yarn hadoop-2.6.5]# bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.5.jar grep /user/cyhp/input /user/cyhp/output 'dfs[a-z.]+'

4.下载运行结果

[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -get /user/cyhp/output/part* .

5.获取运行结果

[root@hadoop-yarn hadoop-2.6.5]# cat part-r-00000 1   dfsadmin1   dfs.replication

转载地址:https://blog.csdn.net/leifeng_001/article/details/70184560 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:hadoop学习(6)—— 启动yarn
下一篇:hadoop学习(4)—— 伪分布式安装

发表评论

最新留言

关注你微信了!
[***.104.42.241]2024年04月15日 07时53分24秒

关于作者

    喝酒易醉,品茶养心,人生如梦,品茶悟道,何以解忧?唯有杜康!
-- 愿君每日到此一游!

推荐文章