hadoop学习(5)—— 伪分布下运行一个简单的实例
发布日期:2021-10-04 02:53:35
浏览次数:4
分类:技术文章
本文共 807 字,大约阅读时间需要 2 分钟。
1.创建目录
[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -mkdir /user[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -mkdir /user/cyhp[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -mkdir /user/cyhp/input[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -ls -R /[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -put etc/hadoop/*.xml /user/cyhp/input[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -ls /user/cyhp/input
2.本地运行,注销mapred-site.xml中关于yarn的配置
3.运行,
[root@hadoop-yarn hadoop-2.6.5]# bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.5.jar grep /user/cyhp/input /user/cyhp/output 'dfs[a-z.]+'
4.下载运行结果
[root@hadoop-yarn hadoop-2.6.5]# bin/hdfs dfs -get /user/cyhp/output/part* .
5.获取运行结果
[root@hadoop-yarn hadoop-2.6.5]# cat part-r-00000 1 dfsadmin1 dfs.replication
转载地址:https://blog.csdn.net/leifeng_001/article/details/70184560 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!
发表评论
最新留言
关注你微信了!
[***.104.42.241]2024年04月15日 07时53分24秒
关于作者
喝酒易醉,品茶养心,人生如梦,品茶悟道,何以解忧?唯有杜康!
-- 愿君每日到此一游!
推荐文章
【redis6.0.6】redis源码慢慢学,慢慢看 -- 第五天:adlist
2019-04-27
别抖,OK? 操作系统抖动现象、网络抖动与延迟、函数抖动之防抖与节流,串讲
2019-04-27
通过域名获取主机IP -- struct addrinfo
2019-04-27
【C++】算法集锦(8):从两数和问题拓展到一百数和问题
2019-04-27
【C++】算法集锦(9):背包问题
2019-04-27
【C++】算法集锦(10)通俗讲kmp算法
2019-04-27
【C++】算法集锦(12):高楼扔鸡蛋
2019-04-27
【图解】拥塞控制
2019-04-27
线程上下文切换
2019-04-27
什么是服务熔断?
2019-04-27
服务器压力过大?CPU打满?我来帮你快速检查Linux服务器性能
2019-04-27
C++面经总结之《Effective C++》(一)
2019-04-27
C++面经总结之《Effective C++》(二)
2019-04-27
这是什么“虎狼之词”啊!!!程序员的健康问题,看一线老中医怎么说!!!
2019-04-27
打开我的收藏夹 -- Python数据分析杂谈
2019-04-27
linux shell — 6.初识 EXT2 文件系统
2019-04-27
python - 【用户、商品】【购买、浏览】数据处理
2019-04-27
python - sql + pandas 与 sqlite 结合
2019-04-27
python - 使用sql 分析(06 - 15)国内各省GDP
2019-04-27