hadoop学习(6)—— 启动yarn
发布日期:2021-10-04 02:53:36 浏览次数:5 分类:技术文章

本文共 771 字,大约阅读时间需要 2 分钟。

1.为确保不出错误,设置yarn-env.sh中JAVA_HOME环境变量

JAVA_HOME=/opt/modules/jdk1.7.0_25

2.启动yarn

[root@hadoop-yarn hadoop-2.6.5]# sbin/yarn-daemon.sh start resourcemanager    [root@hadoop-yarn hadoop-2.6.5]# sbin/yarn-daemon.sh start nodemanager    [root@hadoop-yarn hadoop-2.6.5]# jps

3.yarn的web监控界面8088

4.启动yarn后,要让mapreduce跑在yarn上面
取消mapred-site.xml中的注释
默认值是本地 local
5.mapred-env.sh文件中也配置JAVA_HOME环境变量

export JAVA_HOME=/opt/modules/jdk1.7.0_25

6.运行测试示例

[root@hadoop-yarn hadoop-2.6.5]# bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.6.5.jar grep /user/cyhp/input /user/cyhp/output2 'dfs[a-z.]+'

7.进入WEB监控

http://{ip}:8088/cluster/apps

8.WEB监控中查看history

[root@hadoop-yarn hadoop-2.6.5]# sbin/mr-jobhistory-daemon.sh start historyserver

9.关闭服务,只要把所有 start 改成 stop 即可

转载地址:https://blog.csdn.net/leifeng_001/article/details/70184563 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!

上一篇:hadoop学习(7)—— 使用yarn运行mapreduce一个简单的wordcount示例
下一篇:hadoop学习(5)—— 伪分布下运行一个简单的实例

发表评论

最新留言

能坚持,总会有不一样的收获!
[***.219.124.196]2024年04月15日 00时38分17秒