Spark实时计算的开发平台RCS——阿里流式分析实战
发布日期:2021-11-09 06:55:56
浏览次数:13
分类:技术文章
本文共 415 字,大约阅读时间需要 1 分钟。
Spark开发者会将自己的代码完成开发并提交到yarn集群,之后任务的监控、报警、性能优化等都依赖于开发者本身;为spark开发者提供一套可以完成任务提交、数据接入、任务监控、任务报警、错误日志查看的一体化实时计算的开发平台realtime computing service。通过平台可以:
1. 自助本地提交任务;jar包版本维护在hdfs上
2. 数据接入覆盖主流中间件:kafka、metaq、tt和sls
3. 任务的监控、报警、日志处理
4. spark任务容灾
5. spark集群容灾
朱金清(穆公) 阿里巴巴高级数据专家,目前在阿里从事infrastructure数据的分析和开发工作,专注于spark的实时计算分析;最早加入阿里在淘宝/阿里数据库技术团队从事MySQL/HBase数据库的管理和数据开发. 他将在大会上分享这一演讲议题。
长按二维码识别关注
阅读原文( read more ) 浏览更多演讲议题转载地址:https://blog.csdn.net/zkh880loLh3h21AJTH/article/details/78100520 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!
发表评论
最新留言
做的很好,不错不错
[***.243.131.199]2024年03月28日 20时11分07秒
关于作者
喝酒易醉,品茶养心,人生如梦,品茶悟道,何以解忧?唯有杜康!
-- 愿君每日到此一游!
推荐文章
Redpine Signals RS9110-N-11-02 Wi-Fi解决方案
2021-06-30
不动产统一登记制度即将落地 房价调控能否得益?
2021-06-30
dp和px,那些不得不吐槽的故事——Android平台图
2021-06-30
专家:中国房地产泡沫崩溃时间就是今明二年
2021-06-30
佛山居住证办理(首次)
2021-06-30
上海鲲博通信技术有限公司(主要为用WINCE开发导航产品)
2021-06-30
给技术人上的管理课:控制和计划
2021-06-30
买房遇到的陷阱
2021-06-30
Google首席软件工程师Joshua Bloch谈如何设计一款优秀的API【附PPT】
2021-06-30
Wince6 RIL层移植
2021-06-30
基于IMX515EVK+WINCE6.0---支持PB6.0通过USB下载镜像文件
2021-06-30
给技术人上的管理课:平衡和集中
2021-06-30
给技术人上的管理课:激励与授权
2021-06-30
Windows Embedded Compact 2013升级:VS2013也能编译
2021-06-30
Nandflash 驱动移植
2021-06-30
s3c6410 开发板Linux系统支持 K9GAG08U0E的方法
2021-06-30
Maximum Allowed Error 7 错误解决
2021-06-30
WinCE启动失败的原因与解决办法分析
2021-06-30
基于Android Studio搭建Android应用开发环境
2021-06-30
基于Android Studio搭建hello world工程
2021-06-30