大数据_Flink_流式处理_简介_认识一下什么是BI中的ETL---Flink工作笔记0005
发布日期:2021-06-29 17:47:02
浏览次数:3
分类:技术文章
本文共 351 字,大约阅读时间需要 1 分钟。
技术交流QQ群【JAVA,C++,Python,.NET,BigData,AI】:170933152
ETL开发工程师
extraction是抽取数据,就是可以从关系型数据库,表,也可能是文本文件,
或者一个程序API接口.
transformation在bi商业智能中指的是数据的清洗,合并拆分 以及加工.
数据逻辑处理的一个过程,把数据转换为一个符合业务模型,规范型的一个数据.
不管是大数据,还是小数据,都是把数据从不规范,转换成规范数据的一个过程.
然后loading是把分析后的数据,存到目标表中,这个表有可能就是数据来源表.
还有一种ETL是数据迁移,以及多数据源的迁移.
这个过程中,如果对一些项目的数据,比如从老的项目迁移到新的项目可能是很难的,
有些项目会涉及到写上千个存储过程等等.
转载地址:https://credream.blog.csdn.net/article/details/113139602 如侵犯您的版权,请留言回复原文章的地址,我们会给您删除此文章,给您带来不便请您谅解!
发表评论
最新留言
很好
[***.229.124.182]2024年04月27日 14时13分52秒
关于作者
喝酒易醉,品茶养心,人生如梦,品茶悟道,何以解忧?唯有杜康!
-- 愿君每日到此一游!
推荐文章
awk 的内置变量 NF、NR、FNR、FS、OFS、RS、ORS
2019-04-29
CentOS系统内核升级攻略
2019-04-29
linux系统时区修改(Debian的主机和docker)
2019-04-29
docker-compose 安装
2019-04-29
crontab 定时任务
2019-04-29
查看docker veth pair与宿主机上网卡的对应关系
2019-04-29
使用 GitLab CI 进行持续集成的一些踩坑
2019-04-29
企业云盘给贸易业带来新的效益
2019-04-29
Linux入门常用命令
2019-04-29
Spring整理
2019-04-29
SpringMvc加强
2019-04-29
初识Vue全家桶 Nuxt.js(一)
2019-04-29
基本路由及动态路由(二)
2019-04-29
视图:默认模板+默认布局(自定义布局)+nuxt.js页面(三)
2019-04-29
基于nuxt下asyncData,fetch发送axios请求(四)
2019-04-29
插件机制+自定义axios(五)
2019-04-29
Redis的学习之路
2019-04-29