最近的工作中突然涉及到了很多大数据的东西,之前虽然也会做一些这方面内容但是更多的还是PC端使用SQL,,属于比较low的级别。。最近听了好多类似数据仓,数据中台,dataworks,数据架构等等各种词。有点懵,求大佬帮忙扫盲一下这些之间的关系:
1. 从平台或业务自动采集数据,经过数据清洗,储存然后到数据看板,这一套流程是不是就是数据中台的完整内容
2. 如果我想了解,并不是深入学习只是想对数仓有个基础的了解,应该看一些哪方面的内容。
3. 阿里云的dataworks既有数据存储又有quickbi看板,能叫是一个数据中台吗?
4. 数据架构只是指的数据仓库的一个搭建吗,还是说从原始数据到最后的看板呈现都属于数据架构的内容
问题有点低级,盼大佬指点一二
不是大佬,试着回答一下。
数据中台类似于一个齿轮,衔接前台和后台,在实际业务中,前台需要快速变化以相应用户的各种需求,而后台需要的是可靠、稳定性,所以前台和后台类似于两个不同转速的齿轮,存在无法匹配的问题,业务发展越快,这种失衡的问题就越严重。于是,数据中台这个概念被提出来了,将前台中的冗余的、重复的业务逻辑提取出来,放到数据中台,同时,将后台中需要频繁变化的业务也放到中台来,有了数据中台,就能够避免因业务频繁变化导致的前台越来越臃肿,也能够避免后台频繁改动而丧失它的稳定性。
数据仓库(Datawarehouse),是为了方便数据分析而建立的一个东西。例如,传统的数据库中有很多的表,在进行数据分析的时候,往往需要从不同的表,甚至从不同数据库中提取数据,非常麻烦,也很耗时。为了解决这个问题,那就把用到的多个表的数据放到一个表中(定时任务同步),当然,数据仓库中的数据会有数据冗余、重复等问题,但没关系,做数据分析的时候,做一下数据预处理,例如去重即可。
再来看这几个问题:
1、从平台或业务采集数据,经过数据清洗到数据看板,这属于数据分析的内容,跟数据中台没啥关系。
2、如果想了解数据仓库,建议看下Inmon大神的《数据仓库》。
3、阿里的dataworks属于底层的大数据平台,通过dataworks可以更轻松地构建数据仓库、数据中台等,quickbi属于另外一个产品,主要用于数据可视化分析。
4、搭建数据仓库只是数据架构中的一部分内容,数据架构包括大数据平台构建、搭建数据仓库、数据库的搭建等,不过很少有全才,都有偏向性,偏平台型的数据架构师,偏数仓型的数据架构师等。
您好,我是有问必答小助手,你的问题已经有小伙伴为您解答了问题,您看下是否解决了您的问题,可以追评进行沟通哦~
如果有您比较满意的答案 / 帮您提供解决思路的答案,可以点击【采纳】按钮,给回答的小伙伴一些鼓励哦~~
ps:问答VIP仅需29元,即可享受5次/月 有问必答服务,了解详情>>>https://vip.csdn.net/askvip?utm_source=1146287632