企业可以不要大数据但必须要有数据中台

”
139*** 鼎点网络
2015年，马云拜访名为Supercell的芬兰游戏公司，虽然这家公司仅有180人，但是他们开发新游戏的速度特别快，公司旗下游戏DAU已经突破1亿。2016年，腾讯以86亿美元收购了其84%的股权，这不仅是腾讯历史上，也是近年全球手机游戏行业额的并购。这家“小公司”为什么这么牛逼?因为他们把游戏需要的通用数据、素材都放在一起供大家使用，实现了业务互通，大大提高了每个团队的效率。不久之后，阿里就成立了数据中台的团队，随后国内的公司也都纷纷效仿，开始架构属于自己的数据中台。

什么是数据中台：

基于那次拜访产生的灵感，阿里提出了“大中台，小前台”的概念，即将业务数据化，数据业务化，真正实现数据和业务进行打通。阿里数据技术和产品部门的负责人曾说过：“很多人会把数据比作石油，马云也说过，阿里巴巴要成为全球电子商务的水电煤。我们现在搭建的数据中台，就是希望扮演发电厂的角色。”

数据中台不等于数据平台，差别之一就在于是否具有业务属性，这也是数据中台出现的一个非常重要的原因，它可以支撑多个前台业务，使得数据不再是各前端业务独立管理，真正实现不同业务之间的互通互融。

我就曾经参加过的一个项目给大家讲讲数据中台包含那些东西。

1.数据采集

为数据中台提供汇集数据的能力，应提供统一的数据获取接入方式，数据来源包括内部数据和外部数据，数据类型应支持结构化和非结构化数据采集。传统的ETL工具仍然可以复用，实现数据采集、转换、加载等关键处理过程。

2.数据计算

为数据中台提供统一的大数据计算能力，针对不同大数据处理场景，所需提供的数据计算能力也不同，一般主要包括批量离线计算、内存计算、在线流式计算等，可用到的技术有数据挖掘，大数据分析，云计算等。

3.数据存储

数据中台中全域数据的存储中心，按照不同的数据类型，可以采用图中一种或多种数据存储系统的“混搭”架构。传统数据仓库(如DB2/ORACLE)是为稳定的数据存储方式，承载着及时性、准确性要求高的企业核心应用。分布式关系数据库，也常简称为MPP数据库，相较于传统的关系型数据库，具有高性能处理能力、高数据吞吐能力的优势。

NoSQL分布式数据库属于非关系型数据库管理系统，在大数据简单存取上具备关系型数据库无法比拟的性能优势。分布式文件系统(HDFS)是当前常见的大数据存储方式，它具极高的性价比，扩展性强。数据湖作为一种新的存储大量复杂格式数据，避免企业数据孤岛化的数据架构方案，可用来将不同结构的数据统一聚合和存储。