介绍2019年3月,文章《数据中台已成为下一个风口,它会颠覆数据工程师的工作么?》获得100000+浏览量,也就是10000字左右,干货多,技术文章难得。业界称2019年为数据中心元年,为什么数据中心会备受关注,2019年我做了一个数据中心行业调查,目前已经获得463份有效问卷。基于对本次问卷调查结果的分析,以下简称《2019数据中台行业调研报告》,总结过去一年,我们在国内市场的企业间进行数据交换,与各类相关峰会交流,线下社群活动等。我们发现了台湾企业数据的发展。七个趋势。趋势一:从概念热点到建设实施,数据中心在2019年占据了绝对的市场热点。根据百度指数显示,自2018年年中以来,数据中心的搜索热度持续走高,2019年6月,它超越了数据仓库。有趣的是,自2013年以来,数据仓库首次呈现下降趋势。相比之下,数据中心却在持续上涨,已经超越了数据仓库的历史峰值。同时观察数据中心和数字化转型的搜索热度,我们发现数据中心的搜索热度在2019年2月就超过了数字化转型,之后一路走高。2019年被业界称为数据中心元年。不少企业通过这个热门概念获得了市场关注度和流量,不少企业在资本寒冬中获得了投资。由此可见,2019年的数据中心真的很火。但是,当我们参考新技术采纳曲线来看数据中心的搜索曲线时,会发现当前的数据中心正处于一个被寄予厚望的高速爬坡期。数据中心的火爆体现了企业对数据驱动的期待,承载着企业智能化的愿景。结合《2019数据中台行业调研报告》的数据,26%的企业已经在实施数据中台,56.4%的企业正在考虑,只有17.3%的企业没有考虑。我们预计,2020年,数据中台将从市场热点走向实践,许多企业将以数据中台作为数字化转型的切入点,实施建设。第二个趋势是数据中心平台将从零售业扩展到四大传统行业。最早提出数据中心平台的是阿里。阿里的主要场景是零售。因此,行业内以数据中心平台为主要产品和服务的阿里系企业,主要行业也是零售业。以下是广为流传的阿里数据中心架构图:从这里可以看出,阿里数据中心是以零售为主,以营销和用户为主。这与阿里的商业模式有关。阿里的前端业务,淘宝、天猫、聚划算等,都是零售场景聚合。它们之间存在高度的可重用性,因此OneID、OneData和OneService理论上是可以拉取和复制的。随着传统行业数字化意识的提升,更多的传统企业也在参考数据中心的概念,希望通过数据中心充分打通企业内外部数据,识别和挖掘更多商业价值场景。通过我们的观察,以下四个行业将加大对数据平台建设的投入:金融企业这两年开始重视数据资产。民生银行制定了“科技+数据”双轮驱动的改革方案,构建数据中台,希望改变传统数据后台的交付模式,形成横向平台加垂直的矩阵式交付组织结构。业务领域模型。打造数据产品,以产品化的方式输出数据能力,为“开放银行”的理念积累数据产品内容[1]。招商银行于2019年12月公布了全新的信息化架构,新设数据资产与平台研发中心。数据资产与平台研发中心定位于数据中心,推动和赋能全行大数据应用。这在银行业尚属首例,凸显出招商银行对大数据挖掘分析与应用的重视。我们预计,2020年金融行业,尤其??是股份制银行、中小银行、保险公司,将挖掘和利用数据价值,驱动数据平台的投资建设,从监管驱动转向价值驱动数据场景挖掘与使用。2019年对于车企来说是艰难的一年。在全球经济放缓、汽车销售低迷、贸易争端不断的多重环境下,全球主要车企纷纷削减成本加速转型。很多车企都在思考如何让车企的营销、出行、车联网、制造、研发设计、供应链数据自由流动,提升管理效率,提升用户体验,加速服务和产品创新,实现数据。问题。因此,2020年,汽车数据和用户数据的利用将成为车企数据中心建设的重心。近年来,房地产行业从市场、政策和舆论环境等方面都发生了很大的变化。在增量市场萎缩的今天,为了开拓新的业务。房地产开发商也开始探索更多业态,也更加注重股市的精细化运作。房地产行业已从混混跑马圈地的跑马圈地进入精细化运营阶段。如何从房地产投资、设计开发、造价招投标、工程与质量、营销、策划运营等各个环节收集并利用好数据,是房地产企业在基础建设之后重点关注的领域。近五年信息化建设。房地产企业将成为2020年数据中心建设的新战场。制造业2019年,我们接触了很多传统制造业。工业4.0和智能工厂成为制造业下一阶段的建设目标。然而,当我们仔细分解这些新概念和新趋势时,我们会发现,一切的根源都是数据。如何收集数据、建模数据、拉通数据、使用数据,工业4.0的核心是数据[3]。2020年,我们预测制造业的数据中心将逐渐兴起,从企业层面组织研发、生产、营销等领域的数据,打造智能工厂的核心大脑。Trend3数据中台已经从技术平台演变成组织单元《2019数据中台行业调研报告》选项2.8,64%的受访者认为数据中台是运营数据服务的平台,其商业价值是可以衡量的。从这个数据来看,与业务中台不同,数据中台不仅仅是一个技术平台,更是一个组织单元。虽然2019年很多企业的数据中台建设还是以技术平台项目的形式启动,但是想要让数据发挥最大的作用,带动企业的业务运营,数据中台一定会演变成企业单位的组织。数据中心最终将是企业的一个业务部门,一个以数据为原材料,生产、加工、销售、运营数据产品的业务部门。一个形象的比喻,数据中心就是企业的数据服务工厂。《2019数据中台行业调研报告》选项2.1,68.4%的受访者认为数据中心就是数据服务工厂。数据中心作为数据服务工厂,将是企业中的一个实体业务部门,它的产品是数据服务,它的用户可以是业务应用部门、最终消费者和用户。数据中心部门的典型设置可以是以下结构:数据治理与开发团队、数据中心开发团队、数据服务开发团队和数据中心运营团队。趋势4从技术需求驱动到业务场景驱动《2019数据中台行业调研报告》第2.5个选项,57%的受访者认同数据平台的建设应该从业务场景(业务价值)的探索开始。这一结果表明,数据中台与传统的数据仓库、大数据平台最大的区别在于,数据中台更贴近业务,由业务场景驱动,而非技术需求。因此,数据中台的建设应从业务场景蓝图出发,挖掘和识别数据利用的价值场景,根据企业的业务战略目标进行优先排序,进而对不同业务价值的数据和技术需求进行抽象建模场景化数据服务目录在业务场景驱动下逐步快速迭代构建。趋势5从数据仓库和大数据平台向数据中台转型将成为数据中台建设的重要领域《2019数据中台行业调研报告》第十题显示,55%的企业已经拥有数据仓库,3%的企业正在建筑。在这种情况下,很大一部分场景是从数据仓库乃至大数据平台到数据中心的改造和改造。此类项目需求将成为众多企业的真实需求,成为2020年台湾市场的亮点。趋势六:从封装产品向演进定制化2019年,众多数据中心厂商获得市场青睐,可见数据中心的需求非常旺盛。但是,数据中心是否可以量产,成为一个打包的软件产品呢?《2019数据中台行业调研报告》选项2.9显示,58%的受访者认为数据中心没有成熟的单一产品,需要根据企业的具体情况进行衡量。定制。因为数据中台是业务场景驱动的,是企业运营数据的业务系统,所以数据中台不是基础技术平台。与每个企业的历史、行业背景、发展阶段、业务特点不同。数据平台和数据仓库,数据中心更贴近业务,所以数据中心会有每个企业的个体特点,所以要根据企业的具体情况量体裁衣。趋势七数据治理将走向价值驱动,聚焦场景。《2019数据中台行业调研报告》选项2.21显示,69%的受访者认为数据治理应该结合业务进行,少看标准,多看场景。过去,数据治理的模型如下图所示:在瞬息万变的数字时代,业务创新和静态数据质量本身就是一对矛盾体。企业追求的是商业价值,而不仅仅是保证静态数据。因此,我们认为2020年传统的数据治理将被以场景为中心的价值驱动的精益数据治理体系所取代。典型的方式如下图所示:总结数据中台正在取代ERP系统,成为一个重要的开端是企业数字化转型的切入点,是推动企业充分利用数据、挖掘数据资产价值的载体。数据中心的建设是企业转型的必然趋势。不同的公司在不同的阶段有不同的施工方法。数据中心的建设必须立足场景,高于场景,然后从场景开始建设。
