《2019年如何建设大数据中台-从0到N建立大数据中台.pdf》由会员分享,可在线阅读,更多相关《2019年如何建设大数据中台-从0到N建立大数据中台.pdf(15页珍藏版)》请在三个皮匠报告上搜索。
1、01为什么要建立大数据中台技术大数据中台建立参考模式与思考大中台,小前台场景下技术人员该做些什么0203从0到N建立大数据中台信息化数字化的转变导致中台出现所有的企业都会成为数字企业数据人工智能成为新的基础设施数字用户资产是企业的核心资产中台是技术从后台走向前台的过渡阶段让业务还给业务,提高的业务效率FrontOfficeMiddleOffice中台业务,顾名思义,是承接前台业务和后台业务的桥梁。一方面为前台人员提供决策支持,可以让他们心无旁骛地为公司赚取利润,另一方面则是监测前台业务流程,降低各类风险事件的发生几率。前台部门,面对客户或者为客户创造产品和客户进行交易的地方,和客户进行直接的沟
2、通互动。BackOffice投资银行的后台指的是所有幕后的职能岗位。后台专业人员从事结算工作,保证支付得以进行。也可以j技术、人力、合规等部门。后台中台前台赚钱的支持的支持更快赚钱的从大数据平台到大数据中台的转变大数据平台的痛点大数据项目启动难大数据平台建设周期长,成本高人员互联网运营经验不足大数据项目执行难数据源纷繁复杂原有的系统多部门协调沟通数据治理问题大数据项目效果体现难大数据如何解决互联网运营问题大数据系统建设结果是更多的BI报表大数据建设ROI无法衡量从大数据平台到数据中台是一次从技术到业务的飞跃大数据平台+ETL任务+实时数据流让业务还给业务,提高的业务效率实时数据分析人工智能、增
3、强智能数据治理,在业务端,而不是技术端梳理让业务人员、数据科学家直接看到反馈,而不是传统的软件加工方式Openresty(Lua)N个源数据库自主研发展示工具(E-chart/D3等)数据处理调度自主工具(可以调度资源)脚本Python自主存储/Hadoop/GPStorm或其他流计算主数主数据管据管理理元数元数据管据管理理挖掘引擎/推荐引擎Kafka自主优化SparkKylin/Druid/Clickhouse/Presto 自主平台A?大数据中台模式大中台模式和深中台模式BAT中台模式,更广泛的数据中台小厂中台模式IaaSPaaS业务1业务1开发业务2业务2开发业务3业务3开发业务4业务4
4、开发IaaSPaaS1业务1PaaS2业务2PaaS3业务3PaaS4业务4大数据深中台模式“数据河”理论数据河中流淌着是单一数据模型,数据产生直接实时流向使用者不同的数据河,支撑起企业内部数据水生态IOTA架构是一个典型的深中台数据架构去ETL化固定数据模型在数据产生时规整原子口径业务口径交还给业务人员支持边缘计算与即时反馈主-谓-宾模型易观ARGO免费用户数据中台样例免费&非核心部分开源私有化部署支持用户账号跨端打通支持实时复杂计算和下钻分析支持二次开发在数据产生时规整原子口径业务口径交还给业务人员数据中台造就数据龙式新物种数据中台工程师+=大数据工程师数据分析师数据中台工程师增加数据技术
5、广度之外,更加强前台业务理解,让数据技术人员可以成为跨领域的“龙”式新物种,实现人员的技术业务结合与飞跃。注意力运营:这类产品都是试图最大化用户在产品上花费的时间。如:媒体、游戏以及任何通过广告变现的产品都属于这类。关注指标:粘性UV、PV访问时长、访问频次等用户到访周期、访问间隔等交易类运营:这类产品帮助用户做出购买决定。如:电子商务平台、各种交易平台、生活服务、SaaS等等,都属于这类。关注指标:交易、交易活跃度新商品比例商品被搜索比例GMV、ARPU效率类运营:这类产品帮助用户创建了一种简单可靠的方式来完成现有的任务或工作流程。如:工具类、B2B等,都属于这类。关注指标:用户使用深度指标
6、用户完成一次工作流的数量用户完成一次工作流的时间数字化数字化产品不只是产品不只是APP,也可以是一个,也可以是一个订阅号、小程序、或者订阅号、小程序、或者APP当中的某一个当中的某一个栏目等等栏目等等龙式新物种数据中台工程师必备技能之商业模式导流角色导流角色变现角色变现角色护城河角色护城河角色牺牲角色牺牲角色导导流流能能力力变现能力变现能力医 食 住 行玩金融L2L1X:变现能力,结合财务报表相关业务收入现状及数字用户资产规模等设定指标值。Y:导流能力,结合数字用户资产、重合度、TGI数值设定指标值。C0:代表导流和变现能力等于设定衡量值L1:代表变现能力偏向线L2:代表导流能力偏向线核心应用
7、层培育应用层C0龙式新物种数据中台工程师必备技能流量模式探索期导入期成长期成熟期用户创造价值产品阶段验证产品MVP有效性获取种子用户提升产品用户体验产品推广,拉新获客,实现用户规模增长交付产品价值,实现营收规模化实现利润最大化?1-2、找到了愿意尝试的目标人群的代表用户2-3、找到用户愿意采纳和付费的解决方法3-4、打造完成有吸引力、竞争力的产品4-5、用户、产品良性相互促进,实现自然成长5-6、可持续规模化的商业模式,追求利润龙式新物种数据中台工程师必备技能数据分析体系大数据中台的建设其实是人的变化你需要中台么?深中台/浅中台数据中台选型人员+思路的变革DoCheckActionPlan数月DoCheckActionPlan数月DoCheckActionPlan数月DoCheckActionPlan数月传统迭代验证周期传统迭代验证周期精益数据分析的迭代验证周期精益数据分析的迭代验证周期PDCA数天PDCA数天PDCA数天PDCA数天PDCA数天PDCA数天