1、华为云 江2023年317ArchSummit全球架构师峰会华为数智融合技术分享个介绍进数字经济时代，数据成为重要产资料，激发数字经济发展N:地L:劳动K:资本T:技术D:数据Y=F(N,L,K,T,D)Y:经济产出F:产函数产资料产具产农业经济业经济数字经济地/畜锄/犁/锹煤/油/矿热/电机械数据算/络云、5G、AI数据：数字经济时代的重要产资料2025年产业数字化机会 23万亿$Source:Huawei GIV 20251.7万亿5 万亿1.5万亿 零售融0.5万亿 公共事业2.9万亿 服务6.4万亿 制造1.1万亿 其他3.0万亿 咨询服务0.9万亿 交通信息科技释放数据价值，需要企业

2、从数据管理向数据智能数据智能体验每天亿级数据标签智能匹配数据智能决策数据智能流程垂直的深度和厚度同样重要50年油历史数据智能挖掘每天10万+次数据碰撞智慧新闻，精准户体验油开采，智慧决策钻井深度智慧差旅：智能流程合并临三难题，数据价值很难得到充分挖掘数据质量低，取数难、找数难、计算难、数难数据处理到AI开发，到最终实现业务价值，涉及道序，技术槛，协作难度如何借助数据与模型，模拟、验证、预测、控制业务的全命周期数据治理难技术槛业务仿真难向：研究下代数据智能基础设施，Data Intelligence Infrastructure，打造站式、全链路的数据智能平台，通过对海量复杂数据问题的业务抽象与

3、有效分析，帮助户专注于解决现实世界的问题；愿景：数据智能驱动决策，Provide right data to right person in right time；业务对象、规则、过程数字化数据联接数据透明数据采集/处理动化、智能化数据领域由企业扩展到态伙伴极致萃取数据价值安全共享、数据合规动算法模型（AutoML）实时可，智能洞察数据清洁数字业务化华为云数据智能创新愿景全链路No-code 都是数据科学家动数据处理（AutoETL）DIaaSDaaSDLaaSMaaSData Intelligence as a Service在AI的辅助下，户需专家技能也可以进数据治理、提升数据质量、进可视

4、化分析与设计;持续智能，AI能我持续增强;可解释的AI，让户理解AI推荐的结果。Data Lake as a Service.需编码即可构建数据湖.集成任何格式、结构和规模的数据，增强数据管理.持实时、批量数据处理.定义、可编辑的数据模型，将数据表示为业务对象.数据、元数据、模型和代码的版本控制能Data as a Service数据即服务，按需助提供数据服务，所搜即所得，所得即可视化，户需关数据的位置、数据的结构、数据的处理逻辑；户可以发现他所不知道的异常、或者预测业务未来发展。Metadata as a Service 提供企业数据资产内容的统视图与唯真相来源，包括技术资产与业务资产；户可

5、以很便的发现、描述、使数据资产；给户智能化的资产搜索、推荐体验，帮助户发现他所不知道的数据价值与数据关系；华为云数据智能核技术理念数据智能基础设施整体架构与技术研究向智能应构建码化应开发、决策智能对接应智能分析与洞察增强分析、根因分析、what-if决策、因果推断、标签动成与智能匹配智能数据治理数据+元数据体化的企业知识图谱；指标探索的可视分析；全链路性能与成本监控；智能分级、加密脱敏技术；智能质量评分与质量修复智能数据准备CDC实时湖、AutoML、AutoETL、NL2SQL、Auto API产智能内核层元数据治理内核：元数据联邦、全链路缘、关系图谱、profiling；智能数据治理算法、

6、智能可视分析算法、计算任务智能编排调度算法等多元化计算层多引擎统元数据存储、版本管理、权限、接服务；计算任务跨引擎调度；SQL+AI融合计算统存储层memarts缓存加速、shuffle加速、速索引、动数据优化（格式转换、预读、化、冷热数据识别）、计算下推（数据缩减,推理，训练，特征匹配）关键技术业务应华为内部统数据智能底座 数百PB数据、百万级任务、万级报表、数场景的智能辅助决策资产录对海量资产进动资产编，提升资产完整性和准确性数据标准.对已发布的数据标准进去重，提升数据标准质量；对未发布资产推荐和动成数据标准，提升资产发布效率数据模型 根据数据结构和数据内容智能识别主外键、建模型，厘清海量

7、数据之间的关系，提升资产建设和消费效率数据缘 根据数据结构和数据内容智能识别数据集成关系，进主数据治理、质量问题分析、数据源认证等重复建设通过数据结构、数据内容、户群体相似等特征智能识别数据湖、中台资产和数据服务重复建设精准搜索对户、数据资产分别进画像，再通过AI实现智能精准搜索、推荐知识图谱对应、指标、数据、任务，从业务相关性、相似性、缘等度建关系图谱，形成企业数据资产的知识图谱数据质量通过AI智能识别不确定业务规则数据质量问题，提升数据质量识别效率和提前预警数据整合案通过AI识别贴源区、整合区资产的数据关系，智能输出数据整合案异常数据预警对不匹配预期报告结果(例如某个数值较常突然指数级增等

8、)进监控预警智能图表推荐 基于然语的搜索请求，智能成查询query，并基于查询结果智能推荐可视化图表智能故事叙事 基于对数据的智能分析与理解，智能输出数据故事隐私安全 基于元数据向量距离识别个唯身份标识，并识别所有个数据属性，确保准确率、查全率；对海量资产进密级推荐，提升定密效率，促进共享与安全关键技术：AI for Data智能治理&分析算法服务部分研究成果在ICDE、VLDB、TVCG、CSCW等国际顶级学术会议发表论：Approximating Median Absolute Deviation with Bounded Error.Proc.VLDB Endow.14(11):2114

9、-2126(2021);Capturing Semantics for Imputation with Pre-trained Language Models.ICDE 2021:61-72 Interactive Data Analysis with Next-step Natural Language Query Recommendation.TVCG-2022-10-0539.ColorCook:Augmenting Color Design for Dashboarding with Domain-Associated Palettes.ACM CSCW 2022 Discoverin

10、g Editing Rules by Deep Reinforcement Learning.ICDE 2023关键技术：动，愈，优的智能数据流线 核服务能:动：数据开发即服务：智能数据开发，缝连接企业数据，ML/AI模型，业务和应。愈：数据管理即服务：统运维，治理，监控，告警，根因分析，预测，愈。优：数据资源优化即服务：基于户为，预算，SLA，应等智能优化数据存储，数据模型，计算引擎，联邦查询关键挑战:数据开发周期：企业花费1000+的时间，不能满业务敏捷性。数据管理维护成本：运维，事后补救，宕机频繁，耗时耗数据资源：业务技术更新快，开发员难以与时俱进，资源浪费严重关键技术：数据识别:关系，

11、相似，领域数据标识及解析:半/结构化数据然语搜索与发现数据质量稽核：查重、清洗、合并、丰富动数据编排,识别数据模型与连接流批体:采集，处理，服务动态本体建模，知识图谱，数字孪低代码/代码数据处理及建模智能调度关键技术：构建智能数据洞察Modern BI能，降低数据分析槛数据准备数据连接MysqlGuassDBMRSDLIAPI指标系统智能数据故事作空间(可视分析与报表制作)阶分析能分享Files数据建模Query Engine数据模型DaaS Engine图表推荐智能主题智能解图表优化解描述可视化组件库（d3）即席分析（作表）智能推荐仪表盘报表保存/预览定义公式时序图地理本XAI异测/根因预警

12、关联分析多维预测时序分析图优化聚类/趋势集成python等故事成第三应嵌BI订阅报表导待办智能决策智能交互（NLI）NL2SQL移动端关键特性然语交互“所搜即所得”持即席分析，即基于表格领域的解决案基于d3的可视化组件库转变（SDK）增加Small Multiple这类型组件NLI能的落地数据洞察主模块与模块交互能（少时序）地理数据模块报表导/分基于业模板的智能数据故事成基于模板/动成数据故事，让数据会“说话”图表、解动增加字描述（NLG）智能决策智能主题/配图表智能优化阶分析能A-Chart增强异常监测与根因分析持聚类/趋势/关联分析集成python、R等分析应代码能（调数据处理接）定义规则

13、轻量化BI，持第三应嵌和分享:BI报表成为种数据资产，持直接嵌到上层SaaS应中；安全性，组织、列权限管控，导出权限控制；“数据驱动业务”的待办能（与其他业务模块联动，组件）；关键技术：动态本体建模，构建企业数字孪数字孪概念模型（实体-关系图）逻辑模型（关系模型、维度模型）物理模型本体：OWL分类法：RDF-S数据交换：RDF企业IOT数字孪本体语义知识图谱数据库数仓模型数据结构化数据（数据库、数据仓库、ERP）半结构化数据（Logs、csv、json、xml）结构化数据（图像、视频、频、本）松散类型数据（IOT）特点：本体是共享概念模型的明确的形式化规范说明。语义提供了个通框架，允许跨应程序

14、、企业和社区边界共享和重数据。物理数字特点：量、多样性、速特点：数据库数仓建模，以数据表、列和主外键外系构建，偏重于特定应程序实现特点：物理世界的数字化镜像。挑战：传统数据库数仓建模和知识图谱等技术法满企业全业务流程分析和决策需求挑战：与物理世界互动、仿真&预测、智能决策执挑战：静态语义表示法反应快速变化的物理世界挑战：偏重技术实现，法完整表示业务流程和对象关系挑战：海量异构数据的管理和分析关键技术企业数据接，各种异构数据源批量、实时接、数据清洗、融合、监控动态本体建模、标准建模语和可视化建模，基于数据+AI模型+业务模型快速构建数字孪AI驱动的业务仿真和预测，为业务优化提供决策持数字孪应构建

15、，3D可视化、智能监控和决策执控制台，数字孪与物理世界实时联动关键技术：基于数字孪的企业智能决策脑动发现识别数据与模型的匹配(数据源,数据实体及属性)数据实体的主键属性潜在的脏数据基于业务模型的规则定义及融合基于业务模型的AI/ML模型基于业务模型的数据及模型关联业务定义-场景,组织,规范,流程数据模型-业模型(模型已知)数据模型动识别(模型未知)企业运营监控中基于业务模型驱动的动决策系统通过开放知识图谱集成外源知识基于业务模型的预测基于假设分析 业务仿真模型的优化（局部优化，全局优化）基于动态本体建模的决策流构建基于业务决策流的执，监控，推荐和审计基于决策流的数据双向操作数据应逻辑数据湖，对

16、接各种数据源元数据+数据安全连接各种数据数据应CRMERPHRData visualizationModern BIAnalytical ApplicationsSearchDiscovery数据源华为云架构与技术创新部数据智能创新LAB本体图谱研究团队效数据集成研究团队增强可视分析研究团队低代码应研究团队智能治理算法研究团队智能数据质量研究团队下代BI研究团队专家顾问委员会华为云数据智能创新LAB 华为云数据智能创新Lab以“数据驱动智能决策”为愿景，专注解决数据时代数据管理困难、价值变现困难的挑战，我们基于最先进的数据技术与AI技术，研发站式的智能数据平台，帮助华为云以及华为云的企业客户挖

17、掘数据价值、实现数据创新。LAB的研究向包括下代数据技术、智能数据治理、智能可视分析、智能业务仿真与决策等，拥有从学术研究-技术孵化-云服务研发-运维的全栈能，对内负责华为。数据智能创新Lab成于2018年，研究中分布在杭州、安和深圳。Lab设有博后作站，团队博学历才占25%，研发专家级别占50%，拥有华为数据智能领域席专家、天才少年等众多才。数据智能创新LAB邀请了浙江学云君教授担任技术顾问，与海内外余所校有紧密技术合作。华为云数据智能创新Lab与华为内外著名科学家道联合创新，携打破数据领域技术天花板，助华为商业成功。边缘数据计算CDN数据计算企业IDC私有云各类端DC基础设施+数据中管理服

18、务器、虚拟机、容器数据计算数据存储数据智能内核智能数据集成与开发智能数据治理智能数据分析智能洞察与决策智能数据交易智能数据应构建全栈全域规模图分析研究团队2018年LAB成2019年LAB主导上线华为云可视化云服务DLV2019年LAB主导上线华为云数据治理云服务DAYU 2020年LAB主导推出华为云数据治理咨询法论2020年第五届数据产业态会，Lab获得“2020年度数据沙奖”2020年1010华为云数据智能创新Lab孵化的DataArts升级为华为云数据使能品牌，成为华为三使能品牌之2020年今Lab先后与北京学、清华学、同济学、中南学、浙江学、哈、建技术合作关系；并特邀浙江学教授为LAB科学顾问2021年Lab与清华学在ICDE、VLDB联合发表两篇优质论2022年Lab孵化的数智融合平台获得数博会领先优秀成果奖2022年Lab与清华学、同济学、港科联合发表的论被ICDE2023、CSCW2022、TVCG2022接收并发表。2022年Lab孵化的数智融合平台单服务年营收破亿LAB部分成果2021年开始孵化全新的数据平台DII平台，将LAB的创新技术落地。前DII已经是华为内部统数据底座平台。谢谢，欢迎后续与我们联系与交流数据智能创新LAB主江联系微信