1、快速、低成本克隆高质量数字人杨建顺 黑镜科技 技术VP|01克隆数字人概念和定义03快速、低成本克隆高质量数字人04小结目录 CONTENT|02黑镜科技 MetaMaker|01克隆数字人概念和定义|是将现实世界的真实人物或被主观创作出的虚构人物，通过数字技术生成、转化为数据，以计算机代码的形式存储和应用，并根据所接入的人工智能算法、知识系统、驱动系统等后端系统的不同，能完成传达信息、表达情感、与他人交流互动、解决问题等人类行为的数字化人物。仙剑奇侠Miquela?|根据源数据的不同，数字可以分为：虚拟数字 与 克隆数字。虚拟数字人:Alita克隆数字人:Will Smith|虚拟数字，指的

2、是个以计算机代码形式存在的虚构物。让脑感觉“这是个”，是“喜爱”和“相信”的过程。虚拟数字天然地具备艺术属性与艺术功效是其创造者主观创作意志的体现克隆数字，是对个真实然类的各种数据的复制。克隆数字是真的代码分。完全意义上的克隆数字，应包含对的身体和思想、格等所有信息的百分百复制。完全意义上的数字克隆是不可能的：复杂系统可以被近似模拟，法被精确复制。|数字的“社会分”演艺数字 虚拟偶像 虚拟数字偶像数字 偶像分身 克隆数字/虚拟数字医学数字 数字替身 克隆数字服务数字 虚拟职员 克隆数字/虚拟数字平数字 数字化身 克隆数字/虚拟数字|通用数字人技术，是未来元宇宙的核心基础技术，只有依托通用数字人

3、技术，才能在元宇宙中做到“人人都有数字人，处处都有数字人”。通用数字人业务标准零门槛：人人都能掌握的技术，才能全民参与低成本：人人都能用得起的技术，才能全民拥有高效率：秒级/分钟级创建，才符合人性需要个性化：每个数字人都有强烈特性，才能代表自己场景通用：数字人可用于任何场景资产通用：虚拟资产可用于任意数字人驱动通用：任何驱动都可驱动任意数字人平台通用：数字人可以“活”在任何平台上目前，全球范围内，只有少数美国公司在研究通用数字人解决方案，绝大多数国内公司都还只停留在用传统影视技术制作“定制数字人”。而黑镜科技的核心团队，则从十年前就开始布局通用数字人的核心技术研发。|黑镜科技 MetaMake

4、r|黑镜科技拥有全栈式虚拟化技术，提供完整的企业虚拟化服务。致力于将前沿数字技术平民化，成为让每个行业和组织都能参与共建元宇宙基础设施，实现生产力普惠，引领虚拟化时代。|在线创作毫秒响应打开网站即可创作数字人和虚拟内容架构支持百万并发虚拟数据云端托管，分布式实时渲染支持高并发全数据驱动输入数据/文字即可让数字人行动/说话算法驱动灵活定义数字人行为表现行为规则驱动NLP/对话AI/行为预设无代码创作数字人/内容/应用 一站解决海量数字资产官方资产开放使用支持素材导入多终端适配App/网页/大屏多端适配三维数字人一键重建提供美漫/拟真两种模型风格 更多风格正在拓展中更多风格化数字人导入模型创造更多

5、风格云原生一站式AI 驱动多风格黑镜科技开发了全球首个 Level One 企业虚拟化平台 MetaMaker。完全云原生架构，采用无代码前端，提供海量虚拟化资产一站式满足企业资产虚拟化、企业服务虚拟化、企业内容虚拟化的市场需求|素材窗口预览窗口参数窗口轨道编辑窗口|案例集合|一键生成数字人，涵盖捏脸系统、海量服饰、语克隆、行为驱动。零门槛打造高质量声形并茂的数字人 IP。一人一面，智能驱动。MetaMaker 通用数字人技术低门槛：视频教学，普通人轻松上手低成本：服务器单人重建成本仅需一块钱高效率：十毫秒级重建，真人语音分钟级克隆个性化：真人重建，个性化调整，多种风格通用行为算法与可编程行为

6、系统自适应多体型通用资产算法动捕驱动、AI 驱动、脚本驱动全平台（云/端/Web）适配|MetaHuman 通用数字人技术低门槛：简洁直观，易于上手低成本：免费、开源高效率：实时运行，效率高效个性化：变体众多，细节丰富，渲染逼真导出适配各类第三方软件多体型毛发、服装、动画资产适配LiveLink 实时面部驱动基于 Unreal Engine，多端跨平台|MetaHuman Creator 不是为了“克隆数字人”，而是帮助用户创作“虚拟数字人”。试图通过工具去还原真人时，发现很难创造出“克隆”人使用 MeshToMetaHuman 仍然需要巨大的成本扫描数字人MetaHuman 的多样性，主要取

7、决于内置资产数据库的丰富程度。内置人脸、毛发、服装等资源非常有限，同质化严重自定义资产仍需要巨大的创作成本和专业的建模师和动画师MetaHuman Creator 虽然低门槛、简单易用，但后续的集成开发困难仍需要专业的 UE 引擎工程师和技术美术并没有很好地解决引擎端的资产适配、语音驱动、行为驱动等问题MetaHuman 受 Epic 公司的定位影响，是引擎平台提供商仍需要专业的产品、服务和解决方案提供商，以减少终端的使用门槛和成本大量的公司基于 MetaHuman 开发，入门容易，但做出突破性成果较难|站在巨人的肩膀上，创造更大的价值。保持开放、分享、共创的心态！为共同的愿景努力：在元宇宙“

8、人人都有数字人，处处都有数字人”。基于 MetaHuman，我们研发了一套能够 快速、低成本克隆高质量数字人 的流程。|03快速、低成本克隆高质量数字人|需要专业的场地和硬件设施进行拍摄需要专业的建模师、绑定师、技美时间周期长，两周到两月不等整体成本在数十万元以上图片来源 https:/vgl.ict.usc.edu/Research/PresidentialPortrait/|需要专业的场地和硬件设施进行拍摄需要专业的技美时间周期长，两天到两周不等整体成本在数万元以上|简易场地和普通手机进行拍摄需要普通的技美时间周期短，半天到一天不等整体成本在数百元以上案例说明：以我自身为例，我不是技美用我

9、手机自拍，在公司拍摄从拍摄到集成，共半天时间|硬件：墙角+白布+椅子 小米手机 软件MetaShape 1.8UE 5+MeshToMetahuman+MetaHuman CreatorPhotoShop 2022|光照环境：相对均匀，无明显高光 手机参数：专业模式，手动曝光拍照环节：主要拍正面 180 度|以下以 MetaShape 1.8 重建为例1）对齐照片 Align Photos2）生成点云 Build Dense cloud|3）生成模型 Build Mesh4）生成贴图 Build Texture|以下为官方教程，包含以下步骤：1)设置你的虚幻引擎项目。2)导入和准备角色网格体。

10、3)创建和配置MetaHuman身份资产。4)创建和跟踪中性姿势。5)运行身份解析。6)将网格体提交到MetaHuman后端。|1）在 MetaHuman Creator 中自定义调整分配肤色和纹理，但很难找到合适的其他简单调整，以接近真人感觉分配毛发、服装 2）下载 MetaHuman 并导入到虚幻引擎注：不论怎么调整，都感觉不像自己，很难找到克隆数字人的认同感|1）将生成的 MetaHuman 网格体导出2）导入 MetaShape 重投影生成贴图|1）眼睛鼻子嘴巴处理2）头发和外围处理3）高光处理4）色相处理注：此处需要专业的技美处理，我是现学了一段时间 PhotoShop 后，用一个小

11、时完成以上处理|1）将贴图导入 UE 并替换 MetaHuman 的材质中的 Color 贴图即可 2）在关卡中预览并展示最终的效果|小结|通用数字人业务标准零门槛：人人都能掌握的技术，才能全民参与低成本：人人都能用得起的技术，才能全民拥有高效率：秒级/分钟级创建，才符合人性需要个性化：每个数字人都有强烈特性，才能代表自己场景通用：数字人可用于任何场景资产通用：虚拟资产可用于任意数字人驱动通用：任何驱动都可驱动任意数字人平台通用：数字人可以“活”在任何平台上MetaMaker 通用数字人技术视频教学，普通人轻松上手低成本重建，服务器单人重建成本仅需一块钱十毫秒级重建，真人语音分钟级克隆真人照片

12、重建，个性化调整，支持多种风格通用行为算法与可编程行为系统自适应多体型通用资产算法动捕驱动、AI 驱动、脚本驱动全平台（云/端/Web）适配|MetaHuman 通用数字人技术低门槛：简洁直观，易于上手低成本：免费、开源高效率：实时运行，效率高效个性化：变体众多，细节丰富，渲染逼真导出适配各类第三方软件多体型毛发、服装、动画资产适配LiveLink 实时面部驱动基于 Unreal Engine 平台|优点：简易场地和普通手机进行拍摄需要普通的技美时间周期短，半天到一天不等整体成本在数百元以上不足：真实但不够美！缺乏 Normal 等贴图仍需要艺术家修正熟练掌握工具、经验待改进：标准化、模板化优化迭代效果和效率结合 AI+代码结合应用实践非常感谢您的观看|