《网易伏羲AIGC探索及实践.pdf》由会员分享,可在线阅读,更多相关《网易伏羲AIGC探索及实践.pdf(26页珍藏版)》请在三个皮匠报告上搜索。
1、网易伏羲AIGC探索及实践人工智能,点亮游戏未来网网易易伏羲伏羲 赵增赵增2023/32023/3研究及背景伏羲简介实验室以“创建人工智能与游戏交叉领域的世界一流实验室”为宗旨,运用人工智能尖端技术为玩家营造新世代的游戏体验,同时借助游戏平台的海量数据和仿真环境,推动人工智能技术的发展。2017年9月成立中国第一个游戏人工智能实验室愿景:点亮游戏未来专注于落地研究伏羲实验室伏羲科技伏羲机器人伏羲简介全球游戏开发者大会,国内游戏行业最多的AI方向Talk贡献单位10篇GDC包含用户画像、计算机视觉、强化学习、自然语言处理、虚拟人等多个方向的应用技术覆盖游戏户、文旅、教育等多个行业100+客户40
2、0+篇专利涵盖NeurIPS、ICML、ICLR、ICCV、CVPR、ACL等人工智能领域国际顶级会议160+篇顶会论文技术影响力伏羲简介入围国家文旅部智能旅游模式创新科技创新工程项目数字动画智能创作入围国家工信部新型信息消费示范项目承建浙江省科技厅增强现实与智能交互工程技术研究中心承担浙江省科技厅尖兵计划大模型预训练重大科研项目参与2020虚拟数字人指标要求和评估方法(国家标准)载入2020年(中国)虚拟数字人发展白皮书,今年将被推为副理事单位多项应用入选工信部信通院大模型应用精选案例网易的内容生态预训练技术的发展网易预训练技术基础基础模型体系图文音行为序列计算优化引擎兼容国产混合算力池推理
3、加速训练加速算法底座公共支撑网易超大规模预训练云平台展示平台接入平台应用平台模型共享微调适配推理加速服务上云用户体验模型下载微调适配服务部署与运维网易超大规模预训练模型云平台项目入选浙江省“尖兵项目”网易预训练技术基础网易伏羲预训练模型概览2019 H12019 H2NLPMulti-modal2020 H12020 H22021 H12021 H22022 H12022 H2100MNLG200MNLG700MNLG11B Dialog generation300M behavior pretrained model40B multi-task music generation700MNLU
4、5BNLG11BNLG200M text-image alignment400M text-image alignment1Btext-image generation1.4Btext-image generation10B NLU100B Moe-based NLG网易预训练技术基础https:/ Dimension 3072 Model Layers 45 50Model Dimension 3072 Model Layers 45 50亿参数valid ppl valid ppl 6.90 6.90 Model Dimension 5120 Model Layers 36 110Mode
5、l Dimension 5120 Model Layers 36 110亿参数valid ppl valid ppl 6.55 6.55 自研文本模型模型训练网易海量业务数据小说、新闻歌词、对话多模态预训练模型(Clip)Learning Transferable Visual Models From Natural Language Supervision训练数据和模型框架(latent diffusion)High-Resolution Image Synthesis with Latent Diffusion Models 中文场景图文数据 从头构建 基于网易生态及自主知识版权 图文理解
6、预训练框架 文图生成预训练框架 主要工作 支持中文场景文图理解和生成 支持风格化的图像微调 支持业务场景文图生成需求定制图文预训练在AIGCAIGC领域的应用探索生成结果示例-语义能力骑摩托车的熊猫油画,铁马冰河入梦来梵高风格的小龙虾海上升明月机械臂女孩,黑色,单人,星空背景女生,蓝色蝴蝶结,可爱,麻花辫大海,惊涛骇浪,船生成结果示例-与中国用户“心有灵犀”鱼香肉丝老婆饼红烧狮子头鸡蛋灌饼青花瓷版的恐龙宋代瓷器自行车穿西装的孙悟空抱着大熊猫坐在火锅旁的成都女子角色生成-欧美角色生成-中式角色生成-动漫场景生成-欧美场景生成-国风网易“一块屏”公益宣传视频AI画出了四川女娃儿考上北大的故事视频插画由AI辅助创作游戏图标制作表情图标,美女道具图标,宝箱技能图标,漩涡,莲花,蓝色2023央视网络春晚元宇宙分会场数字门票数字藏品风格迁移 云音乐二次元头像动态时装 网易瑶台动态时装THANK YOU人工智能,点亮游戏未来