《杨滔-OSCAR开源生态建设沙龙-MindSpore社区.pdf》由会员分享,可在线阅读,更多相关《杨滔-OSCAR开源生态建设沙龙-MindSpore社区.pdf(19页珍藏版)》请在三个皮匠报告上搜索。
1、昇思MindSpore开源社区运作实践杨滔华为昇 思 MindSpore开源生态技术专家议程02昇思MindSpore生态创新运作03昇思大模型平台全新升级构筑AI全栈,亲和昇腾性能最优MindSpore 正式开源MindSpore 1.0全场景AI框架MindSpore 1.5原生支持大模型MindSpore 2.0AI融合框架全场景AI框架昇思MindSpore,使能科研创新与产业应用MindSpore 1.8全面提升易用性跨域大规模协同高效联邦学习,支持大模型跨域并行加密训练;千万端侧设备协同学习融合计算统一微分科学计算加速库,支持250+科学计算API自动并行,开发效率提升2倍+自动微
2、分引擎,自持高阶高维混合微分,性能加速5倍+机翼气动仿真效率流体仿真套件米级阵列天线仿真速度电磁仿真套件自然界蛋白质预测范围分子模拟套件New端边云全场景部署统一API,模型格式免转换,支持 7种主流OS,16种硬件动态图全面支持动态图优先,兼顾灵活性与性能,性能提升25倍升级升级昇思MindSpore原生支持AI大模型训练,使能大模型应用落地原生支持大模型训练并行代码量模型结构数(5种 vs 2 种)并行维度最多且通用,实现计算和通信整体迭代时间最短(7 种维 vs 5 维)串行代码量单机到多机,代码量不变自动搜索最佳并行策略,降低系统调优时间调优时间并行支持多模型类型切分:Transfor
3、mer(稀疏/稠密)、卷积、高维稀疏等支 持 并 行 维 度 最 多数据切片预处理业界唯一数据并行算子级并行NV、微软只支持Transformer,TF支持TPU优化器并行微软支持Transformer结构,TF支持TPUPipeLine并行NV、微软只支Transformer结构MoE并行TF支持,微软支持Transformer支 持 模 型 切 分 结 构 最 全稠密TransformerAI框架类型稀疏MOE Transformer卷积结构卷积+Transformer高维稀疏 盘古、GPT3鹏程.神农、悟道武大遥感鹏程.大圣推荐类网络PyTorchTensorFlow模型实例提供产品化设
4、计,助力产业落地前期准备(数据集等)模型预训练下游任务微调模型转换/优化模型部署ModelArts微调工厂单租户专用微调环境大模型对外服务平台代码开发/调试微调训练(百亿以下)模型剪枝模型量化多租户微调训练共享平台微调训练(百亿以上)大模型在线推理MindXDLAPI 汇聚行业、科研及开源力量,发展昇思MindSpore生态圈昇思MindSpore 行业生态昇思MindSpore开源生态11000+贡献者昇思MindSpore技术生态400+开发者遍及全球MSG国内22座城市、海外7个国家成立(俄罗斯、新加坡等):举办开发者线上、线下活动;联合启智社区已举办31场校园行师资培训、企业行在遍布深
5、圳、武汉、上海等下载量435万+Gitee AI开源项目综合排名TOP15500+服务企业金融、医疗、制造、数字政府等模型600+顶会论文已发布紫东.太初、鹏程.神农等10个创新大模型数据截止至2023.01月生态足迹走进国内大中城市北京上海鹏城成都西安武汉海南厦门广州长沙杭州南京青岛河南太原天津重庆廊坊沈阳济南大连人工智能计算中心京津冀长三角中西部粤港澳成渝重点区域算力网络与高校、科研院所及企业进行全方位合作 大模型合作 论文基金项目合作 众智项目合作 行业方案合作为开源社区贡献代码、提交issue/合入PR28 Sig组议程01昇思MindSpore生态进展03昇思大模型平台全新升级分层级
6、社区活动,助力开发者全面成长2022年,昇思亮相CNCF年度旗舰峰会KubeConEU2022,作为CNCF欧洲峰会历史上首个来自中国的技术性Keynote演讲,首次推出的华为首个开源云原生AI卫星应用方案。昇思社区每半年举办一次开发者狂欢活动MindCon极客周,科普开源知识,引导开发者加入社区,参与社区贡献。截止目前,3万+开发者参与社区贡献。自2020年5月昇思成立MSG小组以来,广受开发者关注,截止2022年,MSG足迹遍布海内外30个城市。面向各层级开发者,开设MSG系列活动:MSG城市行、MSG区域行、MSG暴走校园、MSGWomen in Tech,以及公益活动MSG在行动。开展
7、昇思AI挑战赛、AI画家大赛、昇思学习赛、互联网+、昇腾AI创新大赛等多样赛事,覆盖不同层级开发者,助力开发者快速提升。2022年开展昇思AI挑战赛,544人参赛,分别来自131所高校,46家企业,为昇思贡献优质模型24个。开发者活动分层级赛事海内外AI盛会亮相全系列AI盛会,包括WAIC、KubeCon EU等大型活动,面向全球开发者提升昇思技术影响力。量子位十万亿参数,能堆出一个通用人工智能么?u全网总播放量超过29万,全网总曝光量超过246万。u被人民日报人民号收录,人民号观看量为4696。图灵的猫AI破解生命科学?u全网总播放量超过32万,全网总曝光量超过314万。u图灵的猫成为社区核
8、心贡献者。柴知道AI造女友u全网播放量超15万u作为昇思各大高校活动实践课程,深受高校开发者喜爱。阶梯式课程体系,全面提升开发者技术能力吸引:KOL视频激发兴趣学习:技术直播助力提升提升:专题Workshop深耕领域昇思技术分论坛昇思系列硬核技术分享会,邀请知名专家进行专题领域议题分享。单场直播报名人数1000+人,直播观看人次5W+,吸引海内外多个高校科研院所开发者参与其中。21天实战营面向小白开发者的AI应用实践课程,近2000+开发者参加其中,1000+开发者参与社区贡献。开发者分享多YOUNG新生为社区推选优秀开发者的成果分享,截止目前已有50位开发者参与分享,吸引数万名开发者观看。M
9、indSpore SPONGEWorkshopAI+科学计算领域独家Workshop,吸引领域相关科研院所、企业等2000+开发者报名参加,累积吸引210+开发者加入Model SIG。开发者调试调优workshop面向社区开发者模型调试调优workshop,邀请多位社区优秀开发者分享,吸引900+开发者参与其中,牵引至Model SIG累积100+开发者。开发者体验workshop面向社区开发者体验的基础社区workshop,分享社区在群智化生态、Issue问答推荐等多个基础设施项目,吸引近千名开发者参与其中。MSG系列企业活动,赋能企业伙伴全链路闭环为生态伙伴赋能赋能,昇思技术认证3倍增长
10、!721家企业基于昇思MindSpore落地行业解决方案。昇思MindSpore正式开展MSG企业行,联合各地昇腾生态创新中心,全年走过国内外20+所城市,与1700+企业开发者深入交流。行研会MSG(MindSpore Study Group)正式成立,不到一年走遍全国十五大城市,拓展了七大海外MSG。昇思MindSpore开展7大领域技术论坛,吸引2500+开发者报名,1600+企业/高校/科研院所参与,CCLA开源贡献签署伙伴增长400%昇思MSG行研会正式启动,其中MSG行研会武汉专场,吸引350家企业报名参与,3356人次在线学习交流。昇思生态行正式启动,在广州、南京、西安、长沙等地
11、发起城市巡回计划,上千家企业报名参与!MSG企业行昇思生态行MSG行研会截 至 2 0 2 2 年 底,昇 思 走 进 2 0 0+所高校,为1 0 0 0 0+名 高 校开 发 者 带 来 人 工智 能 技 术 与 应 用的 前 沿 讲 座 以 及技 术 实 操,超1 5 0 0 名 开 发 者完 成 课 堂 实 操 作业打 造 丰 富 的 进 阶式 学 习 课 程,1 5 0+节 课 程 视频,帮 助 开 发 者从 入 门 到 实 战,超 2 0 万 开 发 者 参与 课 程 学 习 中创新研究室走 进 高 校师资培训高校开发者成长途径成 长 计 划开 源 贡 献每 半 年 举 办 一 次
12、的 M i n d C o n 极客周是昇思M i n d S p o r e 开源 社 区 的 开 发 者狂 欢 盛 会,截 至2 0 2 2 年 底 已 成功 举 办 四 届,超3 万 开 发 者 通 过活 动 完 成 开 源 贡献社 区 赛 事举 办 昇 思 A I 学习 赛、昇 思 A I挑战赛、B D C I 等 多 项赛 事,分 层 升级 用 户,为 2万+用 户 提 升实 践 能 力 的 挑战 机 会开 源 实 习开 展 线 上 实 习,引 导 学 生 参 与 开源 社 区,打 造 昇思 开 源 创 新 实 践基地,累计3 0 0+所 高 校、5 5 0+名 高 校 开发 者 参
13、 与,目 前已 完 成 1 1 6 个 实习 任 务荣 誉 认 证四 级 认 证 开 发 者进 阶 体 系(优 秀开 发 者、资 深 开发 者、布 道 师、资 深 布 道 师),3 7 7 名 开 发 者 完成 认 证打造高校开发者成长路径图,转化核心技术贡献者清华大学北京大学北京航空航天大学暨南大学武汉理工大学深圳大学中山大学南京大学议程01昇思MindSpore生态进展02昇思MindSpore生态创新运作人工智能算力网络鹏程.盘古 NLP大模型鹏程.神农 生物医药平台紫东.太初 多模态大模型武汉.Luojia 遥感领域大模型各领域行业用户金融医疗互联网教育遥感制造 盘古产业集群神农产业集
14、群多模态产业集群遥感产业集群 北京上海鹏城成都西安武汉海南厦门广州长沙杭州南京青岛河南太原天津重庆廊坊沈阳济南大连人工智能计算中心大算力+大数据使能大模型赋能新应用大算力赋能大模型,大模型使能新应用,牵引生态聚合,加速产业发展基于各地AI计算中心,孵化系列原生AI大模型,构筑最强技术生态智慧停车车路协同新一代天然抗生素发现多语种翻译中科院自动化所多模态大模型全球首个图文音(视觉-文本-语音)三模态预训练模型紫东.太初打开多种应用场景空间,吸引大量企业武汉大学遥感领域人工智能研究发布全球首个专用遥感框架武汉.LuoJiaNet构建业界最大遥感数据集武汉.LuoJiaSet支持武汉数十家企业做相关
15、应用开发城市测绘路况预测+耕地管理高精地图遥感数据遥感特性搜索导航违建检测视频生成文学创作视频推荐智能机器人自动驾驶鹏程系列大模型业界首个中文NLP大模型2000亿参数40TB 文本数据500P x 20天鹏程.盘古秦岭.翔语秦岭.西电遥感脑金陵.电磁脑秦岭系列大模型其 他武汉系列大模型鹏程.神农打造最有影响力的生物医药平台万亿参数模型8TB 文本数据500P x 30天智能解译遥感大模型跨语种语音大模型 电磁计算大模型空天.灵眸多模态遥感大模型天佑大模型轨道检测海河.谛听语音交互意图理解昇思大模型平台,打造大模型开源生态,使能垂直行业,赋能百万开发者模型/代码等在线托管支持Gitlab版本控
16、制与批量上传;支持Git LFS大文件上传,支持300+主流模型活动、比赛、课程、产业保姆级文档支持开发者线上活动,支持开发者线上比赛,支持AI大模型课程线上学习完备的平台操作指南,帮助开发者快速上手模型在线训练/推理部署支持多算力后端,支持Jupyter云端在线编程,支持MindFormers快捷体验Transformer类模型,支持用户在线训练、Gradio可视化推理和用户创意实践大模型可视化在线体验支持悟空画画,紫东太初,LuoJia等多个大模型,覆盖AIGC,遥感等不同热点方向。前期准备(数据集等)模型预训练下游任务微调模型转换/优化Jupyter在线编程昇思大模型平台API模型部署活
17、动比赛课程产业开发者2w+开发者贡献,来自28个省份,超半数为985/211学生,20%来自AI企业开发者AI挑战赛开发者28个省份,来自ICT,互联网,测绘、生物、医学检验、金融、通讯等不同行业昇腾AI计算中心可视化在线体验电 网 人 工 智 能 融 合赋 能 平 台昇 思 大 模 型 平 台电 力 专 区智能巡检智能运维智能决策昇 思 大 模 型 平 台医 疗 专 区智能诊断智能筛查智能决策医 疗 A I 影 像 标 注 平 台平台为行业客户引流行业客户为平台落地行业模型行业案例共建垂直行业专区,推动行业领域模型应用生态Jupyter+MindFormers打造极简一站式开发、推理与部署联合Huggingface社区,双轮驱动拓展海内外大模型生态Hugging Face 对接MindSpore实现Inference API,支持MindSpore模型加载、运行,用户可直接在线上传模型进行推理服务Hugging Face上线首个基于国产算力的MindSpore 专区,开发者可在Huggingface上体验所有昇思大模型推理服务HF正式支持MindSporeHF在线体验悟空画画Huggingface上线MindSpore专区AI实验室一键体验Gradio,课程+比赛打造成长性AI学习社区AI实验室AI画集AI课程与比赛THANKS