报告预览

郑幼戈-AI时代对操作系统交互的影响-演讲版.pdf

编号：159308

PDF 25页 5.76MB 下载积分：VIP专享

下载报告请您先登录！

郑幼戈-AI时代对操作系统交互的影响-演讲版.pdf

1、2024年3月中国操作系统领创者给世界更好的选择中国操作系统领创者给世界更好的选择目录CONTENTS01 01 桌面操作系统概述桌面操作系统概述0 02 2 deepindeepin中的中的AIAI技术技术0 03 3 操作系统操作系统AIAI交互升级交互升级0 04 4 操作系统操作系统&AI&AI未来初览未来初览中国操作系统领创者给世界更好的选择中国操作系统领创者给世界更好的选择0 01 1 桌面操作系统概述桌面操作系统概述中国操作系统领创者给世界更好的选择桌面操作系统的演进桌面操作系统的演进汇编语言产生批处理操作系统联机批处理操作系统IBM OS/360操作系统多道程序并行

2、处理系统多道批处理系统Windows 9X系统通用操作系统概念UNIX操作系统问世00200020102020+ENIAC无操作系统实时操作系统工控系统，信息处理系统MS-DOS 操作系统MacOS 系统Linux 操作系统云操作系统AI PC系统Android操作系统IOS 操作系统Windows XP系统deepin&UOS操作系统中国操作系统领创者给世界更好的选择deepin根社区建设，全球领先60+60+累计发布版本210+210+持续更新3434种种支持语言1 1亿亿+累计下载量300300万万+全球社区用户10001000万万+行行开源

3、代码用户遍布全球国家与地区100多个图为社区用户地图注：数据截至2023.03中国操作系统领创者给世界更好的选择deepin根社区建设，全球领先Thanks to deepin-porting SIG、deepin-m1 SIG等适配 Apple M1Ubuntu DDE V23Arch Linux DDE V23支持 Windows WSLopenSUSE DDE V23nixOS DDE V23中国操作系统领创者给世界更好的选择中国操作系统领创者给世界更好的选择0 02 2 deepindeepin中的中的AIAI技术技术中国操作系统领创者给世界更好的选择deepin的AI架构de

4、epin中的AI分为四层：在线大语言模型和本地模型、加速硬件芯片构成了模型层。模型管理服务，Agent服务和RAG能力服务构成了模型能力的封装服务层。通过DTK API来封装大模型接口，方便应用接入。当前主要支持streaming流式的本地RPC封装。UOS AI作为用户交互入口，各个应用作为 U O S A I 的插件被 U O S A I 的Function Call能力调用，同时各个应用也可以通过DBus接口调用UOS AI提供的能力。在线大模型服务UOS UOS AIAIllama.cppwhisper.cpp通用大语言模型GPU/NPU/CPUDTK APIAI Plugin

5、浏览器邮箱全局搜索讯飞星火智谱GLM百度千帆通义千问OpenVINO AdapterOpenVINO Runtime向量化模型多媒体及语音模型模型管理服务AppAgentActAgentRAG服务中国操作系统领创者给世界更好的选择输输出处理出处理UOS AI多模态处理输入预处理输入预处理语音语音文字文字帮我生成风景帮我生成风景图片图片STTSTTpromptpromptformatformat服务接口服务接口会话管理会话管理流式处理流式处理文生图文生图内容预测内容预测模型服务模型服务智谱智谱内容预测内容预测360360内容预测内容预测百度百度内容预测内容预测文生文生图图resolution

6、resolution 10241024x1024x1024后后处理处理安全安全过滤过滤TSSTSS输出输出验证验证ImageImageProcessProcess非常抱歉，我是一个认知模型，无法提供图片处理功能，但是可以提供图片生成建：XXXX生成准确度：生成准确度：例如有一个任务是对文章段落进行二分，要求模型输出只能是“是”或不是。实际出现的情况是，80%的时候它遵循的很好，但是总会有不这么干的时候。或者严格要求其输出是“特定的json规范”，也不能 100%保证输出合规。需要其他工程方法去进一步约束，例如输出验证器。P Promptrompt优化：各优化：各大模型prompt之间不通用。这

7、可能没有特别好的办法，prompt 需要针对不同的模型去修改。幻觉问题：幻觉问题：在某些场景，例如领域相关的（比如 deepin系统，统信UOS开发等），模型幻觉严重，这种情况需要通过增强提示词、对模型进行微调或者使用基于检索的生成技术（RAG）来解决。模型原始数据构成：模型原始数据构成：当涉及到面向特定任务微调时，选择哪个作为底座模型，成了决定任务能否成功的关键。另一个关键是微调数据的质量和数量的把握很难。主要体现在微调数据应该按照什么样的格式去编写对结果会有影响，写的内容的质量也会影响结果。实践中发现的跟目前一些论文提到的结论比较一致，例如数据的多样性，数据样本之间的分布是否平衡直接影响结

8、果。中国操作系统领创者给世界更好的选择deepin IDE 多语言代码生成对DTK的输出结果不稳定，对通用代码或者框架，如C、C+、Python、Qt其输出结果较为理想，但是对于DTK，则容易输出Python代码，但是DTK是没有python binding的。需要加入“不支持Python”、“使用C+完成”等上下文来减少错误的输出。对于应用层来说，训练数据十分重要。使用低质量的DTK文档和代码，其训练结果非常不理想，在使用人工清洗整理后的数据后，能显著提升对DTK的生成结果质量。键入：键入：for i infor i in推理服务器推理服务器deepin IDE补全结果：补全结果：for

9、i in range(3)for i in range(3)预测下个标识符的概率分布RespReq代码生成模型代码生成模型CodeGeeXCodeGeeXMindsporeMindsporePytorchPytorchAscendAscendCodeGeeXCodeGeeX130130亿参数亿参数4040层层TransformerTransformer无监督自回归训练无监督自回归训练中国操作系统领创者给世界更好的选择文件管理器自然语言搜索帮我帮我找找找找上周上周保存的保存的周杰伦周杰伦演唱会演唱会照片照片ONNX ModelONNX ModelTransformersTransformers

10、BERT ModelBERT ModelS1=N=4S1=N=4SoftmaxSoftmax帮帮/我我/找找/././照照/片片上周、周杰伦、演唱会、照片上周、周杰伦、演唱会、照片time:time:上周、上周、key:key:周杰伦、周杰伦、type:type:照片照片In-Memory DataIn-Memory DataTokenizerTokenizerCPUCPUNPUNPUCUDACUDATPUTPUProvider Provider RegistryRegistryFile SystemFile SystemWatcherWatcherSearch Search Service

11、Service文件文件名索名索引引文件文件内容内容索引索引文件文件属性属性索引索引文件文件标签标签索引索引O OC CR RFile Serach File Serach ServiceServiceAI ServiceAI ServiceSearch Search ServiceService网络模型使用Transformer，处理各类语言分类、分割、检测等任务。语言模型基于BERT模型后续可以通过裁剪隐层参数、优化训练过程、参数等方式可以把真正输出的语言模型做的很小，比较适合部署。业务处理基于文本分类模型给出的分类结果，进行类型判断封装，作为数据库查询语句中的文件类型字段。基于命名实体识别

12、给出的结果，进行关键词封装，作为数据库查询语句中的模糊关键词匹配字段。将时间内容进行二次处理，把“去年”，“上周”，“4月20号”等时间描述转化为标准的 yyyy:mm:dd hh:mm:ss的时间格式。作为数据库查询中的时间范围字段。中国操作系统领创者给世界更好的选择图像生成与增强UOS AIUOS AIfunction callModelScope ModelScope PiplinePiplineTensorFlowTensorFlowPytorchPytorchIntel OpenVINOIntel OpenVINOTransfer LerningBackbone()()Pixel

13、UnshuffleDeepin Image Deepin Image EditorEditorDeepinDeepinImage ViewerImage Viewer图像信息图像缓存文件图像列表索引ncnn modelImageClassifyImageClassifyImageImageEnhanceEnhanceSQLiteSQLiteAlbumAlbum质量预期质量预期：AI生成的图片不一定始终稳定，有时可能会产生不符合期望的结果，尤其在处理复杂、模糊或模棱两可的描述时，需要提高输入提示词的质量或使用在线模型。依赖于数据训练依赖于数据训练：图像处理模型依赖于大量的训练数据，如果数据中存在

14、偏见或不准确的信息，例如进行图像上色时，对漫画风格上色不准确，需要使用包含相应场景的模型或数据进行训练。模型能力模型能力：小型 LLM（7B,1.3B 等）的能力不稳定。目前这些尺寸的模型能力范围不一样，综合看，没有一个能达到通用全场景覆盖的。面对不同的场景，可能需要不同的模型，例如风格转换、上色、分辨率等场景分别测试DCT-Net、RealESRGAN、DDColor等不同模型。中国操作系统领创者给世界更好的选择中国操作系统领创者给世界更好的选择0 03 3 操作系统操作系统AIAI交互升级交互升级中国操作系统领创者给世界更好的选择deepin中的UOS AI第三方大模型支持5家大模

15、型服务；赋能浏览器、邮箱、文件管理器、看图、deepin IDE；deepin百度ERNIE-BotOpenAIChatGPT360智脑智谱ChatGLM科大讯飞星火中国操作系统领创者给世界更好的选择UOS AI 模型支持开发者在开发AI应用时，如果要支持多个AI模型，开发者需要单独对接，整体开发成本上升；开发者应用接入UOS AI，只需通过UOS AI 统一接口，对接多个模型，简化多模型对接成本，当前UOS AI已完成百度、讯飞、智谱、360智脑大模型的接入和管理。应用赋能，提高生态伙伴开发效率开发AI应用时，AI相关的公共能力开发将耗费开发者较大的人力和时间。UOS AI支持嵌入

16、到应用中，以快速实现应用AI化，且应用间调用相互独立，数据隔离，互不干扰；当前系统的浏览器、邮箱、全局搜索已完成接入，未来将开放给生态合作伙伴，助力生态伙伴AI应用开发降本增效。多模型统一接入，降低生态伙伴开发成本中国操作系统领创者给世界更好的选择UOS AI 模型支持自定义提示词-创造你自己的AI功能想有个Excel高手帮你解决数据处理问题？想找个编程高手帮你解答代码问题？想有个写作高手帮你润色文章.让UOS AI 的自定义提示词功能来帮你。自定义提示词功能，支持用户通过提示词，已实现个性化功能，定义不同角色，以满足不同用户的不同场景诉求，真正实现“个性化”功能。中国操作系统领创者给

17、世界更好的选择UOS AI API通过UOS AI接口，应用可以得到快速开发AI的能力而无需自行适配，国内外各大模型不断上架，也有不断转维甚至直接下架的，现在，都由uos ai来适配。所有热门模型，抽象统一接口支持多种传输，内容流式输出应用专属接口，数据相互独立统一账号管理，接口免配使用 UOS AI 插件，加入系统AI生态UOS AI基于大模型的function call功能和多种语音处理技术，获得比原语音助手更强大的自然语言理解能力，能够执行更复杂的命令。加入UOS AI生态，编写UOS AI插件，简单的描述功能，应用即可将自身支持的主打功能注册到AI助手以在适当的时候被唤起，系统获得

18、更多的智能使用场景，同时应用也将获得AI助手提供的启动入口，用户通过语言一站式完成目标任务。UOS AI 接口，获得AI开发能力中国操作系统领创者给世界更好的选择浏览器AI介绍百度搜索需要多次筛选才能找到答案？需要多轮对话才能描述清楚自己需查找的问题？AI聊天问答功能为你提供端到端的问答体验。在浏览器的右侧AI聊天框内，向AI大模型提问，UOS AI针对问题直接给出答案。你还可以基于答案进行追问，大大提高问题解答效率。AI快捷浮窗功能-阅读和创作助理阅读时，专有名称不懂？英文不认识？文章太长想直接看总结？创作时，缺乏创作灵感？有了主题想自动生成内容？想来个写作高手润色下文章？浏览器的AI快

19、捷浮窗功能来帮你，选中文字，AI可以帮你解释、翻译、总结等；还可以基于选中文字进行内容创作、改写润色等。如果对AI生成内容有疑问或想进一步调整？点击【继续聊天】，进入聊天界面，继续和AI讨论，向他提要求，让他输出你预期的内容。AI聊天问答功能-7x24h 知识顾问中国操作系统领创者给世界更好的选择邮箱AI介绍智能处理邮件-邮件处理秘书邮件太长想快速get到重点？想快速回复邮件？邮件出现不懂的概念想咨询？让邮件应用中的 UOS AI 来帮你。在邮箱应用中，UOS AI可一键邮件总结、翻译邮件，根据邮件内容生成回复初稿，解释邮件内容等。让邮件处理高效便捷，省时省力。会议纪要书写太耗时？工作总

20、结整理太低效？项目汇报邮件冗长耗精力？在邮箱中呼唤UOS AI，一键解决你的问题。把核心内容发送给UOS AI，他会根据你输入的要求和内容，AI自动编写邮件内容，并填充到邮箱编辑区内。同时提供了多个智能模板；也支持邮件改写，续写及语气调整，让邮件书写效率飞升。智能编写邮件-邮件编写助手中国操作系统领创者给世界更好的选择全局搜索AI介绍想从无尽的扫描图片中找到想要的证书？想要从密密麻麻的截图中找到产品的介绍截图？别再一张张地打开图片查找了，让全局搜索的AI图片文本搜索来帮你。得益于OCR识别的AI模型赋能，全局搜索的AI搜索功能，可查找图片中的文本，一键检索出包含搜索文本的图片。搜索图片上的

21、文字信息只模糊记得一些关键信息但忘记了文件名？大概知道搜索范围但忘记了准确的关键词？搜索条件较多但并不都包含在文件名中？AI自然语言搜索来帮你找到你想要的文件。得益于语言解析的AI模型赋能，全局搜索支持通过自然语言的模糊搜索；通过自然语言描述多个复合查询条件（文件名、文件时间、文件格式、文件内容等），AI可理解你的意图，高效匹配目标内容。AI自然语言搜索中国操作系统领创者给世界更好的选择deepin IDE-deepin IDE-国产自研国产自研IDEIDE接入接入AIAI代码补全代码补全代码翻译代码翻译代码生成代码生成代码注释代码注释代码助手代码助手CodeGeeX 插件 for dee

22、pin IDE，和智谱AI联合打造的人工智能编程助手。deepin IDE自主研发集成开发环境 deepin IDE除了包含IDE常用功能，还支持AI编程助手、多种兼容协议、多种开发语言、代码版本管理集成等。中国操作系统领创者给世界更好的选择AI PC-AI PC-基于基于INTEL METER LAKEINTEL METER LAKE的的NPUNPU使能使能UOSUOS桌面操作系统全局搜索功能桌面操作系统全局搜索功能TorchTorchCPUCPUOpenVINOOpenVINOPyTorchPyTorchMeteor LakeMeteor LakeNPUNPU 携手携手IntelInte

23、l，基于第，基于第1414代酷睿代酷睿内置内置NPUNPU（神经网（神经网络加速处理单元），实现络加速处理单元），实现UOS AI on Intel UOS AI on Intel Meter LakeMeter Lake的本地算力支持；的本地算力支持；实现路径：基于Intel OpenVINO，针对看图应用以及全局搜索的AI功能进行拓展；联合打造灵活、高效的异构计算平台，助力从云到端的AI应用加速落地。看图应用看图应用OpenVINOOpenVINOPyTorchPyTorchMeteor LakeMeteor LakeGPUGPUCPUCPUNPUNPURunning onRunning

24、onSupport bySupport byfunction extendsfunction extends中国操作系统领创者给世界更好的选择中国操作系统领创者给世界更好的选择0 04 4 操作系统操作系统&AI&AI未来初览未来初览中国操作系统领创者给世界更好的选择下一代操作系统&AI交互技术人类与AI协同的四种模式Embeding 模式Copilot 模式Agents 模式人类AI人类完成大部分工作AI人类人类AI人类和AI协作完成AI完成大部分工作设立任务目标过程中若干任务由AI提供信息或建议人类自主结束工作AI设立任务目标过程中若干任务由AI完全提供初稿人类调整和修改AI人类自主结束工作设立目标配置资源结果监控AIAI代理服务启动流程编排工具选择资源调度进度控制AI结束工作反馈未来模式？人AI？AI取代大部分工作？提出构想AIAI设立目标制定计划工具选择资源调度进度控制工作结果监控最终结果呈现统信软件官方微信公众号统信软件官方社群中国操作系统领创者中国操作系统领创者给世界更好的选择给世界更好的选择

友情提示

1、下载报告失败解决办法
2、PDF文件下载后，可能会被浏览器默认打开，此种情况可以点击浏览器菜单，保存网页到桌面，就可以正常下载了。
3、本站不支持迅雷下载，请使用电脑自带的IE浏览器，或者360浏览器、谷歌浏览器下载即可。
4、本站报告下载后的文档和图纸-无水印,预览文档经过压缩，下载后原文更清晰。

本文（郑幼戈-AI时代对操作系统交互的影响-演讲版.pdf）为本站（张5G）主动上传，三个皮匠报告文库仅提供信息存储空间，仅对用户上传内容的表现方式做保护处理，对上载内容本身不做任何修改或编辑。若此文所含内容侵犯了您的版权或隐私，请立即通知三个皮匠报告文库（点击联系客服），我们立即给予删除！

温馨提示：如果因为网速或其他原因下载失败请重新下载，重复下载不扣分。

上海品茶

郑幼戈-AI时代对操作系统交互的影响-演讲版.pdf

郑幼戈-AI时代对操作系统交互的影响-演讲版.pdf