《北京师范大学&CIT:2021中国互联网教育产品测评与分析报告(42页).pdf》由会员分享,可在线阅读,更多相关《北京师范大学&CIT:2021中国互联网教育产品测评与分析报告(42页).pdf(42页珍藏版)》请在三个皮匠报告上搜索。
1、2021中国互联网教育产品测评与分析报告聚焦教育App产品陈光巨2021年年 8月月20日日教育APP产品2019年9月,教育部等八部门颁布的关于引导规范教育移动互联网应用有序健康发展的意见界定了教育App的内涵和外延:提出教育App是以教职工、学生、家长为主要用户,以教育、学习为主要应用场景,服务于学校教学与管理、学生学习与生活以及家校互动等方面的App。规范的教育App大致分为三类:市场竞争提供、师生自主选用;学校企业合作、学校组织应用;学校自主开发、部署校内使用。社会关注3项目介绍项目介绍建设互联网教育产品测评分析联合实验室开展互联网教育产品测评分析制定互联网教育行业设计、开发、应用标准
2、规范(如产品上线标准、产品进校标准等)设立应用实验基地,开展互联网教育产品应用社会实验开发教育App专业测评平台和工具支持常态化监管,动态监测产品和行业发展,提供互联网教育产品测评与分析咨询服务编制互联网教育产品测评与分析报告定期对互联网教育产品形成测试、分析和建议报告为政府加强互联网教育产品监管和治理提供支撑;为学校、家长、学生遴选优质互联网教育产品提供支持;帮助企业改进优化迭代升级互联网教育产品教育APP测评与分析联合实验室联合实验室依托互联网教育智能技术及应用国家工程实验室,与西南/扬州/渤海大学和网龙网络公司在软件测评资质/技术/人员/场地/设备/工具的基础上建设。联合实验室具备常规的
3、功能性软件/性能/易用性/可靠性/兼容性/安全性测试等软件测试能力,同时组织相关人员开展体验测试,进行舆情分析、隐私保护和数据安全测试。联合实验室建设目标是形成对教育APP在内的互联网教育产品测评、分析和政策的服务能力;开展社会实验,验证互联网教育产品进入校园后对教育教学质量、教育评价改革、教育管理治理、学生成长发展等各方面的实际使用效果及其贡献深入研究;跟踪教师、学生使用互联网教育产品的数据,从用户使用角度进行测评,发现问题,提出建议;基于监测数据形成研究报告,为互联网教育产品应用的优化迭代升级提供参考。西南大学CMA、CNAS资质,信息安全检测扬州大学人工体验测试北京师范大学网龙网络公司安
4、全合规测试、兼容性测试渤海大学舆情分析、隐私保护和数据安全教育APP测评与分析联合实验室联合实验室拥有的软著、专利;具备CMA、CNAS等软件测评资质;实验室环境和测评过程展示北京师范大学北京师范大学:牵头单位:牵头单位-黄荣怀、刘德建、陈光巨、周伟、陈虹宇、曾海军、黄荣怀、刘德建、陈光巨、周伟、陈虹宇、曾海军、童莉莉、焦艳丽、李菊童莉莉、焦艳丽、李菊西南大学西南大学:CMACMA、CNASCNAS资质,信息安全检测资质,信息安全检测-刘革平、张为群、周彦晖、丁晓刘革平、张为群、周彦晖、丁晓明、赖祥伟、王茂忠、周敏、明、赖祥伟、王茂忠、周敏、郑旭飞郑旭飞、张颖、余亮、廖剑、张颖、余亮、廖剑扬州
5、扬州大学大学:人工体验测试人工体验测试-田阳、张晶雪、顾思苇、许筱宇、田阳、张晶雪、顾思苇、许筱宇、顾婧萱、顾婧萱、吴宇辰吴宇辰渤海大学渤海大学:舆情分析、隐私保护和数据安全:舆情分析、隐私保护和数据安全-马玉慧、史任民、王吉、马玉慧、史任民、王吉、唐章蔚唐章蔚、胡卫星、张文慧、胡卫星、张文慧、于春艳于春艳网龙网龙网络公司网络公司:安全合规测试、兼容性测试:安全合规测试、兼容性测试-陈长杰、王柟、吴玉琦、林剑华、陈长杰、王柟、吴玉琦、林剑华、杨郑旋杨郑旋教育APP测评与分析实验室参与单位及成员项目介绍建设互联网教育产品测评分析联合实验室开展互联网教育产品测评分析制定互联网教育行业设计、开发、应
6、用标准规范(如产品上线标准、产品进校标准等)设立应用实验基地,开展互联网教育产品应用社会实验开发教育App专业测评平台和工具支持常态化监管,动态监测产品和行业发展,提供互联网教育产品测评与分析咨询服务编制互联网教育产品测评与分析报告定期对互联网教育产品形成测试、分析和建议报告为政府加强互联网教育产品监管和治理提供支撑;为学校、家长、学生遴选优质互联网教育产品提供支持;帮助企业改进优化迭代升级互联网教育产品互联网教育产品测评与分析互联网教育产品测评与分析云平台平台A C l o u d P l a t f o r m F o r Te s t a n d A n a l y s i s o f
7、C y b e r l e a r n i n g P r o d u c t s适合互联网教育产品开发商、互联网教育产品使用者(学校、家长、学生)、政府监管部门及教育领域研究者。For educational product developers,users(schools,parents and students),researchers and managers of regulatory departments.基于云计算架构,具有接入各类测评方法的能力,能提高互联网教育产品测评与分析的工作效率。Methods for test and analysis can be integrat
8、ed within the cloud computing architecture,which can improve the efficiency in test and analysis of educational products.提供教育应用测评与分析量表、数据分析及自动化测评工具,支持教学测试、适配测试、安全测试等测试方法,能够满足教育产品测评、分级、预警等场景。Scale,survey,data analysis tools and automated testing utilities are provided for instruction test,adaptation
9、test,safety test and etc.Services for assessment,grading,and early warning will be provided.将构建幼儿教育、基础教育、高等教育、语言培训等类型的综合性的测评报告,涵盖当前主流的中国互联网教育产品。Different types of reports will be built for covering mainstream Chinese educational products,including preschool education,basic education,higher education
10、,language training and etc.平台简介平台简介Introduction互联网教育产品测评与分析云平台平台主要功能平台主要功能Main Functions全生命周期测评管理Full lifecycle workflow从申请测评、制定方案、初次测评、整改、复测、编制报告等测评活动做全生命周期的管理。Managethewholelifecycleoftestactivitiessuchasrequestfortesting,formulation of plans,initial evaluation,rectification,retesting,preparationo
11、freports,etc.教育应用测评工具库Useful tools and utilities 帮助精准定制,敏捷交付,快速测评,降低教育应用测评的技能要求。Help customizing test precisely,agilelyand rapidly.It will greatly reduce thethreshold ofrequired skills to test andanalysis educational applications.!教育应用大数据预警Data-driven forecasting and alert利用教育应用测评的数据,构建教育应用大数据预警系统,对
12、教育应用的评论、安全、舆情进行预警,及早发现,及时处理。Accumulated data from test and analysis of different kinds of educational applications,an early-warning system based on big data can be developed.教育产品质量标准管理Quality standard management内置教育产品质量指标体系管理功能,支持对教育应用进行测评与分析。Quality standard of cyberlearning product are built-in fo
13、r supporting test and analysis of educational applications.为政府政府加强教育App 监管和治理提供支撑Providing support for the government to strengthen the supervision and administer.为学校学校遴选优质教育App 提供支持Supporting schools in selecting quality education Apps.为学生学生提供有选择性的自主学习AppSupporting students to select autonomous lea
14、rning App.帮助家长家长购买合适的教育App 产品Help parents purchase appropriate educational services.帮助研究者研究者拓展教育App 研究Help researchers expand educational researches.帮助企业企业升级教育App 产品Help enterprises upgrade their products.用户痛点用户痛点User requirements业务架构业务架构Business ArchitectureRegulatorParentsStudentSchoolDeveloperRes
15、earcherThe Cloud Platform for Test and Analysis of Cyberlearning Products App ClientApp ServerLearning ServicesUpgrade AppBuild ReportPublish Report应用架构应用架构Application ArchitectureIaaS云服务器云数据库对象存储内容分发网络容器仓库容器服务应用防火墙即时通信短信服务域名服务人工智能能力语音识别图像识别语议识别情感分析文字识别人脸识别内容识别语义分割测评工具平台应用管理分级管理指标管理知识管理测评管理报告管理应用预警仪
16、表盘具体报告教育应用A教育应用B教育应用C测评方案与报告测评方案与报告测评方案与报告展现形态测评报告案例集教育应用测评年度报告教育应用测评管理系统监控大屏蓝色为教育应用测评平台自有能力。Own abilities of platform for test and analysis educational applications are with blue color,including management for applications,grades,indexes,knowledge,tests,reports,dashboards,and big screens.Python,C#,
17、SQL,Javascript are mainly used programming languages.绿色为云厂商/私有云提供云平台的能力。Capabilities from other services by public cloud or private cloud are with green color,such as server,database,object store,docker,firewall,messages,domains and etc.紫色为基于平台构建出的功能。Interfaces built on the platform are with purple
18、color.That is personalized testing reports for each different kinds of educational reports.DNS服务器xx.xx.xx.2/xx.xx.xx.2xx.xx.xx.3Browser/APPFVS/F5备FVS/F5主NginxNginxNginxJexusJexusJexusJexusJexusJexusJexus分布式数据库数据库 读数据库 写同步Redis分布式缓存HDFSWeedFS分布式文件系统HBaseMongoDBNEO4jNoSQL数据库LucenceElaticSearchSolr搜索引擎
19、虚拟IP xx.xx.xx.2/3Jexus 部署架构:分布式缓存、数据库、文件系统、搜索引擎及部署架构:分布式缓存、数据库、文件系统、搜索引擎及WebWeb服务器服务器Deployment architecture with distributed caches,databases,filesystems,search engines,and web servers.教育应用测评与分析平台后台:任务看板教育应用测评与分析平台后台:任务看板Admin Site:Task Kanban Board测评与分析实验室:设计与执行测评方案测评与分析实验室:设计与执行测评方案Test and analy
20、sis laboratory:design and implement test programs人工评价:人工评价:从内容适配度、平台支持度、用户体验、互联网学习认知四个一级维度,二十一个二级指标。Artificial test:4 first-level dimensions and 21 second-level indicators,including the content fit degree,platform support degree,user experience,and cyberlearning cognition.机器测评:机器测评:使用专业测试设备,从内容监管、应用
21、稳定性、兼容性、敏感权限和隐私保护四个维度进行自动化测试。Machine test:Use professional testing equipment to conduct automated testing from four dimensions:content supervision,application stability,compatibility,sensitive permission and privacy protection.舆情分析:舆情分析:爬虫程序在应用市场爬取教育App 的评论数据,并使用情感分析技术。Public opinion analysis:The cr
22、awler crawls the comment data of educational apps in the application market and then uses sentiment analysis technology to get different opinions.企业:查看测评报告企业:查看测评报告Product developer:view the test and analysis report.数据可视化数据可视化加强教育App 质量监管与监测,建立常态化教育App 备案与动态退出机制。Strengthen the quality supervision an
23、d monitoring of educational APPs,and establish a regular registration and dynamic withdrawal mechanism for educational Apps.加快研制教育App 质量评价标准体系,加强优质教育App 中试推广。Accelerate the development of a quality standard system for educational apps,and strengthen the pilot-scale promotion of high-quality educatio
24、nal apps完善在线教育公共服务体系,教育App 企业提高行业自律。Improve the online education public service system and educate App enterprises to improve their self-discipline.加强教育App 的版权和知识产权保护。Strengthen copyright and intellectual property protection of educational apps.建立教育App 大数据预警与处置平台,增强个人隐私和数据安全意识。Establish an education
25、 App big data early warning and disposal platform to enhance personal privacy and data security awareness欢迎贡献欢迎贡献Contributions are welcomed让我们一起为互联网教育产品测评与分析提供支持。让我们一起为互联网教育产品测评与分析提供支持。Let us work together to provide support for the test and analysis of cyberlearning products.项目介绍建设互联网教育产品测评分析联合实验室开
26、展互联网教育产品测评分析制定互联网教育行业设计、开发、应用标准规范(如产品上线标准、产品进校标准等)设立应用实验基地,开展互联网教育产品应用社会实验开发教育App专业测评平台和工具支持常态化监管,动态监测产品和行业发展,提供互联网教育产品测评与分析咨询服务编制互联网教育产品测评与分析报告定期对互联网教育产品形成测试、分析和建议报告为政府加强互联网教育产品监管和治理提供支撑;为学校、家长、学生遴选优质互联网教育产品提供支持;帮助企业改进优化迭代升级互联网教育产品研究思路行业调研指标制定产品筛选测评实施机器测评人工测评舆情爬取报告撰写数据分析基于人工测评的教育基于人工测评的教育APP评估评估测评报
27、告测评报告参与测评人员获取教育APP相关国家标准培训测评能力评估测评APP筛选原则筛选测评准备进入测评实验室测评测评人员体验教育APP基于测评指标测评综合测评确定测评版本主机安装教育APP测试软件选用软件扫描与测试不通过通过填写测试计划填写测试计划测评报告测评报告不通过通过不通过通过没有参与测评人员自动化测试用例设计测试评审搭建测试环境测试评审执行测评提交BUG问题记录BUG检测BUG检测回归测试有教育教育APP舆情分析舆情分析应用市场评论文本抓取应用市场评分文本抓取评论文本预处理结果分析用户评论情感分析评论热点词提取结果分析测评报告测评报告测评方法人工测评机器测评舆情分析2016年2018年
28、2021年总数持续测评至今总数持续测评至今新测App合计幼儿教育132 61 3 6基础教育3210 286 5 21高等教育83 90 0 3职业与成人教育10323126IT教育91 1221 4艺术心理132 70 1 3语言学习124166212混合类1318135合计760教育APP测评产品的选择保持研究持续性面向C端和B端用户的产品已有较为广泛的用户群可以注册试用测试符合一定技术规范典型教育APP产品及分类60个典型教育APP产品名单类型产品名称幼儿教育(6)宝宝巴士儿歌 叽里呱啦小伴龙智慧树斑马迈思星球基础教育(22)吃掉物理东方优播高途课堂家长帮简单课堂纳
29、米盒松鼠AI学而思网校洋葱学院猿辅导掌门1对1作业帮学霸君学生 高思教育三好网家教帮晓黑板学科网化学实验加试 小盒学生一起作业希沃白板高等教育(3)学堂在线中国大学mooc好大学在线职业与成人教育(6)粉笔教育华图教育能力天空医学教育网 e会学华图在线语言学习(13)英语趣配音英语流利说扇贝单词洛基英语魔力耳朵51talkDaDa英语平安好学英语 VIPKID阿卡索英语 盒子鱼英语 iTEST爱考试沪江网校艺术心理(3)美院帮弹琴吧动因体育IT技术(4)编程猫Nemo核桃少儿编程 创客学院课工场混合类(3)钉钉腾讯课堂超星学习通评测指标2016年、2018年互联网教育产品发展指数指标2021年
30、教育APP测评指标平台支持度和内容适配度一、教育 APP 产品持续迭代,学习内容、呈现方式越来越丰富,但部分产品与学生的心理特征、认知水平、行为习惯等匹配不足。极少数教育App的教与学目标与其服务学段学生所要学习的内容对应性不够强,未能充分体现教育目标,教育App产品积极使用新兴信息技术,但在促进学生学习方面未能有效降低学习者的认知负荷。7.12 7.11 6.72 6.68 6.75 6.63 6.59 6.11 5.605.806.006.206.406.606.807.007.20职业与成人教育基础教育语言学习学段分类7.47 7.17 7.00 6.93 7.15 6.85 6.65
31、6.33 5.65.866.26.46.66.877.27.47.6高等教育 职业与成人教育基础教育 幼儿教育 混合类IT技术语言学习 艺术心理学段分类专项分类内容适配度平均分分布图平台支持度平均分分布图6.87 6.87 6.81 6.67 6.85 6.67 6.65 6.07 5.605.806.006.206.406.606.807.00职业与成人教育高等教育 基础教育 幼儿教育混合类语言学习IT技术艺术心理学段分类专项分类互联网学习认知平均分分布图平台支持度和内容适配度5.005.506.006.507.007.508.008.50职业与成人教育基础教育语言学习学段分类有效性用户界面
32、学习支持呈现方式教学策略反馈评价各类教育各类教育App测评产品测评产品平台支持度平台支持度二级指标得分二级指标得分学习支持整体得分较高,特别是高等教育的产品在该方面得分最高,反应出高等教育产品的此功能相对成熟,而且这个阶段的用户对互联网产品的应用更加熟练,获取的学习支持更高。备受关注的基础教育阶段的产品在平台支持度各个维度的得分都处于中等水平,表明其提升的空间很大。幼儿教育的有效性得分最高,高教和艺术心理相对更低。呈现方式得分差异较大,幼儿教育与艺术心理得分最低,职业与成人教育、IT技术专项得分最高。反馈评价特别是教学策略整体得分相对较低,表明在支持线上教学策略和学习过程反馈评价方面有待继续优
33、化提升以支持线上学习活动。平台支持度和内容适配度6.006.006.506.507.007.007.507.508.008.008.508.50高等教育 职业与成人教育基础教育 幼儿教育混合类IT技术语言学习 艺术心理学段分类专项分类适用性内容结构针对性目标指向媒体设计各类教育各类教育App测评产品测评产品内容适配内容适配度度二级指标得分二级指标得分从学习内容来看各学习单元有明确的学习目标说明,目标描述准确、具体的适用性和目标指向方面,高等教育最高,艺术心理最低。描述教学内容的组织架构、教材所涵盖的内容具有适当深广度的内容结构也是高等教育最好,混合类次之;IT技术较低。职业与成人教育最有针对性
34、,幼儿教育和艺术心理针对性得分最低。媒体设计的分值波幅最小,幼儿教育理应也是最好的。经调研发现,被测教育App 有近七成采用了新兴信息技术,诸如人工智能、虚拟学习空间、OCR(文字识别)识别等技术。就内容适配分项而言,得分在6.258.00之间学习兴趣和学习动机激发二、教育 App 普遍缺乏对学生学习兴趣的激发和内在学习动机的激励,而是采用“成瘾性”的物质刺激方式诱导学生学习,外在积分、商业奖励用于完成作业和任务,缺少对学生学习主动性、创新思维、探究性学习的培养。基于分类的用户体验二级指标得分在促进有效学习(6.007.33),激发学习者学习动机(6.007.17)方面,目前的教育App 有待
35、提升,尤其是媒体效果呈现和相关教与学过程兴趣调动存在明显提升空间,因为其选用应按教学内容/策略等进行使之达到媒体使用的适切和媒体应用原则。操作帮助指标下各类产品得分相对较低,且艺术心理类产品低于6 分,说明操作方面确实需要给予更多支持。5.005.506.006.507.007.508.00幼儿教育职业与成人教育语言学习学段分类动机激发学习指导媒体效果易用性操作帮助学习兴趣和学习动机激发许多教育App 对学习者一般采用游戏化积分激励模式、课时优惠等手段如学习累积积分分段升级,领养虚拟宠物累积积分和升级实现虚拟宠物的成长等成瘾性的方式黏住学习者持续参与学习。也存在一些与教育无关的内容和功能,如短
36、视频、抽奖、诱导消费、续费、会员充值等现象。更有采用娱乐圈偶像和低级搞笑的方式来吸引学生。某APP 养鱼成长攻略功能测试与产品成熟度三、教育App的软件稳定性和兼容性尚好,但跨平台、跨终端、跨场景的智能互联性有待增强。教育App需要考虑为使用低版本系统的学习者提供移动在线教育资源接入机会。另外不良内容、广告等问题困扰用户,直接影响用户体验。高等教育幼儿教育基础教育职业与成人教育语言学习艺术心理IT技术混合类学段分类专项分类闪退情况10.0010.009.919.839.8310.0010.009.75重启情况10.0010.009.9510.009.8310.0010.0010.00异常情况1
37、0.0010.009.919.679.839.6710.009.75ANR情况10.009.679.739.509.8310.009.509.25Crash情况10.0010.009.8610.0010.0010.009.509.759.009.209.409.609.8010.0010.20闪退情况重启情况异常情况ANR情况Crash情况教育App测评产品的稳定性测试表现本项测试分“闪退”、“重启”、“异常”、“ANR(应用程序无响应)”和“Crash(程序异常崩溃)”5小项,采取机器测试方式。记录其在过程中的相关次数,将结果转化为10 分制。被测60款典型App总体稳定性表现尚可。得满分的
38、App共46个,占比76.67%。其余闪退、重启、ANR等各类问题均有不同程度的发生。被测App的兼容性测试,58个App都以满分通过了测试,占比96.67%。说明各App在适配不同手机型号和版本上表现优异,但是有两款App的对应问题都是不支持安卓6.0以下操作系统。据腾讯移动分析统计,2021.2.23-2021.5.24我国安卓6.0及以下操作系统占比为28.6%,仍具有很大的份额。教育App开发和运营需要做好兼容和性能优化,为使用低版本系统的学习者提供移动在线教育资源接入机会。功能测试与产品成熟度9.78 9.33 9.08 8.39 9.08 8.83 8.56 8.33 10.00
39、10.00 9.85 9.17 9.25 9.50 9.67 8.00 9.44 8.83 9.25 9.00 9.08 8.67 9.33 8.00 7.94 7.17 8.75 8.00 6.92 8.33 5.006.007.008.009.0010.0011.00高等教育幼儿教育基础教育职业与成人教育IT技术混合类语言学习艺术心理学段分类专项分类综合得分不良内容无关功能虚假广告和扣费充值通过在手机终端安装被测App,并按对应维度-“不良内容”、“无关功能”和“虚假广告、广告泛滥和扣费充值”进行测试。满分为10分,每发现1 处违规扣1分,扣完为止。测试结果显示,尽管被测App没有出现特别
40、重大问题,但从“虚假广告、广告泛滥和扣费充值”得分来看仍存有问题。内容与功能安全得分功能测试与产品成熟度备案App存在不适合青少年的功能和内容“热门明星配音”栏目存在“饭圈”等现象;部分配音材料存在不良内容,如某材料名为“欢乐氰化物:吓坏店员 真花式抢劫法”。必要功能方面,一般要求教育App提供投诉举报渠道和客服系统。两项功能均提供的App有52款,占比86.67%,部分App提供了举报电话、客服电话、在线人工客服等功能。有4款App两项功能均缺失,占比6.67%。个别产品未提供“必要功能”-投诉举报渠道和客服系统各类无关功能、广告等仍然较多,不少App内存在金币兑换、抽奖、引流到其他平台(微
41、信群、微信公众号等)等现象。测试人员反映部分App在注册后会收到营销电话和短信。不少App存在虚假广告、广告泛滥和扣费充值等问题隐私保护与数据安全个人隐私与数据安全总体得分情况测评的教育App在个人隐私与数据安全这个维度测评的平均得分为6.9分,大部分被测App的分数在68之间。其中,8 分以上的App共有12 个,5 分以下的App有6个,得分为0分的即没有隐私政策说明的教育App有2个。表明仍有部分产品需要注重个人隐私与数据安全。四、教育App运营商基本具备个人隐私与数据安全意识,但是在收集与使用的个人信息的规范性、与声明的一致性等方面都还存在较多不足。基于测评视角看,当前互联网教育产品在
42、便于交互、共享、知识传播等方面略显不足,场景兼容性有待提升。另外本次测评也发现教育App知识产权保护意识薄弱,一些教育App存在知识产权纠纷。隐私保护与数据安全74.84%74.84%71.35%71.35%69.48%69.48%68.85%68.85%67.59%67.59%67.14%67.14%64.22%64.22%0.580.580.600.600.620.620.640.640.660.660.680.680.700.700.720.720.740.740.760.76条款状态信息保存征得同意信息收集对外提供用户权利信息使用被测App的七个维度的合规率如上图所示:其中合规率最高的
43、是条款状态为74.84%。较低的是用户权利和信息使用,分别为67.14%和64.22%。说明有必要进一步提高合规率。一级指标合规率侵权纠纷案件截图社会评价五、目前我国应用市场中近六成教育App得到了用户的积极评价,但改进优化的空间依然不小。从用户评论中提取的TOP50关键词以及用户评论内容可以看出,教育App的内容、功能、老师授课水平、课程质量等是用户评论中的关注焦点。用户对当前我国教育App持基本认可的态度。从本研究爬取的1180个教育App的46684条评论的情感分析结果来看,58.08%的评论表达出了积极情感,14.38%的评论是中性情感,29.73%为消极评论。本次测评的60个典型教育
44、App的用户评论中,55.29%的评论为积极评论,14.98%的为中性评论,29.73%的为消极评论。用户打分的中位数为4.1分,平均分为3.72分。但是仍有少数教育App存在的问题较多,用户评论中的消极情感评论占半数以上,用户打分平均低于2分。积极情感评论数58.08%中性情感评论数14.38%消极情感评论数27.54%积极情感评论数55.29%中性情感评论数14.98%消极情感评论数29.73%1180个个教育教育App用户评论的情感分析结果用户评论的情感分析结果60个典型教育App的用户评论的情感分析结果图社会评价60个典型教育App的用户打分分数统计图3.72被测教育App 在应用市场
45、中的用户打分统计显示:用户打分的最高分为4.9 分,最低分为1.1 分,整体集中在3-4.6 分,平均分为3.72 分,中位数为4.1 分,评分的上四分位数为4.6 分,评分的下四分位数为3 分。整体的分数情况如上图所示。(应用市场中用户评论满分是5 分)社会评价序号词语序号词语序号词语1软件18登录35好评2学习19使用36学校3老师20时间37题库4希望21觉得38适合5下载22建议39注册6不能23显示40体验7单词24考试41口语8课程25免费42结果9翻译26好用43练习10广告27作业44答案11推荐28闪退45听力12功能29客服46背单词13视频30会员47上课14问题31不会
46、48阅读15手机32学生49提高16感觉33应用50知识17内容34东西3.72应用TF-IDF 和TextRank 相融合的方法,提取出1180 个教育App 的46684条用户评论中前50 个关键词(右表)。这些关键词代表了用户评论关注的热点。如教 育 App 的内容、提供的功能、老师授课水平、课程质量等是用户评论中的关注焦点,也是影响用户体验的主要因素。此外,广告、闪退、不能、建议等词出现在提取的TOP50 中,说明当前我国教育 App 中的广告、闪退等问题是困扰用户的主要问 题。建议设立教育App质量监管与监测中心,开展教育App第三方质量认定,加强教育App质量监管和监测,建立常态化
47、教育App备案与动态退出机制。加大无视用户个人隐私和数据安全教育、内容适配度较差的教育App运营者的责任,促进教育App有序运营。被测教育App在内容和功能体验、软件稳定性和兼容性均呈现较好水平,但不同手机终端在体验上仍有差异。建立教育App资质认定和退出机制,有利于教育App市场的有序健康发展。建议面向行业和从业人员开展专门针对教育App领域的相关资质认证和职业技能认证,提高行业门槛,带动软件质量提升。加强教育App质量监管与监测,建立常态化教育App备案与动态退出机制当前,我国尚未形成完善的教育App质量评价标准,亟待研制教育App质量评价标准体系,为测评和分析教育App提供依据。培育扶持
48、优质教育App,选取有条件的地区开展教育App中试推广,形成示范效应。通过建设示范区、示范校,形成相关研究成果,辅助主管部门、学校对App的使用进行合理选用、统筹管理,切实减轻中小学生的负担。形成经验进行推广。同时淘汰违法违规、管理混乱、内容有害、利益勾结、短视功利的教育App,形成良性竞争的市场和清朗的网络空间。加快研制教育App质量评价标准体系,加强优质教育App推广发展建议建立一套完整、系统的在线教育公共服务体系,服务于教育App产业发展,推动形成教育App产业生态链,提升教育App质量。当前,教育App企业趋向于追逐利益,未来需要平衡商业性和公益性,避免过度商业化运作。教育App企业肩
49、负教育使命,需要提高行业自律,提升教育App质量,为学习者营造安全、经济、实用的移动学习环境,为学习者提供丰富的移动学习资源。通过提高行业自律,规范教育App行业行为,协调行业利益关系,避免行业间恶性竞争。完善在线教育公共服务体系,教育App企业提高行业自律互联网技术有利于教育资源的开放供给,可以为学习者提供更加丰富便利的学习渠道,但是也要考虑到投入大量人力和经费研发的内容和技术面临的侵权和商业性复制问题,建议未来可以建立教育资源开放共享提供机制,加强教育App在知识产权保护方面的法律宣传和行业自律。建立资源开放共享机制,加强教育App的知识产权保护发展建议针对教育App在内容和功能上存在的问
50、题,应建立风险预警机制、白名单和黑名单制度,构建互联网教育应用大数据查询平台,支持各级决策。建立教育App在线查询平台,提供各类教育App多维度综合评价功能。同时开展网络安全培训,面向从业人员开展法律法规、职业道德等培训,面向中小学校长、教师、家长等开展法律法规、上网技能、安全防护、信息甄别等培训,有效提高相关人员的网络安全意识,增强个人隐私和数据安全保护。当前,教育App相对比较独立,跨平台、跨终端、跨场景的智能互联性较弱,未来建议提升教育App的连接、感知、交互处理能力,增强教育App的智能互联特性,服务于教育教学改革与创新人才培养。建立教育App大数据预警与处置平台,增强个人隐私和数据安全意识