1、人工智能为新零售带来的想象空间人工智能为新零售带来的想象空间 任小枫 阿里巴巴IDST首席科学家兼副院长 Imagine What Artificial Intelligence Will Bring to Future Retail Chief Scientist and Deputy Dean Institute of Data Science and Technology(iDST),Alibaba 新零售新零售 视觉感知视觉感知 +通用?+高信息量?+远距?+被动?+匹配人眼?-光照条件?-遮挡?-精度?视觉感知视觉感知：物物 ILSVRC ILSVRC 大规模分类竞赛大规模分类竞赛

2、1000类别 140万张图 （来自ImageNet）?ILSVRC ILSVRC 大规模分类竞赛 大规模分类竞赛 Top5错误率：产生五个标签，对一个算对?Top5错误率对比：机器 2.3%vs 人 5%?深度学习深度学习?【来源：ILSVRCChallenge2017】?ILSVRC ILSVRC 物体检测竞赛物体检测竞赛 200类别 50万张图?人人 车车 摩托车摩托车 头盔头盔?ILSVRC ILSVRC 物体检测竞赛物体检测竞赛 mAP：平均精度均值?检测结果取决于阈值变化阈值变化精度/召回?正确检测：标签正确+位置正确?物体检测示例物体检测示例 DeepResidualLearnin

3、gforImageRecogniKon,Heet.al.2015?语义分割语义分割 Residual Conv-Deconv Grid Network for Semantic Segmentation,Fourure et al 2017?视觉感知视觉感知：人人 基于视觉的跟踪定位基于视觉的跟踪定位 The Solution Path Algorithm for Identity-Aware Multi-Object Tracking,Yu et.al.2016?多人姿态估计多人姿态估计 Realtime Multi-Person 2D Pose Estimation using Part

4、Affinity Fields,Cao et.al.2017?动作识别动作识别 Two-Stream RNN/CNN for action recognition in 3D videos,Zhao et.al.2017 计算机视觉展望计算机视觉展望 看的见的都能分析看的见的都能分析?看不见谁也没办法看不见谁也没办法?相机相机?数据数据?计算量计算量?成本成本?信息 信息 增强现实 智慧门店 机器人 万能助手 2 3 4 1 Augmented Reality Smart Store Robotics Wearable 1.1.增强现实增强现实 1.三维定位2.三维建模3.真实渲染?ARKit

5、 Shopping Waypoints by Bruce Wang?ARKit Demo,made by“A for Apple”?2.2.智能门店智能门店 Amazon GoAmazon Go 线下智能线下智能 1.人流2.停留&查看3.货架监控4.身份&个性化5.支付.表情识别表情识别 Emotion Research Lab,2017 通用线下智能通用线下智能 1.人流2.停留&查看3.货架监控4.身份&个性化5.支付.3.3.机器人机器人 送货机器人送货机器人 Starship Technologies,London,2017 送货机器人 送货机器人 Gita the Robot Po

6、rter,Piaggio 2017 送货无人机送货无人机 Matternet and Swiss Post,2017 无人机控制无人机控制 Estimation,Control,and Planning for Aggressive Flight With a Small Quadrotor With a Single Camera and IMU,Loianno et.al.2017?通用机器人通用机器人？Spot Mini,Boston Dynamics,2016 4.4.个人（万能个人（万能）助手助手 TheCircle(2017)?个人视角记录生活识别环境/他人识别自己的动作/状态对话

7、/Q&ASnap SpectaclesSnap Spectacles SamplefromPhandroid,2016?Google Glass Google Glass 企业版企业版 穿戴相机穿戴相机：行为识别行为识别 Neuro-Machine Augmented Intelligence Lab,KAIST,2017?未来世界未来世界？Keiichi Matsuda,2016?增强现实 智能门店 机器人 万能助手 2 3 4 1 Augmented Reality Smart Store Robotics Wearable 增强现实增强现实 智能门店智能门店 机器人机器人 可穿戴可穿戴 视觉未来视觉未来 +通用?+高信息量?+远距?+被动?+匹配人眼?-光照条件?-遮挡?-精度?+数据?+算法融合?+传感器融合?+物理交互?+云端混合?增强现实增强现实 智能门店智能门店 机器人机器人 可穿戴可穿戴 增强现实增强现实 智能门店智能门店 机器人机器人 可穿戴可穿戴 虚拟现实虚拟现实 交互媒体交互媒体 新制造新制造 手势识别手势识别 脑机接口脑机接口 智能推荐智能推荐 视频植入视频植入 商品搜索商品搜索 智能设计智能设计