1、基于图像技术,构建蘑菇街时尚目的地业务场景与目标内容业务中的buy the look电商情景中的搭配购0102032蘑菇街的愿景:时尚目的地好看好看+时髦时髦+能买到能买到3Look信息流直播导购商城销售图像算法技术蘑菇街 图像搜索 目标检测分割 时尚属性识别 图像分类图像技术能力不断增强,如何在业务中更好地交付用户价值?4Case 1:buy the look5 在look中,如何提供购买链接 人工添加,实物的店铺链接 比如:蘑菇街、官网、其他平台6没有实物的链接,如何提供?算法自动提供相似商品的链接产品形态技术方案 以图像搜索作为主要方法7目标目标检测检测Look图像图像服饰区域服饰区域蘑
2、菇街商品图像库基于区域的CNN特征提取图搜引擎图搜引擎相似相似商品列表商品列表目标检测的精细化 从5个类目,扩展到多个子类目8上衣裤子连衣裙包包鞋子T恤、衬衫、卫衣、西装、风衣、棉衣短裤、运动裤、西装裤、牛仔裤、棉裤连衣裙、半身裙、短裙包包鞋子p有利于搜索结果更精确p有利于搜索效率提升p采用ResNet模型pTop 1的准确率:92%模型压缩 面对问题:ResNet模型运行耗时长,导致图像搜索系统响应超时 解决方法:修剪pruning 面向大规模神经网络,并删除冗余的特征或参数9模型大小:81M,减少为59M运行速度:80ms,减少为40ms产品效果 用户体验上,补全了“能买到”的最后一环10
3、+Case 2:搭配购 搭配:不同服饰的穿搭,是时尚表现的载体。在蘑菇街有不同的搭配来源,分为两种类型11直接可见l Look:达人试穿的品牌的穿搭l 直播:主播试穿的服饰穿搭非直接可见l 商城:不同店铺的服饰穿搭l 散见于主图、副图、详情页中12商城中的服饰穿搭,如何透出给用户?搭配购:搭配购:将商城中的穿搭,精选出来。业务规则 展示:需要由模特来穿搭,且处于站立状态。美感:搭配具有审美的时尚感 能买到:商品链接、或者相似商品的链接13技术方案14商品图像集合粗选:站立模特穿搭图精选:搭配时尚图能买到:更多相似商品行人检测搭配模型图像搜索基于行人检测的穿搭图筛选15 行人检测 服饰部件检测搭
4、配模型16 如何度量穿搭的美感 受季节,时尚,流行趋势影响较大 搭配是抽象化概念,受主观影响较大 基于深度学习的搭配系统 多单品搭配 参考论文:Tangseng,Yamaguchi,Okatani.RecommendingOutfitsfromPersonalCloset,ICCV200717AB相似商品18 通过图像搜索技术,发现其他相似商品+产品效果19 将商品集合中,具有时尚感的搭配,呈现给用户 用户体验:好看时髦,能买到总结 通过图像算法的运用,赋能业务的场景化,提升用户体验 内容业务的buy the look 商城业务的搭配购 技术上的快速响应 技术模块 集成方案 场景数据的利用20Thank you!21