京东以科技引领的创新服务，正在越来越多地融入广大用户的网购生活。2019年6月，在美国长滩召开的计算机视觉顶级会议CVPR 2019上，京东AI研究院在视频动作识别、商品图片识别及精细粒度蝶类图片识别等3项学术比赛中均勇夺第一名，充分展示了京东在人工智能视觉领域的技术优势。

京东在AI视觉领域的典型应用就是很多消费者非常熟悉与喜爱的“拍照购”功能。这一功能可谓是集AI视觉应用技术之大成。今年618期间，京东AI技术大展身手。拍照即可寻找心仪商品的“拍照购”功能、提供24小时全天候服务的在线智能客服等AI应用，让消费者“买买买”越来越便捷，用户体验变得更加优质、贴心。这些功能的幕后英雄就是京东AI研究院的AI能力。

拍照购、智能结算台 便捷购物生活背后的精准图像识别

无论是线上还是线下，图像识别技术总在悄然发生作用，让购物愈加便捷。当你在线下遇到一件心仪的衣服，或者是被“种草”了某件单品的时候，如何快速在线上get同款?将商品的图片上传至京东平台，过不了几秒钟，相关商品就会被推送到你的面前。即使是非标准化和不易描述的，诸如时尚品、食品、美妆、日用品等，都可以轻轻松松利用一张图片，迅速搜索出相似度的商品。

除了找同款或相似款，拍照购还可以用在很多其他场景中，例如外文以及在无法用文字描述的商品时，可以用图片搜索即可获得商品，还可以在线下商场与线上同款比价。甚至可以针对某一元素寻找周边产品，例如吃鸡、喜洋洋、hellokitty等，可以衍生大量周边产品。

拍照购覆盖庞大正品商品库，收录超数亿正品商品，全品类覆盖，支持多商品主体检测，可同时识别图像中多个商品，并能够根据不同商品主体的显著性，优先推荐显著商品主体对应的购买链接，无需框选，更方便用户快速寻找到自己心仪的商品。在今年618期间，“拍照购”入口订单金额是去年618期间的10倍，618当天更是去年618当天的12倍，人工智能技术的提升为拍照购的精准度、用户体验带来跨越式的升级。

在线下购物的时候，同样可以体验到这种超乎寻常的便捷，智能结算台便是一个鲜明的体现。不用排队、无需等待，在应用了智能结算台的无人便利店或无人超市，结算会变得非常便捷、智能化：挑选好自己所需要商品后，首先将多件商品同时放置在智能结算台上，然后点击人工智能识别按钮，即可快速识别出商品和对应的价格，最后只需使用相关支付平台完成付款，就可以将商品全部取走。

它是基于京东 AI 领先的图像识别技术实现自动商品识别，单次识别多个商品耗时小于 1 秒，可以使店内消费者平均结账效率提升 30% 以上。同时，它也可以实现在多商品、多角度摆放下达到商用准确率要求。此外，得益于图像识别技术的应用，采集入库商品信息的时候也同样方便，短时间内就可以实现一批新商品的入库和建模，简单操作、快速入库。

今年3 月，京东AI与香港冯氏零售集团共同打造的人工智能创新产品智能结算台落地香港，分别应用于冯氏零售集团旗下 Circle K 位于长沙湾和铜锣湾的旗舰店。双方表示将强强联手，通过一系列的 AI+ 零售的创新成熟产品，助力冯氏零售集团在零售市场率先实现智能化升级，打造无界零售的新体验。

斩获国际大奖的图像识别技术 助力线上线下智能零售体验提升

众所周知，京东的SKU众多，面对数量庞大、品类众多、差别细微的商品，京东是如何在线上线下的多种购物场景中做到商品的精准识别?这离不开京东AI研究院领先的图像识别技术的应用。

具体来说，京东这一基于自研的全新精细图像分类算法可以通过对原始图像输入按块进行打乱，进而“破坏”图像中的结构信息，然后训练神经网络识别被“破坏”局部区域顺序的图像，强迫神经网络抓住重点视觉区域，增强网络对具有区分度局部细节的特征学习能力。

商品数量庞大、品类众多，许多品类之间的区别十分微小

蝶类种类数庞大，人眼难以区分

针对“破坏”后图像中引入的噪声视觉信息，京东AI提出了一种基于对抗的损失函数，将神经网络中的视觉特征加以区分，进一步凸显出有价值的、重点的视觉特征。最后，再让神经网络对“破坏”后的图像进行重构，增强神经网络对不同局部视觉特征之间的语义相关性的建模能力。

包括这一算法在内的京东AI创新技术，应用于实际购物场景、满足用户需求的同时，也在众多国际学术赛事中斩获大奖，备受认可。此次京东AI研究院在CVPR 2019上斩获3项第一的学术比赛，分别为视频动作识别、商品图片识别，以及精细粒度蝶类图片识别，均是AI在视觉识别领域的典型应用场景。

京东AI研究院在蝶类图片识别竞赛排名第一

商品识别技术被认为是线上、线下智能零售的重要基础，京东AI研究院斩获大奖的图像分类技术将有望在近期应用到京东“拍照购”商品识别，以及京东Circle-K商品自动结算台中。京东AI研究院的技术优势也将进一步发挥，助力产品性能提升，为用户带来更加贴心、便捷、智能化的网购体验。