在如今“无促销不电商”的大环境熏陶下,商家需要榨干了脑浆想尽各种奇招,玩法虽多,但万变不离其宗。面对上万、甚至上百万的用户流量,商家需要在“618”“双十一”等大促之前快速上架自己的爆款产品。然而仅仅是商品中各种各样的图片生成及设计,就已经让商家苦不堪言。
海量商品的图片生成着实令人头疼,更让人痛苦的是,为了给买家更直观的体验效果,还需要商品的视频生成,这下子photoshop、美图秀秀、premier各种软件齐上阵,还没等干就想让人放弃了。那么,有没有一个系统可以将所有图片与视频“一键生成”,又能够符合大众的审美口味呢?英特尔助力京东用AI重塑商品图片系统,用事实证明没有做不到的,只有想不到的。
京东零售技术与数据中台用AI重塑商品图片系统,打造了多项能力,这些能力也为商家开放。首先,图片存储能力,京东的开源走向自研的JFS分布式文件系统、跨机房容灾以及两地三中心的部署,使得海量图片存储安全有保障;第二,图片生成,在算法层面,其首先面临的挑战是商家传输上去的图片都有着白底或者其他背景,那么将它变成透明的底图,才可以进行下一步做成banner图的设计。以往商家往往会使用photoshop等工具来处理一张图片,时间大概在2分钟以上。如今,通过机器学习算法,不到1秒钟,就能够做到头发丝级别的抠图精准度;第三,山寨识别,基于深度神经网络的商标检测模型与图片文字检测,可以达到超过100个品牌商标的精准识别。基于重点品牌词的详情页图片文字识别,覆盖超过500个品牌重点品牌词,还在持续拓展。强大的品牌数据积累,利用侵权库与外形检测,杜绝一切侵权与山寨商品;第四,视频的生成,只是有图片并不能为买家提供更加直观的效果,以往商家制作一个视频需要耗时几天,通过京东提供的AI服务,只需选取素材与风格,再将素材自动处理,视频配置,视频就能在短短几分钟甚至几秒钟生成。如此智能加轻松,真是让商家轻松省心的完成了店铺的产品展示工作。
英特尔+京东,强强联合,让商家倍感高效便捷的成果。谈及与英特尔的合作,京东技术总监桂创华例举了图片生成中在工程上的挑战,商家需要将文案内容、商品图、按钮、背景蒙版、商品蒙版以及文案蒙版六种元素,利用机器学习的算法选出再合成一张图片,想要将这六种元素在100ms内生成是一个不小的难题。
![](https://i-blog.csdnimg.cn/blog_migrate/7c3b644cf978cecb7b07e13ebe389196.png)
当京东做了很多上层应用软件优化后仍达不到预计效果时,他们发现其中的性能优化点均涉及底层的图像处理库。所以,京东找到了英特尔的研发团队,基于英特尔在图片与媒体处理方面的丰富积累,利用强大的第二代至强可扩展处理器,帮助京东来处理更加复杂的图片。此外,英特尔的软件团队优秀的软件库、ICC编译器、以及类似IPP的图像处理库,都在京东的系统当中得以应用。
当然,英特尔也有着诸多AI解决方案,比如针对如Caffe、TensorFlow之类的主流框架,英特尔都会为这些平台打造一个优化的高效版本,这些也都应用在京东的图片系统当中。
差异化打造竞争优势。众所周知,目前国内外有很多电商品牌,它们同样可以提供图片生成等工作,那么京东的优势在哪里?对此,桂创华表示,在算法方面,京东提供机器一键批量全品类商品抠图的能力,在保证批量抠图效率的前提下,同时达到业界领先的抠图效果,并且这项服务是开放给所有商家去使用的,这也得到了众多商家的良好反馈;在合图方面,京东拥有海量数据与大量应用,长期积累生成的案例,本身就代表了京东超强的算法能力;性能方面,除了京东自有的上层软件层面的优化,英特尔提供的底层库优化,使得两者可以强强联合,竞争优势更加明显。
100ms内生成一张堪比设计师设计过的产品图,商家在不需要人工干预的情况下,即可以轻松制作出海量产品图片,这样的服务得益于京东始终站在用户的角度,将复杂留给自己,将简单轻松留给用户。在与英特尔的合作中,我们看到了两位强者的完美契合,将AI技术应用到更多实际场景,造福更广大的商家与用户,不得不说,京东和英特尔携手共同打造的AI这招实在是强。