计算机视觉与视频分析实验室虚拟试衣成果被国际级顶级会议ACM MM录用
Fri Oct 01 15:09:06 CST 2021

    AZFT计算机视觉与视频分析实验室宋明黎教授团队论文 “Shape Controllable Virtual Try-on for Underwear Models” 被国际顶级多媒体会议ACM Multimedia录用。论文作者为高鑫,刘振江,冯尊磊,申成吉,欧开日,唐海红,宋明黎等人。

    服饰是淘系最重要的类目,虚拟试衣作为一种新颖的互动展示方式,为用户带来创新体验,为商家创造新的品牌展示方式。团队提出了一种形状可控的虚拟试衣网络(SC-VTON),针对内衣模特的试衣任务,使用融合了模特和服饰信息的GAT网络来生成形变后的服饰图片。除此之外,我们在SC-VTON中加入控制点来达到服饰的形状控制。更进一步,通过增加Splitting Network和Synthesis Network,我们可以使用服饰-模特的pair对数据优化模型,同时将任务泛化到常规的2D虚拟试衣任务。我们的方法能够做到精准的服饰形状控制。同时与其他方案相比,我们的方案能够生成纹理逼真的高分辨率图片,并且能够在实际应用中落地。这是业内首个将图注意力网络应用到虚拟试衣任务,同时能够做到精准可控的服饰形变。


    项目提供不同身材的模特供用户挑选,支持几十万件服饰的在线实时试穿。"虚拟试衣间" PV20-30W,UV10W,二跳页人均停留时长2min,平均试衣件数12件。此外,运营同学利用虚拟试衣产品功能,在微博发起"一天试穿500件奢侈品"话题营销活动,曝光2.4亿,讨论量15.1万,产品得到了商家和线上用户认可。

    论文下载:https://arxiv.org/pdf/2107.13156.pdf

阿里技术 | 达摩院 copyright@2017-2018 阿里巴巴-浙江大学前沿技术联合研究中心《法律声明》
浙公网安备: 33010002000092号
| ICP备案网站信息: 浙B2-20120091-4