巫英才教授团队两篇论文被IEEE VIS录用
Fri Jul 16 14:21:38 CST 2021

    AZFT兼职教授巫英才团队论文 “A Visualization Approach for Monitoring Order Processing in E-Commerce Warehouse”“VideoModerator: A Risk-aware Framework for Multimodal Video Moderation in E-Commerce” 两篇论文于2021年7月16日被可视化领域顶级会议IEEE VIS录用,同时被可视化领域顶级期刊 IEEE TVCG 收录。


    IEEE VIS 是由电气电子工程师学会(IEEE)计算机协会可视化和图形学技术委员会(VGTC)主办的可视化领域的顶级会议。VIS是CCF推荐A类会议。


OrderMonitor - 电商仓内订单可视分析系统

    电商仓库的订单处理效率对电商服务质量而言至关重要。高效的订单处理效率能保障电商物流交货的及时性,提升客户的网络购物体验。实时监控、及时根据实际情况调整仓内生产状态,可以提效订单处理。然而传统的关于流式数据可视化和工业流程可视化的方法不能直接应用在这一领域。电商仓库面临着大体量且数量类型均不确定的订单,仓内实操对滞留订单的判定界限较为模糊,操作人员关于订单处理的优先级决策也比较复杂。这些特征都使实时地监控、分析并维护电商仓库内的订单处理这一问题变得困难。


电商仓库面临大体量且数量类型均不确定的订单

    在本论文中,团队与仓库专家紧密合作,采用了一种基于数据的方法,提出了名为OrderMonitor的可视分析系统,将电商仓库内的订单处理事件数据可视化,用来辅助仓库管理人员实时监控和分析仓内订单处理流程,并提高处理效率。


OrderMonitor可视分析系统结构

    具体而言,在实时监控方面,团队基于视觉沉积的隐喻,提出了一种名为“订单沉积”的可视化设计,用于展示订单处理流程,并揭露潜在的异常订单。在历史回溯与分析方面,团队结合Gantt图和Marey图,呈现订单处理的历史记录。系统还提供了交互和高亮,可以帮助管理人员从滞留订单的历史记录中获得见解。在优先级评估方面,系统提供了评估视图,支持用户探查订单详情,并根据仓内的实际情况,调整滞留订单的处理优先级规则,得出最优的处理次序。

VideoModerator - 电商直播视频审核框架

随着社交媒体应用的普及,视频审核变得越来越重要。未经审核的视频内容可能给社交媒体平台带来未知的法律与道德风险。随着监管部门对视频合规要求的不断提高,视频审核已经成为各大互联网平台不可或缺的一项任务。视频审核旨在探究视频中蕴含的多模态风险内容,包括视觉信息的风险,例如裸露、血腥恐怖等,也包括音频信息的风险,例如粗话、脏话等。对于该项任务,一种策略是使用机器学习模型来进行风险的自动检测。然而,机器学习模型存在低准确率、不可解释等问题。过于严苛的审核策略会导致机器学习模型假阳率偏高,产生大量的误判案例,影响平台内容创作者的热情,而过于宽松的审核策略则会导致机器学习模型召回率不够,给平台带来潜在风险。

直播视频中存在大量的风险内容


    在本论文中,团队与专家紧密合作,提出了一种名为VideoModerator的视频审核框架。该审核框架在机器学习算法的基础上,通过新颖的可视化技术将人的经验知识和机器的智能计算结合起来,提高了视频的审核效率。

基于VideoModerator框架的交互式可视化界面

    基于VideoModerator框架,团队还开发了一个用于视频审核的交互式可视化界面。该界面共由三个部分组成:视频视图、帧视图和音频视图。视频视图由一个视频播放器和一个显示不同时段的风险分布的分段时间线组成,审核人员可以通过该视图快速地了解和定位视频中可能存在风险的时间段。帧视图由视频帧的多级概览图和风险感知的圆形字形组成,审核人员可以通过该视图了解到视频内容的多级结构以及相应的潜在风险。音频视图由一个水平直方图和一个基于故事线的可视化组成,审核人员可以通过该视图快速地了解到从音频内容中提取出的风险词的在时间和频率上的分布情况。


    巫英才教授团队ZJUIDG主页:https://zjuidg.org/

阿里技术 | 达摩院 copyright@2017-2018 阿里巴巴-浙江大学前沿技术联合研究中心《法律声明》
浙公网安备: 33010002000092号
| ICP备案网站信息: 浙B2-20120091-4