本文分享阿里妈妈创意&视频平台团队在视频制作方向上关于视频高光检测技术的探索与实践，在多个核心广告场景中取得线上收益。基于该项工作总结的论文已被 CVPR 2022 录用。

论文标题：

Learning Pixel-Level Distinctions for Video Highlight Detection

论文链接：

https://arxiv.org/abs/2204.04615

本文提出了新的视频高光检测方法PLD-VHD。主要贡献如下：

  • 在VHD任务中，提出了一种新的像素差异学习任务，来获取更加细粒度的视频上下文表征。

  • 设计了用于VHD任务的Encoder-Decoder的网络以学习像素差异，通过3D CNN和视频显著性检测完成时空上下文关系的建模。

  • 整个方法可解释性强，在主流公开数据集上效果SOTA。

PLD-VHD方法

内容中包含的图片若涉及版权问题，请及时与我们联系删除