[01273409]多相机联合视频摘要关键技术研究

一、课题来源与背景

监控视频存在大量的冗余信息，视频摘要技术的目的是压缩冗余信息获得简短的摘要视频，在视频快速浏览、存储、传播等领域有着广泛而重要的作用。同一区域的监控摄像头构成紧密相关的相机网络，共同记录完整的事件信息。对多相机视频进行联合分析、摘要和浏览更符合实际需求，意义更为重大。

二、研究目的与意义

项目的研究目的是，提出监控视频异常检测算法，从而将异常物体作为待摘要的重要物体;提出高压缩率的视频摘要方法，减少视频摘要造成的视觉瑕疵;并将视频摘要方法推广到多相机网络上，更好地消除冗余信息。

三、主要创新

（1）研究并提出了一个类草图绘制过程的交互式物体轮廓提取方法。素描作画时，画家通常采用许多短的、方向性强的线条去描绘物体的边界，然而再从中勾勒出物体的轮廓。受该过程启发，研究并开发了一种交互式的轮廓提取方法。该方法能够在一定用户交互的条件下，准确地提取物体轮廓。该方法在图像交互式处理领域有较好的应用前景。同时，该方法能应用于异常行为检测。这是由于异常行为检测中，物体的轮廓特征具有十分重要的作用。例如，跑步和走路时人体的轮廓显著不同。异常物体的轮廓与正常状态下物体的轮廓不同。

据此，可根据轮廓信息来判断正常和异常物体。

研究并开发了一种基于物体速度与尺寸优化的视频摘要算法。通过改变物体的速度和缩放物体的尺寸，可以获得压缩率更高的视频摘要结果，同时避免摘要视频中出现明显的视觉瑕疵（如物体相互碰撞和遮挡，物体时间先后顺序被破坏等等）。

为进行多视频摘要，提出了一个联合物体时移和视角切换的多视频摘要方法。该方法首先识别不同视频中同一个物体，并将它们组合在一起，然后沿时间轴差异化移动物体组获得摘要结果。面对多个摘要视频，提出以视角切换的方式展示多视角摘要内容。该方法的主要贡献在于，为基于物体的视频摘要方法提供了一个多视频浏览策略。

为进行多视频摘要，一方面如上所述，提出了一种联合物体时移和视角切换的多视频摘要方法。另一方面，提出了一个能同时进行视频拼接和视频稳定化的多视频处理方法。视频拼接方法能将多个视频拼接在一起，形成多个视频内容的全景展示，从而方便用户浏览多个视频内容。

四、社会经济效益，存在的问题

通过项目的实施，发表SCI论文11篇，EI论文1篇;授权专利3项，软件著作权1项。培养博士和硕士研究生多名。存在的问题主要在于亟需将成果进行推广应用。

五、历年获奖情况

无。