一种家庭视频摘要生成的新方法_2006

视频摘要

—226

— 一种家庭视频摘要生成的新方法

智 敏1,2，蔡安妮1

(1. 北京邮电大学电信工程学院，北京100876；2. 内蒙古师范大学计算机系，呼和浩特010020)

摘 要: 计算机硬件的发展使家用计算机具有处理和存储视频资料的能力，而家用数字摄像设备的普及使家庭视频的数量越来越多，家庭用户对视频摘要技术的需求也越来越强烈。在回顾现有视频摘要相关的概念、分类和技术，以及分析家庭视频的特征基础上，给出了家庭视频摘要的特点，并提出了一个面向家庭视频的视频摘要算法。 关键词: 家庭视频；特征；视频摘要；视频总结

A New Method for Home Video Abstract

ZHI Min 1, 2, CAI Anni 1

(1. School of Telecommunications Engineering, Beijing University of Posts and Telecommunications, Beijing 100876;

2. Department of Computer, Inner Mongolia Normal University, Huhehaote 010020)

【Abstract 】With the computer’s hardware developing, personal computer has the capabilities of management and storage for digital video. And because of digital photograph’s popularization and the quantity of the home video, the need for video abstract technology become intensity. In this paper, on the basis of considering concept and classification and technology about video abstract and analyzing characters of home video, a video abstract method for home video is presented.

【Key words 】Home video; Character; Video abstract; Video summary

计 算 机 工 程Computer Engineering 第32卷 第6期

Vol. 32 № 6 2006年3月

March 2006

·多媒体技术及应用·

文章编号：1000—3428(2006)06—0226—02

文献标识码：A

中图分类号：TP37

1概述

基于内容的视频分析技术的快速发展产生了很多新的应用和新的技术。在这些新兴的研究领域中，有一类应用和研究所针对的问题是如何利用对视频内容的分析来减小视频存储、分类和索引的代价，以及如何提高视频的使用效率、可用性和访问性，这就是视频摘要技术。视频摘要顾名思义就是对一长段视频内容的简短总结。更明确一点来说，视频摘要就是一连串静止或运动的图像，它们用精简的方式代表了原视频的内容，保留了原视频内容的要点。视频摘要还可根据是静止图像，还是运动图像序列分为视频摘要(Video

summary)和缩略视频(Video skimming)两大类，

视频摘要是从原始视频中提取或生成的一小部分静止图像的集合，生成静态图像摘要的主要任务就是准确、高效地提取关键帧。缩略视频是运动图像序列，根据介绍内容的不同，缩略视频又分为总结摘要和亮点摘要两种。而亮点摘要则介绍了最吸引人的部分，比如电影的宣传片，它呈现了许多电影中的精彩场面而并不揭示故事的结局；总结摘要是一些视频片段的序列, 用户可以通过播放这些相对短小的视频片段来了解整个视频的内容。

视频摘要在很多领域得到应用，其中家庭娱乐的应用已经成为很主要的分支。计算机硬件的发展使家用计算机具有处理和存储视频资料的能力，而家用数字摄像设备的普及使家庭用户可以很容易地摄制一段视频并把它们以数字方式存入电脑，这些都为家庭视频摘要技术的发展提供了基础。家庭用户拥有的视频资料不断增加和家庭视频多数还是以原始的、未经编辑存放的矛盾，使得家庭用户对视频的浏览和欣赏极为不便。家庭用户迫切需要一种考虑到家庭视频特点、针对家庭用户的视频摘要系统来满足他们的需要。Liehart [1]提出的家庭视频摘要方法是首先基于视频被摄制的日期和时

间，将所有的镜头聚类为4种不同层次；然后把长的镜头均

匀地分成2min 长的片断；

最后根据音频信号的声音强度选择需要的片断，得到视频摘要。但是此方法忽略了视频的图像内容。Jananonea [2]等提出的家庭视频摘要方法是首先根据镜头长度和镜头活动度，计算提取关键帧的个数；然后根据用户的反馈，把提取的关键帧作为SVM (Support Vector Machine algorithm)的输入，重新分类生成摘要。在此方法中用户只能在关键帧层次上进行反馈，而不能从总体上反馈。同时由这两种方法生成的视频摘要，不能预先设定长度。

在本文中，将首先提取关键帧，其次根据预先给定的视频摘要长度以及所提取的关键帧个数，从镜头中抽取图像帧生成初步摘要；最后根据用户对初步摘要的反馈，删除多余的镜头，生成最终摘要。

2 家庭视频摘要的特点

家庭视频是指家庭用户使用家用数字摄像机所拍摄的数字视频。由于拍摄者、拍摄工具、拍摄内容和拍摄手段的限制，以及家庭视频处理上的要求，形成了家庭视频摘要特有的特点。

（1）家庭视频的存在形式多数是原始的、未经编辑的形式，所以家庭视频中有大量无用、有缺陷及冗余的内容。家庭视频的原始存在形式提出了对总结摘要的需求，用户需要总结摘要来快速浏览整个视频的内容。

（2）家庭视频主要记录了人们的生活，它没有人为设计

基金项目：国家自然科学基金资助项目（60462001） 作者简介：智 敏（1972－），女，博士生，主研方向：视频信息处理与检索，多媒体技术等；蔡安妮，教授、博导

收稿日期：2005-03-02 E-mail ：zhiminc@sohu.com

第1页下一页