基于内容的新闻视频摘要技术研究
Research on Content-Based News Video Abstraction Technology
随着通信技术、宽带网络技术和数字电视的迅速发展,视频数据量以前所未有的速度增长.但是,视频数据线性、非结构化的数据形式使得视频浏览的效率非常低.如何自动地建立索引结构进行视频流的分析和管理,从而在海量的视频数据中查找用户感兴趣的内容,己成为智能信息处理领域的研究热点.新闻视频是一类特殊的视频,能够提供重要的时事信息.基于内容的新闻视频摘要技术可以缩减视频的数据量,提高检索效率,节省浏览时间,对基于新闻视频的各种应用具有重要的意义.论文主要研究基于内容的新闻视频摘要技术,研究成果主要体现在如下三个方面:(1)研究了静态视频摘要,提出了一种基于K-L变换和聚类的视频摘要方法.首先,通过对视频帧原始GRB空间进行K-L变换,得到由主轴构成的参数模型;其次,运用滑动窗口法进行镜头检测;再次,根据最近邻规则对每个镜头的视频帧进行聚类;最后,通过后处理优化聚类结果,提取最靠近聚类中心的帧作为关键帧,组成视频摘要.实验结果表明,该方法具有良好的通用性和适应性,提取的关键帧序列能够较好地反映视频内容.(2)研究了主持人镜头检测,提出了一种基于规则的主持人镜头检测方法.首先,根据一段新闻视频中主持人服装不变这一线索,提取扩展人脸区域(EFR);其次,对EFR进行聚类;最后,结合主持人镜头出现的时间规律提出三个判决准则,通过逐层筛选最终确定主持人镜头.实验结果表明,新方法无需人工参与,具有通用性强、检测精度高的优点.(3)研究了动态视频摘要,提出了一种面向用户的新闻缩略视频方法.该方法包括三种视频压缩策略:基于主持人镜头检测的缩略、基于固定比例压缩的缩略和基于标题条检测的缩略.每种策略都在一定程度上考虑了用户的需要,通过人机交互的方式生成最终缩略视频.实验结果表明,该方法能较好地满足不同用户的需求.
- 作者：
- 王毅
- 学位授予单位：
- 解放军信息工程大学
- 专业名称：
- 信号与信息处理
- 授予学位：
- 硕士
- 学位年度：
- 2010年
- 导师姓名：
- 李弼程
- 中图分类号：
- TP391.41
- 关键词：
- 视频摘要；新闻视频；关键帧；K-L变换；主持人镜头；缩略视频；面向用户
- Video Abstraction；News Video；Key Frame；K-L Transform；Anchorperson Shot；Video Skim；Client-oriented
- 基金项目：
- 国家自然科学%总装十一五预研项目