第6卷第5期 智能系统学报 Vol.6 No.5 2011年10月 CAAI Transactions on Intelligent Systems 0ct.2011 dbt:10.3969/j.issn.1673-4785.2011.05.008 电影中吸烟活动识别 叶果，程洪，赵洋 (电子科技大学自动化工程学院，四川成都611731) 摘要：电影中的活动识别是计算机视觉领域的一个难点问题.传统识别算法受到电影中镜头视角变化、场景变化 和光照变化等因素的影响，使得其对于真实场景活动识别的效果较差.针对上述问题，提出一种新颖的基于互信息 的组合识别方法.该方法以纯贝叶斯互信息最大化构造初始框架，针对”吸烟”这类极具代表性的动作，将活动的 SIFT信息和STP信息融合得到最优的组合分类器.该方法在电影《咖啡和烟》中进行了测试，实验结果表明，该方法 具有很好的鲁棒性，并且很大程度上提高了抽烟活动的识别率. 关键词：电影：吸烟活动识别：纯贝叶斯互信息最大化：计算机视觉：模式识别别 中图份类号：TP391.4文献标志码：：A文章编号：16734785(2011))050440-05 Smoking recognition in movies YE Guo,CHENG Hong,ZHAO Yang (School of Automation,University of Electronic Science and Technology of China,Chengdu611731,China) AbstractAction recognition in movies is a difficult problem in the computer vision domain.Traditional approaches have a bad recognition effect because they are subjected to viewpoint changes.scene changes,and illumination changes in real scenes.This paper presented a novel combined recognition approach,using mutual information to solve the problems mentioned above.This method builds the initial skeleton using naive-Bayesian mutual informa- tion maximization(NBMIM))and combines the shape information with the motion information to recognize smoking, which is a typical activity in movies.The proposed smoking recognition approach was evaluated in the film Coff nd Cigaretes.The results indicate that the proposed method is robust,and it significantly improves the recognition rate. Keywords:movies;smoking action recognition;naive-Bayesian mutual information maximization;computer vision; pattern recognition. 人活动识别是计算机视觉与模式识别的重要研 特定的固定场景，限定视角的变化等， 究领域，具有重要的学术价值和应用前景.自动活动 最近，广电总局办公厅发出《广电总局办公厅 识别和检索是数字媒体中的重要研究内容”.传 关于严格控制电影、电视剧中吸烟镜头的通知》，通 统的活动识别多集中在受限制环境中，而真实环境 知中指出，鉴于电影和电视剧在社会公众中的广泛 中的人体活动分析，由于电影、视频中有人的外形、 影响，国家有关部门、社会各界要求严格控制电影和 动作、姿势变化、镜头远近变化、视角变化、周围环境 电视剧中吸烟镜头的呼声越来越强烈，电影和电视 变化的影响，导致人活动识别是一个极具挑战的问 剧中过多的吸烟镜头，不符合我国政府控烟的基本 题13.为了减小这些因素的影响，先前人们的工作 立场，客观上有误导吸烟之嫌，容易对社会公众，特 使用了大量简化的措施，比如限制镜头的运动，采用 别是对未成年人产生不良影响.为避免电影和电视 剧中个别镜头误导社会公众吸烟，特别是让未成年 收稿日期：.2011-03-29. 基金项目：国家"973“计划资助项目(2011CB707000),:国家自然科学 人远离烟草，倡导健康生活方式，培育社会文明，要 基金资助项目(61075045)·：中央高校基本科研业务费专项 进一步控制电影和电视剧中的吸烟活动在整个电影 基金资助项目(ZYGX2009X013). 通信作者：叶果Emil:yeguo0112@gmai.com. 长度中的比例.对每年大量的电影、视频进行抽烟活 动长度的人工统计几乎不可能.如何快速自动地对人活动识别是计算机视觉与模式识别的重要研 究领域,具有重要的学术价值和应用前景.自动活动 识别和检索是数字媒体中的重要研究内容".传 统的活动识别多集中在受限制环境中,而真实环境 中的人体活动分析,由于电影、视频中有人的外形、 动作、姿势变化、镜头远近变化、视角变化、周围环境 变化的影响,导致人活动识别是一个极具挑战的问 题13.为了减小这些因素的影响,先前人们的工作 使用了大量简化的措施,比如限制镜头的运动,采用 CAAI Transactions on Intelligent Systems Smoking recognition in movies 智 能 系 统 学 报 叶果,程洪,赵洋 (电子科技大学自动化工程学院,四川成都611731) 第6卷第5期 2011年10月 Vol.6 No.5 Oct.2011 Keywords: movies; smoking action recognition; naive-Bayesian mutual information maximization;computer vision; pattern recognition (School of Automation, University of Electronic Science and Technology of China,Chengdu 611731,China) AbstractAction recognition in movies is a difficult problem in the computer vision domain. Traditional approaches have a bad recognition effect because they are subjected to viewpoint changes,scene changes, and illumination changes in real scenes. This paper presented a novel combined recognition approach, using mutual information to solve the problems mentioned above. This method builds the initial skeleton using naive-Bayesian mutual informa￾tion maximization(NBMIM) and combines the shape information with the motion information to recognize smoking, which is a typical activity in movies. The proposed smoking recognition approach was evaluated in the film Coff nd Cigaretes. The results indicate that the proposed method is robust,and it significantly improves the recognition rate. 特定的固定场景,限定视角的变化等 电影中吸烟活动识别 doi: 10.3969/j.issn.1673-4785.2011.05.008 基金项目: 国家"973"计划资助项目(2011CB707000) ;国家自然科学 收稿日期: 基金资助项目(61075045) ;中央高校基本科研业务费专项 基金资助项目(ZYGX2009X013) . 通信作者: 叶果.E-mail: yeguo0112@gmail.com. 2011-03-29 YE Guo, CHENG Hong,ZHAO Yang 关键词:电影;吸烟活动识别;纯贝叶斯互信息最大化;计算机视觉;模式识别 中图分类号: TP391.4 文献标志码: A 文章编号: 16734785(2011) 05-0440-05 最近,广电总局办公厅发出《广电总局办公厅 关于严格控制电影、电视剧中吸烟镜头的通知》,通 知中指出,鉴于电影和电视剧在社会公众中的广泛 影响,国家有关部门、社会各界要求严格控制电影和 电视剧中吸烟镜头的呼声越来越强烈,电影和电视 剧中过多的吸烟镜头,不符合我国政府控烟的基本 立场,客观上有误导吸烟之嫌,容易对社会公众,特 别是对未成年人产生不良影响.为避免电影和电视 剧中个别镜头误导社会公众吸烟,特别是让未成年 人远离烟草,倡导健康生活方式,培育社会文明,要 进一步控制电影和电视剧中的吸烟活动在整个电影 长度中的比例.对每年大量的电影、视频进行抽烟活 动长度的人工统计几乎不可能.如何快速自动地对 摘 要:电影中的活动识别是计算机视觉领域的一个难点问题.传统识别算法受到电影中镜头视角变化、场景变化 和光照变化等因素的影响,使得其对于真实场景活动识别的效果较差.针对上述问题,提出一种新颖的基于互信息 的组合识别方法.该方法以纯贝叶斯互信息最大化构造初始框架,针对"吸烟"这类极具代表性的动作,将活动的 SIFT信息和 STIP信息融合得到最优的组合分类器.该方法在电影《咖啡和烟》中进行了测试,实验结果表明,该方法 具有很好的鲁棒性,并且很大程度上提高了抽烟活动的识别率