《一种多媒体数据流的剪辑方法及系统.pdf》由会员分享,可在线阅读,更多相关《一种多媒体数据流的剪辑方法及系统.pdf(8页完整版)》请在专利查询网上搜索。
1、(10)申请公布号 CN 102842327 A(43)申请公布日 2012.12.26CN102842327A*CN102842327A*(21)申请号 201210321713.9(22)申请日 2012.09.03G11B 27/11(2006.01)G06K 9/00(2006.01)(71)申请人深圳市迪威视讯股份有限公司地址 518057 广东省深圳市高新区北区新西路2号2栋第4层402-406号、第5层501-503号(72)发明人成富平(74)专利代理机构深圳鼎合诚知识产权代理有限公司 44281代理人薛祥辉(54) 发明名称一种多媒体数据流的剪辑方法及系统(57) 摘要本发明。
2、公开一种多媒体数据流的剪辑方法及系统,该方法包括对观众在观看多媒体数据流过程中所产生的面部表情进行监控;根据观众的面部表情从所述多媒体数据流中截取至少一个片段;将截取的片段进行组接完成剪辑。本发明通过以上技术方案,提供一种更加完善的多媒体数据流的剪辑方法及系统。(51)Int.Cl.权利要求书2页 说明书4页 附图1页(19)中华人民共和国国家知识产权局(12)发明专利申请权利要求书 2 页 说明书 4 页 附图 1 页1/2页21.一种多媒体数据流的剪辑方法,其特征在于,包括:对观众在观看多媒体数据流过程中所产生的面部表情进行监控;根据观众的面部表情从所述多媒体数据流中截取至少一个片段;将截。
3、取的片段进行组接完成剪辑。2.如权利要求1所述的多媒体数据流的剪辑方法,其特征在于,根据观众的面部表情从所述多媒体数据流中截取至少一个片段的方法包括:根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情;从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段。3.如权利要求2所述的多媒体数据流的剪辑方法,其特征在于,从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段的方法包括:记录观众产生所述符合要求的面部表情时所观看的多媒体数据流的时间点;从所述时间点之前的时间长度T1开始,到所述时间点之后的时间长度T2结束,截取这段时间内的片段。4.如权利要求2。
4、所述的多媒体数据流的剪辑方法,其特征在于,根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情的方法具体为:根据预设的正面表情样本和/或负面表情样本,对所监控到的面部表情进行筛选,筛选出至少一个符合要求的面部表情。5.如权利要求1所述的多媒体数据流的剪辑方法,其特征在于,所述正面表情样本包括人在高兴、激动、恐惧和/或惊讶时的标准表情样本;所述负面表情样本包括人在睡觉、打盹和/或聊天时的标准表情样本。6.如权利要求3所述的多媒体数据流的剪辑方法,其特征在于,根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情的方法具体为:对所监控到的各个面部表情进行量化,得到与各个面部表。
5、情对应的体验度数量值;选择体验度数量值排名靠前的至少一个面部表情作为符合要求的面部表情。7.如权利要求1至6任一项所述的多媒体数据流的剪辑方法,其特征在于,所述多媒体数据流为视频数据流和/或音频数据流。8.一种多媒体数据流的剪辑系统,其特征在于,包括监控单元和截取处理单元和剪辑处理单元:所述监控单元用于对观众在观看多媒体数据流过程中所产生的面部表情进行监控;所述截取处理单元用于根据观众的面部表情从所述多媒体数据流中截取至少一个片段;所述剪辑处理单元用于将截取的片段进行组接完成剪辑。9.如权利要求8所述的多媒体数据流的剪辑系统,其特征在于,所述截取处理单元包括选择单元和截取单元:所述选择单元用于。
6、根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情;所述截取单元用于从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段。10.如权利要求9所述的多媒体数据流的剪辑系统,其特征在于,所述截取单元包括记权 利 要 求 书CN 102842327 A2/2页3录子单元和截取子单元:所述记录子单元用于记录观众产生所述符合要求的面部表情时所观看的多媒体数据流的时间点;所述截取子单元用于从所述时间点之前的时间长度T1开始,到所述时间点之后的时间长度T2结束,截取这段时间内的片段。11.如权利要求9所述的多媒体数据流的剪辑系统,其特征在于,所述选择单元包括量化处理单元和第一选。
7、择子单元,其中,所述量化处理单元用于对所监控到的各个面部表情进行量化,得到与各个面部表情对应的体验度数量值,所述第一选择子单元用于选择体验度数量值排名靠前的至少一个面部表情作为符合要求的面部表情;或者所述选择单元具体为第二选择子单元,用于根据预设的正面表情样本和/或负面表情样本,对所监控到的面部表情进行筛选,筛选出至少一个符合要求的面部表情。权 利 要 求 书CN 102842327 A1/4页4一种多媒体数据流的剪辑方法及系统技术领域0001 本发明涉及数据处理领域,尤其涉及一种多媒体数据流的剪辑方法及系统。背景技术0002 电影、电视剧、音乐作品等通常都需要制作音/视频剪辑来进行宣传。为了。
8、达到好的宣传效果,需要保留能够带给观众好的观看感受的片段,而不是相对平淡的片段。现有方法通过人工剪辑方式来实现,导演和剪辑人员根据经验来判断保留哪些片段作为剪辑。此方法有以下缺陷:增加了人的工作量,所保留的片段可能不是最能够带给观众好的观看感受的片段。发明内容0003 本发明提供一种更加完善的多媒体数据流的剪辑方法及系统。0004 为了提供一种更加完善的多媒体数据流的剪辑方法及系统,本发明采取以下技术方案。0005 一种多媒体数据流的剪辑方法,包括:对观众在观看多媒体数据流过程中所产生的面部表情进行监控;根据观众的面部表情从所述多媒体数据流中截取至少一个片段;将截取的片段进行组接完成剪辑。00。
9、06 进一步地,根据观众的面部表情从所述多媒体数据流中截取至少一个片段的方法包括:根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情;从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段。0007 进一步地,从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段的方法包括:记录观众产生所述符合要求的面部表情时所观看的多媒体数据流的时间点;从所述时间点之前的时间长度T1开始,到所述时间点之后的时间长度T2结束,截取这段时间内的片段。0008 进一步地,根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情的方法具体为:根据预设的正面表情样本和。
10、/或负面表情样本,对所监控到的面部表情进行筛选,筛选出至少一个符合要求的面部表情。0009 进一步地,所述正面表情样本包括人在高兴、激动、恐惧和/或惊讶时的标准表情样本;所述负面表情样本包括人在睡觉、打盹和/或聊天时的标准表情样本。0010 进一步地,根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情的方法具体为:对所监控到的各个面部表情进行量化,得到与各个面部表情对应的体验度数量值;选择体验度数量值排名靠前的至少一个面部表情作为符合要求的面部表情。0011 进一步地,所述多媒体数据流为视频数据流和/或音频数据流。0012 一种多媒体数据流的剪辑系统,包括监控单元和截取处理单元和。
11、剪辑处理单元:所述监控单元用于对观众在观看多媒体数据流过程中所产生的面部表情进行监控;所述截取处理单元用于根据观众的面部表情从所述多媒体数据流中截取至少一个片段;所述剪辑说 明 书CN 102842327 A2/4页5处理单元用于将截取的片段进行组接完成剪辑。0013 进一步地,所述截取处理单元包括选择单元和截取单元:所述选择单元用于根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情;所述截取单元用于从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段。0014 进一步地,所述截取单元包括记录子单元和截取子单元:所述记录子单元用于记录观众产生所述符合要求的面部表情。
12、时所观看的多媒体数据流的时间点;所述截取子单元用于从所述时间点之前的时间长度T1开始,到所述时间点之后的时间长度T2结束,截取这段时间内的片段。0015 进一步地,所述选择单元包括量化处理单元和第一选择子单元,其中,所述量化处理单元用于对所监控到的各个面部表情进行量化,得到与各个面部表情对应的体验度数量值,所述第一选择子单元用于选择体验度数量值排名靠前的至少一个面部表情作为符合要求的面部表情;或者所述选择单元具体为第二选择子单元,用于根据预设的正面表情样本和/或负面表情样本,对所监控到的面部表情进行筛选,筛选出至少一个符合要求的面部表情。0016 本发明的有益效果是:通过对观众在观看多媒体数据。
13、流过程中所产生的面部表情的监控,根据观众的面部表情从多媒体数据流中截取片段完成剪辑,相对于现有的剪辑方式而言,减少了人的工作量,而且剪辑中所保留的片段均是能够带给观众好的观看感受的片段。附图说明0017 图1为本发明一实施例提供的多媒体数据流的剪辑方法的流程图;0018 图2为本发明一实施例提供的多媒体数据流的剪辑系统的示意图。具体实施方式0019 本发明的主要构思是,选择一些观众对多媒体数据流进行预先观看,根据这些观众在观看多媒体数据流过程中所产生的面部表情截取片段,完成剪辑。其中,多媒体数据流为视频数据流和/或音频数据流。0020 图1为本发明一实施例提供的多媒体数据流的剪辑方法的流程图,。
14、如图1所示,该多媒体数据流的剪辑方法包括如下步骤:0021 S101、对观众在观看多媒体数据流过程中所产生的面部表情进行监控。0022 优选的,选择n(n1)个观众对多媒体数据流进行预先观看,监控这n个观众在观看多媒体数据流过程中所产生的面部表情,并记录各观众的各个面部表情与产生该面部表情时观众所观看的多媒体数据流的时间点,建立各观众的各个面部表情与多媒体数据流的时间点的对应关系。将各观众的各个面部表情、时间点及该对应关系保存至存储空间。0023 S102、根据观众的面部表情从所述多媒体数据流中截取至少一个片段。0024 优选的,步骤S102可以进一步包括以下步骤:0025 步骤S102a、根。
15、据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情。当观众人数大于1时,对每个观众,分别选择至少一个符合要求的面部表情。步骤S102a的实现方式包括但不局限于以下两种:说 明 书CN 102842327 A3/4页60026 其一、根据预设的正面表情样本和/或负面表情样本,对所监控到的面部表情进行筛选,筛选出至少一个符合要求的面部表情。优选的,正面表情样本包括人在高兴、激动、恐惧和/或惊讶时的标准表情样本;负面表情样本包括人在睡觉、打盹和/或聊天时的标准表情样本。0027 根据预设的正面表情样本,对所监控到的面部表情进行筛选的可以是:将所监控到的面部表情与正面表情样本对比,将与正面。
16、表情样本匹配的面部表情筛选出来,作为符合要求的面部表情。0028 根据预设的负面表情样本,对所监控到的面部表情进行筛选的可以是:将所监控到的面部表情与负面表情样本对比,将与负面表情样本匹配的面部表情筛选出去,将剩余的面部表情作为符合要求的面部表情。0029 其二、对所监控到的各个面部表情进行量化,得到与各个面部表情对应的体验度数量值;选择体验度数量值排名靠前的至少一个面部表情作为符合要求的面部表情。0030 步骤S102b、从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段。步骤S102b的实现方式包括但不局限于以下所列举的:0031 步骤b1、记录观众产生所述符合要求的面部。
17、表情时所观看的多媒体数据流的时间点,进入步骤b2。如果在步骤S101中,已经记录了各观众的各个面部表情与产生该面部表情时观众所观看的多媒体数据流的时间点,建立各观众的各个面部表情与多媒体数据流的时间点的对应关系。那么步骤b1中,只需要根据所述符合要求的面部表情从该对应关系中查找出对应的时间点即可,不需要重复记录时间点。0032 步骤b2、将所述符合要求的面部表情所对应的多媒体数据流的时间点作为基点,从该时间点之前的时间长度T1开始,到该时间点之后的时间长度T2结束,截取这段时间内的片段。T1等于或不等于T2。截取这段时间内的片段之后,对于该时间点之前的时间长度T1以内和/或该时间点之后的时间长。
18、度T2以内所监控到的面部表情可以直接删除,不做表情样本的比对或量化处理,以节省时间和简化操作。0033 S103、将截取的片段进行组接完成剪辑。0034 图2为本发明一实施例提供的多媒体数据流的剪辑系统的示意图,如图2所示,多媒体数据流的剪辑系统包括监控单元1和截取处理单元2和剪辑处理单元3,其中,选择n(n1)个观众对多媒体数据流进行预先观看,监控单元1用于对这n个观众在观看多媒体数据流过程中所产生的面部表情进行监控;并记录各观众的各个面部表情与产生该面部表情时观众所观看的多媒体数据流的时间点,建立各观众的各个面部表情与多媒体数据流的时间点的对应关系,将各观众的各个面部表情、时间点及该对应关。
19、系保存至存储空间。截取处理单元2用于根据监控单元1所监控到的观众的面部表情从多媒体数据流中截取至少一个片段。剪辑处理单元3用于将截取的片段进行组接完成剪辑。0035 进一步地,截取处理单元2包括选择单元21和截取单元22;选择单元21用于根据预设原则从所监控到的面部表情中选择至少一个符合要求的面部表情;截取单元22用于从所述多媒体数据流中截取观众产生所述符合要求的面部表情时所观看的片段。0036 进一步地,选择单元21包括量化处理单元211和第一选择子单元212,其中,量化处理单元211用于对所监控到的各个面部表情进行量化,得到与各个面部表情对应的体验度数量值;第一选择子单元212用于选择体验。
20、度数量值排名靠前的至少一个面部表情作为说 明 书CN 102842327 A4/4页7符合要求的面部表情。0037 或者选择单元21具体为第二选择子单元,用于根据预设的正面表情样本和/或负面表情样本,对所监控到的面部表情进行筛选,筛选出至少一个符合要求的面部表情;预设的正面表情样本和/或负面表情样本可以保存在存储空间中。0038 进一步地,截取单元22包括记录子单元221和截取子单元222;记录子单元221用于记录观众产生所述符合要求的面部表情时所观看的多媒体数据流的时间点;截取子单元222用于从所述时间点之前的时间长度T1开始,到所述时间点之后的时间长度T2结束,截取这段时间内的片段。0039 本发明通过选择一些观众对多媒体数据流进行预先观看,根据这些观众在观看多媒体数据流过程中所产生的面部表情,从多媒体数据流中截取片段完成剪辑,相对于现有的剪辑方式而言,减少了人的工作量,而且剪辑中所保留的片段均是能够带给观众好的观看感受的片段。0040 以上内容是结合具体的实施方式对本发明所作的进一步详细说明,不能认定本发明的具体实施只局限于这些说明。对于本发明所属技术领域的普通技术人员来说,在不脱离本发明构思的前提下,还可以做出若干简单推演或替换,都应当视为属于本发明的保护范围。说 明 书CN 102842327 A1/1页8图1图2说 明 书 附 图CN 102842327 A。