基于图片的人员属性分类方法及系统.pdf

《基于图片的人员属性分类方法及系统.pdf》由会员分享，可在线阅读，更多相关《基于图片的人员属性分类方法及系统.pdf（14页完成版）》请在专利查询网上搜索。

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201911139046.0 (22)申请日 2019.11.20 (71)申请人 中科视元科技 （杭州） 有限公司 地址 311100 浙江省杭州市余杭区仓前街 道龙舟路6号1幢501室 (72)发明人 周鹏吴劲峰陈瑞生 (74)专利代理机构 北京君莫知识产权代理事务 所(普通合伙) 11715 代理人 崔云鹤 (51)Int.Cl. G06F 16/55(2019.01) G06K 9/62(2006.01) (54)发明名称 一种基于图片的人员属性分类方法及系统 (57)摘。

2、要 本发明提出一种基于图片的人员属性分类 方法以及应用该方法的移动终端和计算机可读 存储介质。 本发明的技术方案， 通过移动终端获 取图片后加入单高斯噪声， 并随机选择候选图片 序列分组后， 进行K级差分； 然后提取K级差分图 片矩阵中每一个图片的噪声， 得到图片噪声序列 矩阵， 通过判断图片噪声序列矩阵是否满足混合 高斯模型来决定候选图片序列分组是否成功。 本 发明的上述方案， 通过提取候选图片序列中的图 片属性， 并且结合混合高斯模型对于灰度变化图 片的敏感性， 来进行图片分组， 特别适合于人物 图片分组， 并且分组过程不需要用户介入也无需 预先设定参数， 结果客观。 权利要求书2页 说明。

3、书7页 附图4页 CN 110990616 A 2020.04.10 CN 110990616 A 1.一种基于图片的人员属性分类方法， 所述方法包括如下步骤： F01： 通过移动终端获取包含多个不同人物的图片集PP1， P2， ， Pn； 其中Pi表示第i张图片， i1,n； F02： 对于每一张图片Pi， 根据其至少一个单一属性值以及移动终端当前的CPU运行频 率， 加入单高斯噪声， 获得单高斯噪声图片集 F03:对于所述单高斯噪声图片集的每一张图片基于移动终端 当前图片处理程序的历史运行记录， 随机选取单高斯噪声图片集中剩余(n-1)张图片中 的K张图片， 组成随机图片序列Si； 其中K。

4、小于n-1； F04： 将随机图片序列Si与K个随机图片序列Sj做相对K级差分， 获得相对K级差分图片 序列矩阵Sj-i； ji； j1,n； F05： 对于相对K级差分图片序列矩阵Sj-i， 提取该图片序列矩阵中的每一个图片的噪 声， 得到图片噪声序列矩阵Nj-i； F06:判断图片噪声序列矩阵Nj-i是否符合混合高斯模型； 如果符合， 则将随机图片序列Si对应的图片集分为一组； 否则， 返回步骤F03； 其中， 将随机图片序列Si与K个随机图片序列Sj做相对K级差分， 获得相对K级差分图片 序列矩阵Sj-i， 具体为： 设随机图片序列SiSS1,SS2,， SS1+K, K个随机图片序列为。

5、 Sj1K1S1,K1S2,， K1S1+K, Sj2K2S1,K2S2,， K2S1+K, SjKKkS1,KkS2,， KKS1+K, 得到相对K级差分图片序列矩阵： 2.如权利要求1所述的方法， 其中， 其中， 对于每一张图片Pi， 根据其至少一个单一属性 值以及移动终端当前的CPU运行频率， 加入单高斯噪声， 具体包括： 所述单高斯噪声概率密度分布函数为： 其中， 为所述单一属性值或者单一属性值的均值； 为移动终端当前的CPU运行频率与 权利要求书 1/2 页 2 CN 110990616 A 2 所述单一属性值或者单一属性值的均值的比值。 3.如权利要求1所述的方法， 其中， 对于所。

6、述单高斯噪声图片集的每 一张图片基于移动终端当前图片处理程序的历史运行记录， 随机选取单高斯噪声图片 集中剩余(n-1)张图片中的K张图片， 具体包括： 读取移动终端日志文件， 采集设定时间段 内图片处理程序处理过的图片数量V， 如果Vn-1， 则KminV/2,n-2。 如权利要求1或2所述的方法， 其中所述混合高斯模型为K个单高斯噪声的组合。 4.如权利要求2所述的方法， 所述单一属性值， 包括如下之一或者其组合： 图片的大小； 图片的拍摄时间； 图片的分辨率； 图片的平均像素值； 图片的平均灰度值； 图片的对比度； 图片的亮度。 5.如权利要求1所述的方法， 其中， 将随机图片序列Si与。

7、K个随机图片序列Sj做相对K级 差分， 包括： 6.对于随机图片序列Si， 如果i+K小于n， 则K个随机图片序列SjSi+1,Si+2,， Si +K。 7.如权利要求1所述的方法， 其中， 对于相对K级差分图片序列矩阵Sj-i， 提取该图片序 列矩阵中的每一个图片的噪声， 得到图片噪声序列矩阵Nj-i， 包括： 对于每一个图片， 将其进行灰度二值化处理后， 采用结构化腐蚀操作提取其中的噪声 序列。 8.一种移动终端， 所述移动终端包括图片处理程序， 所述图片处理程序包含单高斯噪 声模型以及混合高斯噪声模型， 用于实现权利要求1-7任一项所述的方法。 9.一种计算机可读存储介质， 其上存储有。

8、计算机可执行指令序列； 通过处理器执行所 述指令序列， 用于实现权利要求1-7任一项所述的方法。 权利要求书 2/2 页 3 CN 110990616 A 3 一种基于图片的人员属性分类方法及系统 技术领域 0001 本发明涉及终端技术领域， 特别涉及一种基于图片的人员属性分类方法及系统。 背景技术 0002 随着终端的普及与智能化以及电子技术的发展， 具有摄像功能的电子设备越来越 普及， 用户在电子设备中存储的图片越来越多， 图片的拍摄越来越日常化， 海量化。 用户拍 摄的图片越来越多， 用户通过朋友圈， 浏览器或其他途径下载的图片也越来越多， 随着图片 越来越多， 如何存储即管理这些图片，。

9、 成为人们的一个烦恼。 0003 当用户对手机内的图片进行浏览时， 基本只能按照拍摄顺序或图片获取日期进行 浏览， 无法满足用户方便的浏览特定图片的需求。 同时当需要对图片进行分类整理时， 用户 无法方便的在手机上完成图片的分类整理操作， 只能将图片批量传输至电脑上后， 再进行 分类整理操作； 这样导致对图片分类和浏览的效率均较为低下。 0004 在现有技术中， 终端可以在图库中应用图片管理组件， 自动设置关于时间的多个 相册分组， 终端根据拍摄图片的时间， 或下载图片的时间， 将每张图片自动归于对应的相册 分组中， 还可以是用户在图库中创建多个相册分组， 用户手动将图片存储至对应的相册分 组。

10、中。 0005 图片管理常用的手段是图片分类， 在现有技术中， 图片分类常有如下两种方式： 0006 一种是手动整理分类， 即用户自己手动把图片归类到不同的文件夹， 达到整理的 目的。 手动整理分类对用户来说是一个繁琐的过程， 随着图片的越来越多， 整理的工作量会 越来越大。 0007 二是自动分类， 自动分类方式有多种， 如按时间分类、 按地点分类、 按人物分类， 从 某一个维度将图片进行归类， 便于查看或查找。 但是这些分类方式都是一些便于浏览的分 类， 并非真正将图片整理到了不同的文件夹中， 没有达到用户想要整理的目的。 并且， 这些 自动分类方式过于机械化， 只能按其中某种单一维度来分。

11、类， 因此， 这种自动分类方式时常 达不到用户想要的效果。 0008 此外， 用户拍摄的图片或者下载的图片中， 不乏多个关于人物的图片， 如何自动 化、 智能化地根据图片中的每个人物进行图片分类， 也是用户的一大需求。 0009 对此， 公开号CN108549842A的中国发明专利申请公开一种人物图片分类的方法和 装置， 用以解决现有技术中终端不能自动化、 智能化地根据图片中的每个人物进行图片分 类的问题， 该方法主要是利用面部识别技术， 将属于同一个人的照片分到同一组； 然而， 该 方法不能应用于两人同框的图片识别分组； 公开号CN105824862A的中国发明专利申请则公 开一种基于电子设。

12、备的图片分类方法和一种进行图片分类的电子设备， 解决了现有图片分 类中存在的分类方式过于机械化、 分类维度单一、 自动分类结果达不到用户想要的效果的 问题， 该技术方案根据对电子设备中的图片进行在先分类得到的文件夹的分析， 获得该文 件夹对应的包含人物特征属性、 图片内容属性等特征属性信息， 当检测到待分类的图片时， 获取与该待分类的图片匹配的文件夹， 并将该待分类的图片自动保存在匹配的文件夹中， 说明书 1/7 页 4 CN 110990616 A 4 从多维度进行文件夹的分析， 从而完成了图片的自动分类过程， 智能化程度高， 提高了电子 设备的图片分类处理效率和提高了分类精确度， 大大减轻。

13、了用户整理图片的工作量， 也让 自动分类整理效果更吻合用户的预期目的。 可见， 该方法的维度选择要求较高； 如果维度选 择不准确， 则分类结果存疑。 0010 可见， 现有技术提出的图片分类方法均存在一定缺陷。 发明内容 0011 本发明提出一种基于图片的人员属性分类方法以及应用该方法的移动终端和计 算机可读存储介质。 本发明的技术方案， 通过移动终端获取图片后加入单高斯噪声， 并随机 选择候选图片序列分组后， 进行K级差分； 然后提取K级差分图片矩阵中每一个图片的噪声， 得到图片噪声序列矩阵， 通过判断图片噪声序列矩阵是否满足混合高斯模型来决定候选图 片序列分组是否成功。 本发明的上述方案，。

14、 通过提取候选图片序列中的图片属性， 并且结合 混合高斯模型对于灰度变化图片的敏感性， 来进行图片分组， 特别适合于人物图片分组， 并 且分组过程不需要用户介入也无需预先设定参数， 结果客观。 0012 在本发明的第一个方面， 提供一种基于图片的人员属性分类方法， 所述方法包括 如下步骤： 0013 F01： 通过移动终端获取包含多个不同人物的图片集PP1， P2， ， Pn； 0014 其中Pi表示第i张图片， i1,n； 0015 F02： 对于每一张图片Pi， 根据其至少一个单一属性值以及移动终端当前的CPU运 行频率， 加入单高斯噪声， 获得单高斯噪声图片集 0016F03:对于所述单。

15、高斯噪声图片集的每一张图片基于移动 终端当前图片处理程序的历史运行记录， 随机选取单高斯噪声图片集中剩余(n-1)张图 片中的K张图片， 组成随机图片序列Si； 其中K小于n-1； 0017 随机图片序列可表示为SiSS1,SS2,， SS1+K, 0018 F04： 将随机图片序列Si与K个随机图片序列Sj做相对K级差分， 获得相对K级差分 图片序列矩阵Sj-i； ji； j1,n； 0019 K个随机图片序列为 0020 Sj1K1S1,K1S2,， K1S1+K, 0021 Sj2K2S1,K2S2,， K2S1+K, 0022 0023 SjKKkS1,KkS2,， KKS1+K, 0。

16、024 得到相对K级差分图片序列矩阵 0025 说明书 2/7 页 5 CN 110990616 A 5 0026 F05： 对于相对K级差分图片序列矩阵Sj-i， 提取该图片序列矩阵中的每一个图片 的噪声， 得到图片噪声序列矩阵Nj-i； 0027 F06:判断图片噪声序列矩阵Nj-i是否符合混合高斯模型； 0028 如果符合， 则将随机图片序列Si对应的图片集分为一组； 否则， 返回步骤F03； 0029 其中， 对于每一张图片Pi， 根据其至少一个单一属性值以及移动终端当前的CPU运 行频率， 加入单高斯噪声， 具体包括： 0030 所述单高斯噪声概率密度分布函数为： 0031 0032。

17、 其中， 为所述单一属性值或者单一属性值的均值； 为移动终端当前的CPU运行频 率与所述单一属性值或者单一属性值的均值的比值。 0033 所述单一属性值， 包括如下之一或者其组合： 0034 图片的大小； 图片的拍摄时间； 图片的分辨率； 图片的平均像素值； 图片的平均灰 度值； 图片的对比度； 图片的亮度。 0035 所述混合高斯模型， 是N个单高斯噪声模型拟合而成的N维高斯模型， 对于变量X， 其概率密度分布函数可表示为： 0036 0037 其中： 0038 是均值向量， EX 1，2， .，NT 0039 是协方差矩阵， NN维， 而-1是的逆矩阵， |是的行列式 0040 E(X- 。

18、)(X- )T 0041 其中， 协方差矩阵如下： 0042 0043 其中， xi属于X。 0044 在本发明中， 所述混合高斯模型为K个单高斯噪声的组合。 0045所述方法中， 对于所述单高斯噪声图片集的每一张图片基 于移动终端当前图片处理程序的历史运行记录， 随机选取单高斯噪声图片集中剩余(n- 1)张图片中的K张图片， 0046 具体包括： 读取移动终端日志文件， 采集设定时间段内图片处理程序处理过的图 片数量V， 0047 如果Vn-l， 则KV； 说明书 3/7 页 6 CN 110990616 A 6 0048 如果Vn-l， 则KminV/2， n-2。 0049 其中， 将随。

19、机图片序列Si与K个随机图片序列Sj做相对K级差分， 包括： 0050 对于随机图片序列Si， 如果i+K小于n， 则K个随机图片序列SjSi+1,Si+2,， Si+K。 0051 其中， 对于相对K级差分图片序列矩阵Sj-i， 提取该图片序列矩阵中的每一个图片 的噪声， 得到图片噪声序列矩阵Nj-i， 包括： 0052 对于每一个图片， 将其进行灰度二值化处理后， 采用结构化腐蚀操作提取其中的 噪声序列。 0053 所述方法优选在移动终端上实现， 在本发明的第二个方面， 提供一种移动终端， 所 述移动终端包括图片处理程序， 所述图片处理程序包含单高斯噪声模型以及混合高斯噪声 模型， 用于实。

20、现所述基于图片的人员属性分类方法。 0054 在本发明的第三个方面， 还提供一种计算机可读存储介质， 其上存储有计算机可 执行指令序列； 通过处理器执行所述指令序列， 用于实现所述基于图片的人员属性分类方 法。 0055 本发明的进一步优点将结合附图， 通过具体的实施例进一步体现。 附图说明 0056 为了更清楚地说明本发明实施例或现有技术中的技术方案， 下面将对实施例中所 需要使用的附图作简单地介绍， 显而易见地， 下面描述中的附图仅仅是本发明的一些实施 例， 对于本领域普通技术人员来讲， 在不付出创造性劳动的前提下， 还可以根据这些附图获 得其他的附图。 0057 图1是本发明所述基于图片。

21、的人员属性分类方法的一个实施例的详细流程图； 0058 图2是本发明所述分类方法的算法实现主体流程图； 0059 图3是本发明所述单高斯模型和混合高斯模型的分布示意图； 0060 图4是本发明所述方法一个实施例的待分类图片样本图； 0061 图5是对图4所述的待分类图片进行属性分类后的效果图； 0062 图6是对图4所述的待分类图片基于属性分类后的另一个效果图。 具体实施例 0063 为了能够更清楚地理解本发明的上述目的、 特征和优点， 下面结合附图和实施例 对本发明做进一步说明。 需要说明的是， 在不冲突的情况下， 本申请的实施例及实施例中的 特征可以相互组合。 0064 参见图1， 该实施。

22、例给出基于图片的人员属性分类方法的详细流程图。 0065 所述方法首先通过移动终端获取包含多个不同人物的图片集PP1， P2， ， Pn； 其中Pi表示第i张图片， i1,n； 0066 在本实施例中， 所述移动终端可以是手机、 手提电脑、 个人数字助理、 移动便携电 脑或者其他具有图片拍摄功能的便携式移动终端； 0067 所述包含多个不同人物的图片集， 包含采用所述移动终端拍摄的实景图片， 还包 括用户通过朋友圈， 浏览器或其他途径下载的图片， 甚至还包括用户自己绘制的图片； 说明书 4/7 页 7 CN 110990616 A 7 0068 本实施例待处理的图片集的一个示意性样本集参见图4。

23、， 其中包括多张人物图片， 这些人物图片包括实际人物， 也包括卡通人物， 还包括线条人物以及人物阴影。 0069 接下来， 对于每一张图片Pi， 根据其至少一个单一属性值以及移动终端当前的CPU 运行频率， 加入单高斯噪声， 获得单高斯噪声图片集 0070 具体而言， 所述移动终端包括图片处理程序， 所述图片处理程序包括高斯模型组 件， 所述高斯模型组件可以产生多种维度的高斯噪声， 还可以判断给定的数据集是否符合 高斯模型； 0071 在本实施例中， 所述图片处理程序产生单高斯噪声的参数， 是结合移动终端当前 的CPU运行频率以及图片本身的属性值产生， 其表达式如下： 0072 0073 其中。

24、， 为所述单一属性值或者单一属性值的均值； 为移动终端当前的CPU运行频 率与所述单一属性值或者单一属性值的均值的比值。 0074 单高斯噪声的分布图的示意图见图2上图； 0075 所述单一属性值， 包括如下之一或者其组合： 0076 图片的大小； 图片的拍摄时间； 图片的分辨率； 图片的平均像素值； 图片的平均灰 度值； 图片的对比度； 图片的亮度。 0077在获得单高斯噪声图片集之后， 对于所述单高斯噪声图片集 的每一张图片基于移动终端当前图片处理程序的历史运行记录， 随 机选取单高斯噪声图片集中剩余(n-1)张图片中的K张图片， 组成随机图片序列Si； 其中K 小于n-1； 0078 随。

25、机图片序列可表示为SiSS1,SS2,， SS1+K, 0079 F04： 将随机图片序列Si与K个随机图片序列Sj做相对K级差分， 获得相对K级差分 图片序列矩阵Sj-i； ji； j1,n； 0080 K个随机图片序列为 0081 Sj1K1S1,K1S2,， K1S1+K, 0082 Sj2K2S1,K2S2,， K2S1+K, 0083 0084 SjKKkS1,KkS2,， KKS1+K, 0085 得到相对K级差分图片序列矩阵 0086 0087 在本实施例中， 基于移动终端当前图片处理程序的历史运行记录， 随机选取单高 说明书 5/7 页 8 CN 110990616 A 8 斯。

26、噪声图片集中剩余(n-1)张图片中的K张图片， 包括： 0088 读取移动终端的运行日志记载内容， 确定移动终端在相对集中的时间段内处理的 图片数量， 基于所述图片数量确定所述K； 例如， 移动终端的用户在1分钟内对3张图片进行 了处理； 间隔5分钟后， 又在2分钟内对4张图片进行了处理， 则选择其中的较小值3作为K； 这 一考虑， 是基于用于在某个较短时间内处理的多张图片， 在很大程度上属于相同属性的图 片， 特别是对于人物图片来说； 因此， 所述随机选择的数量K并不是完全随机， 而是要符合移 动终端客观的运行规律。 0089 然后， 对于相对K级差分图片序列矩阵Sj-i， 提取该图片序列矩。

27、阵中的每一个图片 的噪声， 得到图片噪声序列矩阵Nj-i； 0090 提取图片中的噪声， 对本领域技术人员来说属于现有技术， 针对一张图片， 有多种 方法可以识别出其中的噪声， 在此不再赘述； 本发明需要指出的是， 这里的提取噪声， 针对 的已经不是原始图片， 而是相对K级差分图片序列； 由于已经经过了差分处理， 与分组结果 无关的噪声已经被移除， 而仅仅保留了图片本身属性影响分组的那部分噪声； 0091 接下来， 就要根据噪声的分布属性来判断分组是否准确。 0092 具体而言， 判断图片噪声序列矩阵Nj-i是否符合混合高斯模型； 如果符合， 则将随 机图片序列Si对应的图片集分为一组； 00。

28、93 如果两张图片或者多张图片的属性基本相同， 例如人物画面占比相同， 背景占比 类似； 0094 或者， 图片的大小、 图片的拍摄时间、 图片的分辨率、 图片的平均像素值、 图片的平 均灰度值、 图片的对比度、 图片的亮度等基本相同， 并且是在特定时间段内集中被移动终端 处理过， 那么， 这一组图片在加入单高思噪声并且经过K级差分处理后， 其结果图片本身的 噪声将很大程度上符合混合高斯分布， 这是由混合高斯分布的特性所决定的。 本发明正是 发现了这一点， 提出有效的分组识别方案。 0095 混合高斯模型使用K个高斯模型来表征图像中各个像素点的特征。 混合高斯模型 (Gaussian mixt。

29、ure model， 简称GMM)就是用高斯概率密度函数(二维时也称为： 正态分布 曲线)精确的量化事物， 将一个事物分解为若干基于高斯概率密度函数行程的模型。 0096 举例来说， 上述单高斯噪声可被认为是二维(混合)高斯分布； 相对应的， 三维混合 高斯模型表达式如下： 0097 0098 其中：1、 2是均值 0099 1、 2是标准差 0100 是协方差. cov(x， y) 0101 本实施例中， 所述混合高斯模型， 是N个单高斯噪声模型拟合而成的N维高斯模型， 对于变量X， 其概率密度分布函数可表示为： 说明书 6/7 页 9 CN 110990616 A 9 0102 0103 。

30、其中： 0104 是均值向量， EX 1，2， .，NT 0105 是协方差矩阵， NN维， 而-1是的逆矩阵， |是的行列式 0106 E(X- )(X- )T 0107 其中， 协方差矩阵如下： 0108 0109 在本发明中， 所述混合高斯模型为K个单高斯噪声的组合。 0110 参见图5是对图3所述的待分类图片进行属性分类后的效果图。 在图5中可以看到， 本发明所述的基于图片的人员属性进行分类， 其结果基本令人满意； 0111 进一步的， 本实施例的上述方法还可以多次运行， 并且每一次运行由于均是在执 行所述图片处理程序， 因此， 改变的是移动终端当前图片处理程序的历史运行记录， 从而改。

31、 变了随机选取单高斯噪声图片集中剩余(n-1)张图片中的K张图片组成的随机图片序列 Si， 从而对应的分类结果也会积极改变。 0112 参见图6， 是对图4所述的待分类图片基于属性分类后的另一个效果图。 和图5相 比， 分类结果更加细化， 并且准确度更高。 0113 上述分类方法还可以采用计算机程序指令实现， 参见图2， 本发明所述分类方法的 算法实现主体流程图。 上述流程通过计算机程序代码的形式， 存储于计算机可读存储介质 中， 通过移动终端的存储器和处理器执行上述图片分类方法。 0114 在所述移动终端中， 包括图片处理程序， 所述图片处理程序包含单高斯噪声模型 以及混合高斯噪声模型。 所。

32、述图片处理程序包括的所述高斯模型组件可以产生多种维度的 高斯噪声， 还可以判断给定的数据集是否符合高斯模型。 0115 结合图5-图6的分类结果证明， 本发明提出的基于图片的人员属性分类方法， 对于 包含人物图片的图片集分类效果十分有效。 0116 通过上面具体实施方式， 所述技术领域的技术人员可容易的实现本发明。 但是应 当理解， 本发明并不限于上述的具体实施方式。 在公开的实施方式的基础上， 所述技术领域 的技术人员可任意组合不同的技术特征， 从而实现不同的技术方案。 说明书 7/7 页 10 CN 110990616 A 10 图1 说明书附图 1/4 页 11 CN 110990616 A 11 图2 说明书附图 2/4 页 12 CN 110990616 A 12 图3 图4 说明书附图 3/4 页 13 CN 110990616 A 13 图5 图6 说明书附图 4/4 页 14 CN 110990616 A 14 。