基于车牌识别和图像方差算法的小区违停告警方法.pdf

《基于车牌识别和图像方差算法的小区违停告警方法.pdf》由会员分享，可在线阅读，更多相关《基于车牌识别和图像方差算法的小区违停告警方法.pdf（9页完成版）》请在专利查询网上搜索。

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201910268522.2 (22)申请日 2019.04.04 (71)申请人 上海天诚比集科技有限公司 地址 201613 上海市松江区光星路618号2 幢904室 (72)发明人 魏晓林陈宏亮黄平陈勇 杨俊武 (74)专利代理机构 上海德悦知识产权代理事务 所(普通合伙) 31344 代理人 吴庆 (51)Int.Cl. G06K 9/32(2006.01) G06Q 50/26(2012.01) G08G 1/017(2006.01) (54)发明名称 基于车牌识别和图。

2、像方差算法的小区违停 告警方法 (57)摘要 本发明公开了基于车牌识别和图像方差算 法的小区违停告警方法， 利用小区内普通摄像 头， 对主干道上禁止停车或者限制临时时间的区 域进行实时监控， 更加智能化的将小区内违规停 车的车辆信息实时上报到小区车辆出入口的车 闸信息系统中， 进行违停罚款处理。 本发明通过 图像灰度图检测区域方差算法进行预处理和过 滤， 更加高效、 快速、 低耗能和智能化的对小区内 违规停车现象进行实时监测和举证处理， 提升小 区生活品质和提高小区智能化管理水平。 权利要求书2页 说明书5页 附图1页 CN 110008957 A 2019.07.12 CN 11000895。

3、7 A 1.一种基于车牌识别和图像方差算法的小区违停告警方法， 其特征在于： 包括以下步 骤： S1、 在小区摄像头拍摄区域内划定车辆违停监测区域， 在摄像头成像相片内将车辆违 停监测区域进行圈定； S2、 在所述车辆违停监测区域正常情况下， 获取一张照片P0作为对比底图； 对P0进行灰 度处理得到灰度图P0_gray； S3、 每隔N帧实时对摄像头的帧图像P与对比底图P0检测区域进行均方差err计算； S4、 若err大于8， 对帧图像P进行车牌识别， 确认车辆违停信息并进行处理， 将车辆违停 信息上报至门卫车辆出入闸管理系统； 若err小于等于8， 则返回步骤S3； S5、 所述门卫车辆出。

4、入闸管理系统收到车辆违停信息后， 将违停车辆录入违停车辆信 息库并计算违停罚款数额； 当违停车辆缴纳罚款并通过车闸后， 所述门卫车辆出入闸管理 系统将该车辆的违停信息移存至历史违停处罚记录。 2.根据权利要求1所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 所述步骤S3之后还包括以下步骤S6： 记上一次底图更新时间为T0， 若检测到某一帧图 像P的对比均方差err小于1， 且此时时间T满足T-T060s， 则将底图P0替换为P， 对底图进行 更新。 3.根据权利要求2所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 所述步骤S6与所述步骤S4同步进行。。

5、 4.根据权利要求1所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 所述步骤S3均方差err计算具体步骤为： S31、 设置帧图像P的图像像素为H*W*3， 对帧图像P进行灰度处理后得到帧图像P的灰度 图P_gray； S32、 检测区域的四个点坐标D1(x1， y1)， D2(x2， y2)， D3(x3， y3)， D4(x4， y4)所形成的四 边形圈定区域A； S33、 设定帧图像像素差临界值为temp， 则计算灰度图P0_gray和P_gray在区域A上的像 素方差err， 计算公式为： 其中， (h,w)A且P_gray(h,w)-P0_gray(h,w)te。

6、mp。 5.根据权利要求1或4所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特 征在于： 所述步骤S3中N为30， 即每隔30帧获取摄像头视频流中的一帧P。 6.根据权利要求1所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 在所述步骤S4内所述确认车辆违停信息并进行处理步骤之前， 还包括步骤S7： 设置违 停车辆信息登记字典。 7.根据权利要求6所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 所述违停车辆信息登记字典内包括信息有： 车牌号、 违停状态、 当前违停初始被抓拍 时间Tf、 当前违停上次被抓拍时间Tl、 累计违停时间Tw、 违停车。

7、辆证据存储队列、 潜在车辆 违停证据临时存储队列。 权利要求书 1/2 页 2 CN 110008957 A 2 8.根据权利要求7所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 所述步骤S4具体包括以下步骤： S41、 对帧图像P进行车牌识别， 识别出完整车牌信息； S42、 判断所述车牌信息是否存在于所述违停车辆信息登记字典内， 若不存在， 在所述 违停车辆信息登记字典内建立该车牌信息， 并将帧图像数据加入所述潜在车辆违停证据临 时存储队列； 之后执行步骤S43； 若存在， 执行步骤S43； S43、 获取该车牌信息在所述违停车辆信息登记字典内的当前违停上次被抓拍时间。

8、Tl； 若本次被抓拍时间Tn-Tlt0， 则将Tl之前违停信息保存， 重新开始当前违停计时， 所述当前 违停初始被抓拍时间Tf、 所述当前违停上次被抓拍时间Tl均修改为Tn， 将帧图像P添加到所 述潜在车辆违停证据临时存储队列； 若本次被抓拍时间Tn-Tlt0， 则判断当前违停的累积 违停时间TwTn-Tf是否大于临停车区域的限制时间的分钟数， 若大于则将帧图像P添加到 所述违停车辆证据存储队列， 并将车辆违停信息上报至门卫车辆出入闸管理系统， 否则， 修 改当前违停上次被抓拍时间Tl本次被抓拍时间Tn， 将帧图像数据加入所述潜在车辆违停 证据临时存储队列。 9.根据权利要求8所述的基于车牌识。

9、别和图像方差算法的小区违停告警方法， 其特征 在于： 所述t0为1.5分钟。 10.根据权利要求1所述的基于车牌识别和图像方差算法的小区违停告警方法， 其特征 在于： 所述步骤S5中， 当所述违停车辆信息库内有多个违停信息时， 计算违停罚款最大数额 作为最终罚款数额。 权利要求书 2/2 页 3 CN 110008957 A 3 基于车牌识别和图像方差算法的小区违停告警方法 技术领域 0001 本发明涉及一种智能小区管理方法， 尤其涉及一种基于车牌识别和图像方差算法 的小区违停告警机制。 背景技术 0002 随着城市人口集中化趋势的发展和科技的进步， 智慧社区逐渐由理论转向实践， 越来越多的智。

10、能化设备和技术应用到社区的基本管理和社区成员的日常生活中。 然而社区 内人口的流动性很大， 人员类型也很复杂， 车辆进出也存在很大的乱象， 很多非停车区域或 者限制停车时间的区域， 往往由于人为监管难度大， 而迟迟无法解决， 造成小区内车辆堵塞 道路， 小区内车辆行驶困难， 严重影响了小区的生活质量和出行方便。 0003 因此， 有必要提出一种改进， 解决现有的问题。 发明内容 0004 本发明的目的是解决现有技术中的问题， 提供一种基于车牌识别和图像方差算法 的小区违停告警方法。 0005 本发明的技术方案是： 一种基于车牌识别和图像方差算法的小区违停告警方法， 包括以下步骤： S1、 在小。

11、区摄像头拍摄区域内划定车辆违停监测区域， 在摄像头成像相片内 将车辆违停监测区域进行圈定； S2、 在所述车辆违停监测区域正常情况下， 获取一张照片P0 作为对比底图； 对P0进行灰度处理得到灰度图P0_gray； S3、 每隔N帧实时对摄像头的帧图像 P与对比底图P0检测区域进行均方差err计算； S4、 若err大于8， 对帧图像P进行车牌识别， 确 认车辆违停信息并进行处理， 将车辆违停信息上报至门卫车辆出入闸管理系统； 若err小于 等于8， 则返回步骤S3； S5、 所述门卫车辆出入闸管理系统收到车辆违停信息后， 将违停车辆 录入违停车辆信息库并计算违停罚款数额； 当违停车辆缴纳罚款。

12、并通过车闸后， 所述门卫 车辆出入闸管理系统将该车辆的违停信息移存至历史违停处罚记录。 0006 作为一种优选的技术方案， 所述步骤S3之后还包括以下步骤S6： 记上一次底图更 新时间为T0， 若检测到某一帧图像P的对别均方差err小于1， 且此时时间T满足T-T060s， 则将底图P0替换为P， 对底图进行更新。 0007 作为一种进一步优选的技术方案， 所述步骤S6与所述步骤S4同步进行。 0008 作为一种优选的技术方案， 所述步骤S3均方差err计算具体步骤为： S31、 设置帧图 像P的图像像素为H*W*3， 对帧图像P进行灰度处理后得到帧图像P的灰度图P_gray； S32、 检 。

13、测区域的四个点坐标D1(x1， y1)， D2(x2， y2)， D3(x3， y3)， D4(x4， y4)所形成的四边形圈定区 域A； S33、 设定帧图像像素差临界值为temp， 则计算灰度图P0_gray和P_gray在区域A上的像 素方差err， 计算公式为：其 中， (h,w)A且P_gray(h,w)-P0_gray(h,w)temp。 0009 作为一种进一步优选的技术方案， 所述步骤S3中N为30， 即每隔30帧获取摄像头视 说明书 1/5 页 4 CN 110008957 A 4 频流中的一帧P。 0010 作为一种优选的技术方案， 在所述步骤S4内所述确认车辆违停信息并进。

14、行处理步 骤之前， 还包括步骤S7： 设置违停车辆信息登记字典。 0011 作为一种进一步优选的技术方案， 所述违停车辆信息登记字典内包括信息有： 车 牌号、 违停状态、 当前违停初始被抓拍时间Tf、 当前违停上次被抓拍时间Tl、 累计违停时间 Tw、 违停车辆证据存储队列、 潜在车辆违停证据临时存储队列。 0012 作为一种更进一步优选的技术方案， 所述步骤S4具体包括以下步骤： S41、 对帧图 像P进行车牌识别， 识别出完整车牌信息； S42、 判断所述车牌信息是否存在于所述违停车辆 信息登记字典内， 若不存在， 在所述违停车辆信息登记字典内建立该车牌信息， 并将帧图像 数据加入所述潜在。

15、车辆违停证据临时存储队列； 之后执行步骤S43； 若存在， 执行步骤S43； S43、 获取该车牌信息在所述违停车辆信息登记字典内的当前违停上次被抓拍时间Tl； 若本 次被抓拍时间Tn-Tlt0， 则将Tl之前违停信息保存， 重新开始当前违停计时， 所述当前违停 初始被抓拍时间Tf、 所述当前违停上次被抓拍时间Tl均修改为Tn， 将帧图像P添加到所述潜 在车辆违停证据临时存储队列； 若本次被抓拍时间Tn-Tlt0， 则判断当前违停的累积违停 时间TwTn-Tf是否大于临停车区域的限制时间的分钟数， 若大于则将帧图像P添加到所述 违停车辆证据存储队列， 并将车辆违停信息上报至门卫车辆出入闸管理系。

16、统， 否则， 修改当 前违停上次被抓拍时间Tl本次被抓拍时间Tn， 将帧图像数据加入所述潜在车辆违停证据 临时存储队列。 0013 作为一种再进一步优选的技术方案， 所述t0为1.5分钟。 0014 作为一种优选的技术方案， 所述步骤S5中， 当所述违停车辆信息库内有多个违停 信息时， 计算违停罚款最大数额作为最终罚款数额。 0015 本发明的基于车牌识别和图像方差算法的小区违停告警方法， 利用小区内普通摄 像头， 对主干道上禁止停车或者限制临时时间的区域进行实时监控， 更加智能化的将小区 内违规停车的车辆信息实时上报到小区车辆出入口的车闸信息系统中， 进行违停罚款处 理。 同时由于普通摄像头。

17、下进行车牌识别需要借助云端视频流调曲， 所有识别操作在云端 进行， 受到环境影响例如光线、 车牌角度等干扰因素比较大， 车牌识别算法比较复杂， 频繁 调用消耗性能较大， 因此本发明采用图像方差进行预处理和过滤， 更加高效、 快速、 低耗能 和智能化的对小区内违规停车现象进行实时监测和举证处理， 提升小区生活品质和提高小 区智能化管理水平。 0016 本发明的基于车牌识别和图像方差算法的小区违停告警方法中图像灰度图方差 算法运行效率远高于车牌识别的效率， 因此首先通过图像灰度图检测区域方差算法进行疑 似车辆在限定最可停车时间的临停车区域进行初步检测， 若发现疑似车辆， 则对视频监控 的获取的该帧。

18、图像进行车牌识别， 若识别出车牌信息， 则将对该车牌在限时临停区域进行 停车时间计算， 若超过临停限制时间， 则将该车车牌信息推动到小区的车辆进出口系统， 当 车辆经过小区车辆出入车闸处， 不予通行， 提示缴纳违停罚款和累计停车时长信息， 并展示 一张违停图片。 附图说明 0017 图1为本发明基于车牌识别和图像方差算法的小区违停告警方法的流程框图。 说明书 2/5 页 5 CN 110008957 A 5 具体实施方式 0018 为使本发明实施例的目的、 技术方案和优点更加清楚， 下面将结合本发明实施例 中的附图， 对本发明实施例中的技术方案进行清楚、 完整地描述， 显然， 所描述的实施例是。

19、 本发明一部分实施例， 而不是全部的实施例。 基于本发明中的实施例， 本领域普通技术人员 在没有作出创造性劳动前提下所获得的所有其他实施例， 都属于本发明保护的范围。 0019 在本发明实施例中使用的术语是仅仅出于描述特定实施例的目的， 而非旨在限制 本发明。 在本发明实施例和所附权利要求书中所使用的单数形式的 “一种” 、“所述” 和 “该” 也旨在包括多数形式， 除非上下文清楚地表示其他含义，“多种” 一般包含至少两种， 但是不 排除包含至少一种的情况。 0020 应当理解， 本文中使用的术语 “和/或” 仅仅是一种描述关联对象的关联关系， 表示 可以存在三种关系， 例如， A和/或B， 。

20、可以表示： 单独存在A， 同时存在A和B， 单独存在B这三种 情况。 另外， 本文中字符 “/” ， 一般表示前后关联对象是一种 “或” 的关系。 0021 取决于语境， 如在此所使用的词语 “如果” 、“若” 可以被解释成为 “在时” 或 “当时” 或 “响应于确定” 或 “响应于检测” 。 类似地， 取决于语境， 短语 “如果确定” 或 “如 果检测(陈述的条件或事件)” 可以被解释成为 “当确定时” 或 “响应于确定” 或 “当检测(陈述 的条件或事件)时” 或 “响应于检测(陈述的条件或事件)” 。 0022 还需要说明的是， 术语 “包括” 、“包含” 或者其任何其他变体意在涵盖非排。

21、他性的 包含， 从而使得包括一系列要素的商品或者系统不仅包括那些要素， 而且还包括没有明确 列出的其他要素， 或者是还包括为这种商品或者系统所固有的要素。 在没有更多限制的情 况下， 由语句 “包括一个” 限定的要素， 并不排除在包括所述要素的商品或者系统中还 存在另外的相同要素。 0023 如图1所示， 本发明的一种基于车牌识别和图像方差算法的小区违停告警方法， 包 括以下步骤： S1、 在小区摄像头拍摄区域内划定车辆违停监测区域， 在摄像头成像相片内将 车辆违停监测区域进行圈定； S2、 在所述车辆违停监测区域正常情况下， 获取一张照片P0作 为对比底图； 对P0进行灰度处理得到灰度图P0。

22、_gray； S3、 每隔N帧实时对摄像头的帧图像P 与对比底图P0检测区域进行均方差err计算； S4、 若err大于8， 对帧图像P进行车牌识别， 确 认车辆违停信息并进行处理， 将车辆违停信息上报至门卫车辆出入闸管理系统； 若err小于 等于8， 则返回步骤S3； S5、 所述门卫车辆出入闸管理系统收到车辆违停信息后， 将违停车辆 录入违停车辆信息库并计算违停罚款数额； 当违停车辆缴纳罚款并通过车闸后， 所述门卫 车辆出入闸管理系统将该车辆的违停信息移存至历史违停处罚记录。 0024 为了保证地图P0可以反映出车辆违停监测区域的真实图形信息， 提高图像处理的 准确性， 作为优选方案， 所。

23、述步骤S3之后还包括以下步骤S6： 记上一次底图更新时间为T0， 若检测到某一帧图像P的对别均方差err小于1， 且此时时间T满足T-T060s， 则将底图P0替 换为P， 对底图进行更新。 0025 在实际应用中步骤S6涉及到对均方差err的判断， 步骤S4也涉及到对均方差err的 判断， 因此， 步骤S6可以与步骤S4同步进行， 也可以先于或晚于步骤S4进行， 同时， 由于对均 方差err的取值要求不同， 应当知晓， 步骤S4与步骤S6是择一进行的。 0026 底图P0的灰度图P0_gray为P0图像中H*W的二维数组。 0027 对于步骤S3中对摄像头的帧图像P与对比底图P0检测区域进行。

24、均方差err计算的 说明书 3/5 页 6 CN 110008957 A 6 步骤为： S31、 设置帧图像P的图像像素为H*W*3， 对帧图像P进行灰度处理后得到帧图像P的 灰度图P_gray； S32、 检测区域的四个点坐标D1(x1， y1)， D2(x2， y2)， D3(x3， y3)， D4(x4， y4) 所形成的四边形圈定区域A； S33、 设定帧图像像素差临界值为temp， 则计算灰度图P0_gray 和P_gray在区域A上的像素方差err， 计算公式为： 其中， (h,w)A且P_gray(h, w)-P0_gray(h,w)temp。 0028 上述P_gray为帧图像。

25、P的图像信息中H*W的二维数组。 0029 在所述步骤S4内所述确认车辆违停信息并进行处理步骤之前， 还包括步骤S7： 设 置违停车辆信息登记字典。 步骤S7可以在步骤S4之前的任一时间进行， 也即可以在步骤S1、 S2、 S3、 S4任一步骤之前。 0030 所述违停车辆信息登记字典内可以包括信息有： 车牌号、 违停状态、 当前违停初始 被抓拍时间Tf、 当前违停上次被抓拍时间Tl、 累计违停时间Tw、 违停车辆证据存储队列、 潜 在车辆违停证据临时存储队列。 0031 在实际应用中， 违停车辆信息登记字典结构如下： Car_Illegel_lane_dic车牌 号 ： 违 停 状 态 ： 。

26、(t u r e / f a l s e) ； 当 前 违 停 初 始 被 抓 拍时 间 T f ： T _ f i r s t _ time： *-*-*:*:*(年-月-日时-分-秒)； 当前违停上次被抓拍时间Tl： T_last_ time： *-*-*:*:*(年-月-日时-分-秒)； 累计违停时间Tw： T_Illegel_lane_ durationg:*(分)； 违停车辆证据存储路径(*/*/车牌号_第一次被抓拍时间(T_first_ time)_摄像头IP.npy)。 由于同一辆车辆相邻两次被抓拍并记录和保存违停信息的时间 间隔至少为1分钟， 潜在车辆违停视频证据临时存储队列f。

27、rame_Queue， 队列长度为临停车 区域的限制时间的分钟数limit_minute_max。 0032 此时， 步骤S4具体包括以下步骤： S41、 对帧图像P进行车牌识别， 识别出完整车牌 信息； S42、 判断所述车牌信息是否存在于所述违停车辆信息登记字典内， 若不存在， 在所述 违停车辆信息登记字典内建立该车牌信息， 并将帧图像数据加入所述潜在车辆违停证据临 时存储队列； 之后执行步骤S43； 若存在， 执行步骤S43； S43、 获取该车牌信息在所述违停车 辆信息登记字典内的当前违停上次被抓拍时间Tl； 若本次被抓拍时间Tn-Tlt0， 则将Tl之 前违停信息保存， 重新开始当前。

28、违停计时， 所述当前违停初始被抓拍时间Tf、 所述当前违停 上次被抓拍时间Tl均修改为Tn， 将帧图像P添加到所述潜在车辆违停证据临时存储队列； 若 本次被抓拍时间Tn-Tlt0， 则判断当前违停的累积违停时间TwTn-Tf是否大于临停车区 域的限制时间的分钟数， 若大于则将帧图像P添加到所述违停车辆证据存储队列， 并将车辆 违停信息上报至门卫车辆出入闸管理系统， 否则， 修改当前违停上次被抓拍时间Tl本次 被抓拍时间Tn， 将帧图像数据加入所述潜在车辆违停证据临时存储队列。 0033 在步骤SS42中， 若车牌信息不存在于违停车辆信息登记字典内， 则将该车辆信息 根据字典License_pl。

29、ate_information结构， 将对应信息添加进去， 该车辆信息被视为潜在 违停车辆， 作为潜在违停车辆其车牌信息被创建License_plate_information_frame_ Queue.create(limit_minute_max)， 并且执行License_plate_information_frame_ Queue.put(P),即将图片数据加入队列。 0034 步骤S43中， 当Tn-Tlt0时， 将该帧图像添加到该车辆的违停视频证据临时存储 说明书 4/5 页 7 CN 110008957 A 7 队列License_plate_information_frame_。

30、Queue.put(p)， 后判断判断当前违停的累积违停 时间TwTn-Tf是否大于临停车区域的限制时间的分钟数。 若大于则将该License_plate_ information_frame_Queue队列中的帧存储在违停车辆视频存储路径(*/*/车牌号_第一 次被抓怕时间(T_first_time)_摄像头IP.npy)内作为证据， 并将车辆违停信息上报至门卫 车辆出入闸管理系统。 否则， 修改当前违停上次被抓拍时间Tl： T_last_time本次被抓拍 时间Tn： time.time， 将帧图像数据加入所述潜在车辆违停证据临时存储队列License_ plate_information。

31、_frame_Queue.put(p)。 0035 在实际应用中， t0可以设定为1.5分钟。 当然也可以根据需求， 设定为其他数值。 0036 由于同一车辆在车辆车闸系统可能会录入多个违停信息， 车辆出入口关系统收到 车辆违停信息上报后， 将违停车辆录入违停车辆信息库， 并根据摄像头IP计算违停罚款最 大数额作为惩罚最终数额， 当违停车辆缴纳完罚款并通过车闸后， 车闸系统将会把系统内 所有有关该车辆的违停信息移存到历史违停处罚记录内。 0037 本发明的基于车牌识别和图像方差算法的小区违停告警方法， 利用小区内普通摄 像头， 对主干道上禁止停车或者限制临时时间的区域进行实时监控， 更加智能化。

32、的将小区 内违规停车的车辆信息实时上报到小区车辆出入口的车闸信息系统中， 进行违停罚款处 理。 同时由于普通摄像头下进行车牌识别需要借助云端视频流调曲， 所有识别操作在云端 进行， 受到环境影响例如光线、 车牌角度等干扰因素比较大， 车牌识别算法比较复杂， 频繁 调用消耗性能较大， 因此本发明采用图像方差进行预处理和过滤， 更加高效、 快速、 低耗能 和智能化的对小区内违规停车现象进行实时监测和举证处理， 提升小区生活品质和提高小 区智能化管理水平。 0038 本发明的基于车牌识别和图像方差算法的小区违停告警方法中图像灰度图方差 算法运行效率远高于车牌识别的效率， 因此首先通过图像灰度图检测区。

33、域方差算法进行疑 似车辆在限定最可停车时间的临停车区域进行初步检测， 若发现疑似车辆， 则对视频监控 的获取的该帧图像进行车牌识别， 若识别出车牌信息， 则将对该车牌在限时临停区域进行 停车时间计算， 若超过临停限制时间， 则将该车车牌信息推动到小区的车辆进出口系统， 当 车辆经过小区车辆出入车闸处， 不予通行， 提示缴纳违停罚款和累计停车时长信息， 并展示 一张违停图片。 0039 综上所述仅为本发明较佳的实施例， 并非用来限定本发明的实施范围。 即凡依本 发明申请专利范围的内容所作的等效变化及修饰， 皆应属于本发明的技术范畴。 说明书 5/5 页 8 CN 110008957 A 8 图1 说明书附图 1/1 页 9 CN 110008957 A 9 。