视频自动实时监控水坝破损变形的装置和方法.pdf

《视频自动实时监控水坝破损变形的装置和方法.pdf》由会员分享，可在线阅读，更多相关《视频自动实时监控水坝破损变形的装置和方法.pdf（12页完成版）》请在专利查询网上搜索。

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201910773097.2 (22)申请日 2019.08.21 (71)申请人 南京理工大学 地址 210094 江苏省南京市玄武区孝陵卫 200号 (72)发明人 丁勇杨奇昊董雪花陈鹏宇 (74)专利代理机构 南京苏创专利代理事务所 (普通合伙) 32273 代理人 张艳 (51)Int.Cl. G01N 21/88(2006.01) G01N 21/95(2006.01) G01N 21/01(2006.01) G01B 11/16(2006.01) H04N 7/18(。

2、2006.01) G08B 21/18(2006.01) (54)发明名称 视频自动实时监控水坝破损变形的装置和 方法 (57)摘要 本发明涉及一种视频自动实时监控水坝破 损变形的装置和方法， 该装置包括标志系统、 视 频分析系统以及数据库和报警系统； 该方法包 括： 在预观察的坝体表面布置标注系统； 在坝体 的对面安装若干个摄像机， 所有摄像机的采集画 面拼接成完整的坝体表面画面； 数据分析模块记 录住各个时刻采集到的画面， 并存储到数据库， 数据库和报警系统将即时采集的画面与前面所 有的画面对比， 若变形量达到报警阈值， 发出报 警， 否则继续监测。 本发明通过通过采集和分析 标注系统的实。

3、时变化， 为坝体监测提供较为准确 的参考信息， 并设置自动报警。 权利要求书2页 说明书5页 附图4页 CN 110646434 A 2020.01.03 CN 110646434 A 1.视频自动实时监控水坝破损变形的装置， 其特征在于： 包括标志系统、 视频分析系统 以及数据库和报警系统， 所述标志系统布置于水坝的倾斜表面， 标志系统在水坝的倾斜表面上形成颜色分明、 规律明显、 整齐排列的间隔色块； 所述视频分析系统正对着标志系统， 实时采集标志系统的画面信息， 并将采集到的画 面信息进行处理， 最终传送给数据库和报警系统； 所述数据库和报警系统与视频分析系统连接， 接收来自视频分析系统的。

4、信息， 并进行 数据比较， 根据比较输出结果， 判断是否给出报警信号。 2.根据权利要求1所述的视频自动实时监控水坝破损变形的装置， 其特征在于： 所述标 志系统采用靶盘固定于坝体表面， 所述靶盘表面为正方形， 纵向中线和横向中线将其分割 为4个区域， 对角线的区域为同色的黑色或白色， 纵向中线和横向中线的中点为对应靶盘的 观测点； 所述坝体表面固定有若干个排和若干个列的靶盘， 排与排之间的间距、 列与列之间的 间距相同， 排间距和列间距相等， 形成纵向和横向均等距分布的离散点， 所有靶盘的表面颜 色排列相同。 3.根据权利要求1所述的视频自动实时监控水坝破损变形的装置， 其特征在于： 所述靶。

5、 盘的背面设置有嵌块， 所述嵌块插入到坝体内。 4.根据权利要求1所述的视频自动实时监控水坝破损变形的装置， 其特征在于： 所述标 志系统粉刷在坝体表面， 形成等距分布的规律排布的色块。 5.根据权利要求1所述的视频自动实时监控水坝破损变形的装置， 其特征在于： 所述视 频分析系统包括摄像机和数据分析模块， 所述摄像机正对着坝体上的标志系统， 根据坝体 的长度和宽度， 设置若干个摄像机， 摄像机能够采集所有待测区域， 相邻的摄像机边缘拼 接； 所述数据分析模块读取监测面所有靶盘的实时图像， 经灰度化与二值化处理后得到只 有黑白两种颜色的图像， 之后将二值图进行去噪可减少周围环境的干扰， 采用H。

6、ough变换确 定图像中靶盘中心点所在的位置， 通过预先确定的最左上角坐标原点靶盘大小和位置计算 所有离散坐标识别点的相对坐标原点靶盘的坐标， 将同一横排或纵列的坐标识别点用平滑 曲线连接， 利用最小二乘法拟合可得到横纵正交的多条直线， 并将其编号， 利用坐标几何法 计算出每一条横纵直线/曲线的弧度、 长度数学信息。 6.根据权利要求1所述的视频自动实时监控水坝破损变形的装置， 其特征在于： 所述数 据库和报警系统为标志系统中的每一个观测点设定编号， 并记录其坐标位置， 设置报警阈 值， 在数据分析模块进行分析后， 将所有坐标监测点的相对坐标信息以及每一条曲线的数 学信息存储于数据库中， 实时。

7、分析数据变化， 若某些点相对位移过大且曲线弧度超出阈值， 则发出报警， 否则， 继续监测。 7.视频自动实时监控水坝破损变形的方法， 其特征在于： 包括以下操作步骤： 步骤1： 安装标注系统： 在预观察的坝体表面布置标注系统， 若坝体表面不平整， 靶盘纵 向和横向等距分布排列成阵， 靶盘背面的嵌块安插入坝体， 每个靶盘上的颜色分布均相同， 所有靶盘的连线构成正交网格， 若坝体表面平整， 用防水涂料粉刷出方形色块， 每个方形色 块的颜色与每个靶盘上的色块分布一致， 色块的分布与靶盘的分布一致； 权利要求书 1/2 页 2 CN 110646434 A 2 步骤2： 安装摄像机： 在坝体的对面安装。

8、若干个摄像机， 摄像机与拍摄镜头与坝体的预 观察面垂直， 相邻摄像机的拍摄区域刚好拼接； 步骤3： 采集画面： 所有摄像机的采集画面传送到同一个数据分析模块， 所有摄像机的 采集画面拼接成完整的坝体表面画面； 步骤4： 处理画面： 数据分析模块记录住各个时刻采集到的画面， 并存储到数据库， 步骤5： 比较数据： 数据库和报警系统将即时采集的画面与前面所有的画面对比， 若变 形量达到报警阈值， 发出报警， 否则继续监测。 8.根据权利要求7所述的视频自动实时监控水坝破损变形的方法， 其特征在于： 所述步 骤3-5的具体过程为： （1） 摄像头持续进行监控， 并设定的时间间隔进行视频图像抓取， 抓。

9、取采用python的 OpenCV.VideoCapture方法并将抓取后的图片存入电脑内存进行下一步处理； （2） 使用OpenCV对上述图像进行灰度化、 去噪、 图像增强、 形态学变化、 二值化处理； （3） 根据标志牌的黑白分布特点得出标志点中心位置， 将所有中心位置在图像中的像 素点位置由坐标形式保存到数据库中； （4） 将该图像进一步使用python的MatPlotlib方法将所有标识牌中心位置进行连线， 将得到的新的图像存入数据库中， 并显示到系统界面中以实时监控； （5） 由于已知标志牌长宽和标志牌黑白色块所占的像素个数， 换算得到每个像素点的 实际长度， 将此换算比例保存到内存。

10、变量中； （6） 取两个标志牌中心位置连线上的一定数量的点的坐标， 通过数学几何计算其两两 连线与水平线的角度并进行图像拟合， 得出标志中心连线的近似弧度， 并保存到数据库中； （7） 计算所有标志牌中心与上次观测得到的所有标志牌中心的坐标差值， 即为其坐标 的横向与纵向变化值， 存入数据库中， 进一步根据两点间距离公式得出中心位置变化的坐 标位移大小， 通过第 （5） 步所得到的换算比例将上述所有坐标变换值换算得出实际的横纵 向变化和位移变化长度， 存入数据库中； （8） 系统以设定的时间间隔将新的弧度、 横纵位移、 实际位移变化与系统预设的变化阈 值进行比较， 若超过变化阈值， 则警告使用。

11、人员， 对坝体进行人工检测和维护。 权利要求书 2/2 页 3 CN 110646434 A 3 视频自动实时监控水坝破损变形的装置和方法 技术领域 0001 本发明涉及一种视频自动实时监控水坝破损变形的装置和方法， 属于水利工程管 理技术领域。 背景技术 0002 我国是一个水利大国， 随着各类水利工程的不断发展建设， 国家对各种水利设施 自身的监管和维护提出了新的要求， 加之现代通信技术和视频技术的迅速发展， 为水利建 设的数字化提供了技术上的有力保证。 因此， 改造优化水利设施的安全监控， 建设水利设施 数据库， 实现 “无人值守 (少人值班)” 是水利水电行业发展的整体趋势。 0003。

12、 传统的水坝沉降变形监测为人员前往现场利用传统测量装备和主观判断来确认 水坝是否需要维护， 造成了一定的人力浪费。 同时， 人为判断这种传统方式缺少一定的客观 性和连续性。 另外， 对于偏远地区的中小型水坝， 人工监测的周期长甚至无人监管， 人工监 测较为困难。 对于在地势复杂， 进入困难的水坝现场， 人工测量或监管存在一定的安全隐 患。 0004 因此， 如何减小人力资源的投入， 增加中小型水坝监管的连续性， 对破损和变形及 时通知警报以及完成水坝健康情况的数据入库是一个亟待解决的重要问题。 发明内容 0005 为了解决上述技术问题， 本发明提供一种视频自动实时监控水坝破损变形的装置 和方法。

13、， 采用机器视觉的方法完成水坝的安全监测并及时完成数据入库和警报， 是一种理 想的自动化方法， 其具体技术方案如下： 视频自动实时监控水坝破损变形的装置， 包括标志系统、 视频分析系统以及数据库和 报警系统， 所述标志系统布置于水坝的倾斜表面， 标志系统在水坝的倾斜表面上形成颜色分明、 规律明显、 整齐排列的间隔色块； 所述视频分析系统正对着标志系统， 实时采集标志系统的画面信息， 并将采集到的画 面信息进行处理， 最终传送给数据库和报警系统； 所述数据库和报警系统与视频分析系统连接， 接收来自视频分析系统的信息， 并进行 数据比较， 根据比较输出结果， 判断是否给出报警信号。 0006 进一。

14、步的， 所述标志系统采用靶盘固定于坝体表面， 所述靶盘表面为正方形， 纵向 中线和横向中线将其分割为4个区域， 对角线的区域为同色的黑色或白色， 纵向中线和横向 中线的中点为对应靶盘的观测点； 所述坝体表面固定有若干个排和若干个列的靶盘， 排与排之间的间距、 列与列之间的 间距相同， 排间距和列间距相等， 形成纵向和横向均等距分布的离散点， 所有靶盘的表面颜 色排列相同。 0007 进一步的， 所述靶盘的背面设置有嵌块， 所述嵌块插入到坝体内。 说明书 1/5 页 4 CN 110646434 A 4 0008 进一步的， 所述标志系统粉刷在坝体表面， 形成等距分布的规律排布的色块。 0009。

15、 进一步的， 所述视频分析系统包括摄像机和数据分析模块， 所述摄像机正对着坝 体上的标志系统， 根据坝体的长度和宽度， 设置若干个摄像机， 摄像机能够采集所有待测区 域， 相邻的摄像机边缘拼接； 所述数据分析模块读取监测面所有靶盘的实时图像， 经灰度化与二值化处理后得到只 有黑白两种颜色的图像， 之后将二值图进行去噪可减少周围环境的干扰， 采用Hough变换确 定图像中靶盘中心点所在的位置， 通过预先确定的最左上角坐标原点靶盘大小和位置计算 所有离散坐标识别点的相对坐标原点靶盘的坐标， 将同一横排或纵列的坐标识别点用平滑 曲线连接， 利用最小二乘法拟合可得到横纵正交的多条直线， 并将其编号， 。

16、利用坐标几何法 计算出每一条横纵直线/曲线的弧度、 长度数学信息。 0010 进一步的， 所述数据库和报警系统为标志系统中的每一个观测点设定编号， 并记 录其坐标位置， 设置报警阈值， 在数据分析模块进行分析后， 将所有坐标监测点的相对坐标 信息以及每一条曲线的数学信息存储于数据库中， 实时分析数据变化， 若某些点相对位移 过大且曲线弧度超出阈值， 则发出报警， 否则， 继续监测。 0011 视频自动实时监控水坝破损变形的方法， 包括以下操作步骤： 步骤1： 安装标注系统： 在预观察的坝体表面布置标注系统， 若坝体表面不平整， 靶盘纵 向和横向等距分布排列成阵， 靶盘背面的嵌块安插入坝体， 每。

17、个靶盘上的颜色分布均相同， 所有靶盘的连线构成正交网格， 若坝体表面平整， 用防水涂料粉刷出方形色块， 每个方形色 块的颜色与每个靶盘上的色块分布一致， 色块的分布与靶盘的分布一致； 步骤2： 安装摄像机： 在坝体的对面安装若干个摄像机， 摄像机与拍摄镜头与坝体的预 观察面垂直， 相邻摄像机的拍摄区域刚好拼接； 步骤3： 采集画面： 所有摄像机的采集画面传送到同一个数据分析模块， 所有摄像机的 采集画面拼接成完整的坝体表面画面； 步骤4： 处理画面： 数据分析模块记录住各个时刻采集到的画面， 并存储到数据库， 步骤5： 比较数据： 数据库和报警系统将即时采集的画面与前面所有的画面对比， 若变 。

18、形量达到报警阈值， 发出报警， 否则继续监测。 0012 进一步的， 所述步骤3-5的具体过程为： （1） 摄像头持续进行监控， 并设定的时间间隔进行视频图像抓取， 抓取采用python的 OpenCV.VideoCapture方法并将抓取后的图片存入电脑内存进行下一步处理； （2） 使用OpenCV对上述图像进行灰度化、 去噪、 图像增强、 形态学变化、 二值化处理； （3） 根据标志牌的黑白分布特点得出标志点中心位置， 将所有中心位置在图像中的像 素点位置由坐标形式保存到数据库中； （4） 将该图像进一步使用python的MatPlotlib方法将所有标识牌中心位置进行连线， 将得到的新的。

19、图像存入数据库中， 并显示到系统界面中以实时监控； （5） 由于已知标志牌长宽和标志牌黑白色块所占的像素个数， 换算得到每个像素点的 实际长度， 将此换算比例保存到内存变量中； （6） 取两个标志牌中心位置连线上的一定数量的点的坐标， 通过数学几何计算其两两 连线与水平线的角度并进行图像拟合， 得出标志中心连线的近似弧度， 并保存到数据库中； （7） 计算所有标志牌中心与上次观测得到的所有标志牌中心的坐标差值， 即为其坐标 说明书 2/5 页 5 CN 110646434 A 5 的横向与纵向变化值， 存入数据库中， 进一步根据两点间距离公式得出中心位置变化的坐 标位移大小， 通过第 （5） 。

20、步所得到的换算比例将上述所有坐标变换值换算得出实际的横纵 向变化和位移变化长度， 存入数据库中； （8） 系统以设定的时间间隔将新的弧度、 横纵位移、 实际位移变化与系统预设的变化阈 值进行比较， 若超过变化阈值， 则警告使用人员， 对坝体进行人工检测和维护。 0013 本发明的有益效果是： （1） 本发明原理稳定可靠， 通过视频分析软件读取并计算靶盘的实时坐标， 精度较为准 确， 可为监测提供较为准确的相对变化， 且能人工设定报警阈值， 忽略正常范围内的小变 形。 0014 （2） 本发明作为非接触式测量， 适用于绝大多数现场情况， 特别是在一些偏远山区 地势复杂， 人员难以进入， 人工测量。

21、较为困难的水坝， 可大大降低危险和事故率， 与传统的 人员至现场进行读数相比更为安全。 0015 （3） 本发明可实现长时间的连续监测， 可代替人员进行现场读数， 降低了人工读数 的繁琐及时间耗费， 提高了效率。 并长期记录坝体的变化， 提前知晓变形趋势。 0016 （4） 本发明可根据人工设定的检测时间周期运行， 及时报警， 为偏远地区和暂无人 监管的中小型水坝提供了一种省时省力且安全高效的监管方法。 附图说明 0017 图1是本发明的靶盘正视图， 图2是本发明的靶盘侧视图， 图3是本发明的监控示意图正视图， 图4是本发明的监控示意图侧视图， 图5是本发明的变形后监控示意图， 图6是本发明处。

22、理后图像， 图7是本发明的流程图， 图8是本发明的具体图像处理流程图， 图中： 1靶盘的黑色色块， 2靶盘的坐标识别点， 3靶盘的白色色块， 4靶盘面， 5嵌块， 6坝体， 7摄像机， 8坐标原点。 具体实施方式 0018 现在结合附图对本发明作进一步详细的说明。 这些附图均为简化的示意图， 仅以 示意方式说明本发明的基本结构， 因此其仅显示与本发明有关的构成。 0019 图1是本发明的靶盘正视图， 由图可见， 本发明的靶盘面为正方形， 纵向中线和横 向中线将其分割为4个区域， 对角线的区域为同色的黑色或白色， 纵向中线和横向中线的中 点为靶盘的观测点。 0020 图2是本发明的靶盘侧视图， 。

23、由图可见， 本发明的靶盘的背面中心设置有嵌块， 嵌 块用于插入到坝体内， 将其固定在坝体表面。 0021 图3是本发明的监控示意图正视图， 由图可见， 在监测区域， 所有靶盘的颜色分布 一致， 形成相同的各个单元， 靶盘的纵向成列， 横向成排， 排列成阵， 且列间距等于排间距。 说明书 3/5 页 6 CN 110646434 A 6 当以图3中的左上角的靶盘中心为坐标原点时， 以图中的最上面一排为横坐标， 最左侧一列 为纵坐标， 构成直角坐标系， 各排各列均可以在直角坐标系中标注， 便于后期靶盘跟随坝体 变形发生位置变化时， 图像标记比较。 0022 靶盘具体安装间隔和数量可根据实际情况变更。

24、， 靶盘的观测点与相邻横向纵向靶 盘靶盘的观测点在同一直线上。 摄像机拍摄孔与坝体表面尽量垂直， 一台摄像机负责监控 一个监控面。 0023 图4是本发明的监控示意图侧视图， 由图可见， 摄像机与坝体表面垂直， 摄像机的 摄像区域能够兼顾到坝体监测区域的上边缘到下边缘， 根据坝体长度， 设置多个摄像机， 使 所有监测区域均能被采集到。 0024 图5是本发明的变形后监控示意图， 由图可见， 随着时间的推移， 坝体表面发生变 形， 根据靶盘的位置变化， 可以准确推测到坝体的变形路径。 0025 图6是本发明处理后图像， 由图可见， 经过图像处理， 去杂后， 得到的变化曲线图， 由图可清晰可见坝体。

25、表面的变化路径。 0026 摄像机实时拍摄靶盘的位置及其旋转情况， 靶盘安装完成后， 靶盘的观测点相互 正交形成正交网格， 设定左上角的表盘坐标识别点为坐标原点， 记录其坐标， 在坝体变形后 靶盘相对移动， 监控画面捕捉到实时的变形状态， 坐标识别点构成直线变为曲线如图5所 示， 由视频分析软件识别出坐标识别点并用平滑曲线连接， 得出所有纵向横向曲线如图6所 示， 利用坐标原点构建的坐标系， 根据坐标几何原理测得所有坐标识别点的坐标信息及所 有曲线的数学信息。 0027 结合图7和图8， 本发明的视频自动实时监测水坝破损变形的方法为： （1） 在坝体表面布置好标志系统， 以及在坝体对面设置摄像。

26、机； （2） 摄像头持续进行监控， 并每半小时 （该时间间隔根据实际需要设定， 可以为任意时 间长度间隔） 进行一次视频图像抓取。 抓取采用python的OpenCV.VideoCapture方法并将抓 取后的图片存入电脑内存进行下一步处理。 0028 （3） 使用OpenCV对上述图像进行灰度化、 去噪、 图像增强、 形态学变化、 二值化处 理。 0029 （4） 根据标志牌的黑白分布特点得出标志点中心位置， 将所有中心位置在图像中 的像素点位置由坐标形式保存到数据库中。 0030 （5） 将该图像进一步使用python的MatPlotlib方法将所有标识牌中心位置进行连 线。 将得到的新的。

27、图像存入数据库中， 并显示到系统界面中以实时监控。 0031 （6） 由于已知标志牌长宽和标志牌黑白色块所占的像素个数， 可换算得到每个像 素点的实际长度， 将此换算比例保存到内存变量中。 0032 （7） 取两个标志牌中心位置连线上的一定数量 （此数量可根据使用人员要求自行 设置） 的点的坐标， 通过数学几何计算其两两连线与水平线的角度并进行图像拟合， 得出标 志中心连线的近似弧度， 并保存到数据库中。 0033 （8） 计算所有标志牌中心与上次观测得到的所有标志牌中心的坐标差值， 即为其 坐标的横向与纵向变化值， 存入数据库中。 进一步根据两点间距离公式得出中心位置变化 的坐标位移大小。 。

28、通过第5步所得到的换算比例将上述所有坐标变换值换算得出实际的横 纵向变化和位移变化长度。 存入数据库中。 说明书 4/5 页 7 CN 110646434 A 7 0034 （9） 系统每半小时将新的弧度、 横纵位移、 实际位移变化与系统预设的变化阈值进 行比较 （此阈值可由管理人员根据实际需求自行设置） ， 若超过变化阈值， 则警告使用人员， 对坝体进行人工检测和维护。 0035 本发明的工作原理如下： 摄像机实时捕捉画面， 视频识别软件利用表盘坐标识别区识别监测点， 以坝体最左上 角靶盘识别点作为坐标原点， 在已知靶盘大小的情况下， 测量软件按比例测量其余靶盘坐 标信息， 并记录横纵向识别。

29、点构成曲线。 在已知的情况下， 计算坐标点构成的网状图的所有 数学信息， 记录在数据库中， 分析软件比对以往数据， 若变形过大或过快 （超过预设的变形 阈值） ， 则通知水坝管理人员进行现场确认。 0036 本技术领域技术人员可以理解， 除非另外定义， 这里使用的所有术语 （包括技术术 语和科学术语） 具有与本申请所属领域中的普通技术人员的一般理解相同的意义。 还应该 理解的是， 诸如通用字典中定义的那些术语应该被理解为具有与现有技术的上下文中的意 义一致的意义， 并且除非像这里一样定义， 不会用理想化或过于正式的含义来解释。 0037 本申请中所述的 “和/或” 的含义指的是各自单独存在或两。

30、者同时存在的情况均包 括在内。 0038 本申请中所述的 “连接” 的含义可以是部件之间的直接连接也可以是部件间通过 其它部件的间接连接。 0039 以上述依据本发明的理想实施例为启示， 通过上述的说明内容， 相关工作人员完 全可以在不偏离本项发明技术思想的范围内， 进行多样的变更以及修改。 本项发明的技术 性范围并不局限于说明书上的内容， 必须要根据权利要求范围来确定其技术性范围。 说明书 5/5 页 8 CN 110646434 A 8 图1 图2 图3 说明书附图 1/4 页 9 CN 110646434 A 9 图4 图5 说明书附图 2/4 页 10 CN 110646434 A 10 图6 图7 说明书附图 3/4 页 11 CN 110646434 A 11 图8 说明书附图 4/4 页 12 CN 110646434 A 12 。