展品评价装置和方法及展品推送方法.pdf

《展品评价装置和方法及展品推送方法.pdf》由会员分享，可在线阅读，更多相关《展品评价装置和方法及展品推送方法.pdf（7页完成版）》请在专利查询网上搜索。

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201911406923.6 (22)申请日 2019.12.31 (71)申请人 安徽智恒信科技股份有限公司 地址 230088 安徽省合肥市高新区创新产 业园二期J1栋A座16层01室 (72)发明人 余众泽甘松云丁志龙冯笑炎 (74)专利代理机构 安徽知问律师事务所 34134 代理人 代群群 (51)Int.Cl. G06K 9/00(2006.01) G06F 16/9535(2019.01) G06F 40/30(2020.01) G10L 15/18(2013.01。

2、) G10L 15/22(2006.01) G10L 15/26(2006.01) G10L 17/00(2013.01) (54)发明名称 一种展品评价装置和方法及展品推送方法 (57)摘要 本发明公开了一种展品评价装置和方法及 展品推送方法， 包括若干个摄像头、 语音识别模 块、 线上数据采集模块、 大数据处理平台， 摄像头 设置在展品周围， 其包括人脸识别模块和肢体语 言识别模块， 人脸识别模块用于识别人面对展品 时的面部表情； 肢体语言识别模块用于获取游客 对展品各区域的操作动作； 语音识别模块用于对 观众的语音进行抓取和识别， 识别出其中关于评 价的语音； 线上数据采集模块对线上数据。

3、进行采 集， 语音识别模块、 人脸识别模块、 肢体语言识别 模块、 线上数据采集模块将各模块采集的数据传 输给大数据处理平台， 大数据处理平台对各模块 传输的数据进行处理输出展品评价结果。 本发明 能够改善展览展示中的互动及用户体验。 权利要求书1页 说明书4页 附图1页 CN 111144359 A 2020.05.12 CN 111144359 A 1.一种展品评价装置， 其特征在于： 包括若干个摄像头、 语音识别模块、 线上数据采集 模块、 大数据处理平台， 所述摄像头设置在展品周围， 其包括人脸识别模块和肢体语言识别 模块， 人脸识别模块用于识别人面对展品时的面部表情； 肢体语言识别模。

4、块用于获取游客 对展品各区域的操作动作； 语音识别模块用于对观众的语音进行抓取和识别， 识别出其中 关于评价的语音； 线上数据采集模块对线上数据进行采集， 语音识别模块、 人脸识别模块、 肢体语言识别模块、 线上数据采集模块将各模块采集的数据传输给大数据处理平台， 大数 据处理平台对各模块传输的数据进行处理输出展品评价结果。 2.根据权利要求1所述的展品评价装置， 其特征在于： 所述的语音识别模块还包括声纹 识别模块。 3.一种展品评价方法， 其特征在于： 包括以下步骤： S1、 大数据处理平台接收语音识别模块、 人脸识别模块、 肢体语言识别模块和线上数据 采集模块的数据； S2、 大数据处理。

5、平台对S1中各模块数据进行处理， 得出展品评价结果R 1*n1+2*n2+ 3*n3+ 4*n4+ 5*n5+ 6*n6+ 7*n7， 其中， n1+n2+n3+n4+n5+n6+n71， 且0n11， 0n21， 0n31， 0 n41， 0n51， 0n61， 0n71； 1当日参观次数/入场总人数， 2为操作频次， 3为声音评价 结果， 30、 1、 2、 3或4， 4为主观留言评价数据， 40、 1、 2、 3或4， 5线上点击次数/线上 访问人数； 6线上活动参与次数/线上活动参与人数； 7线下活动参与次数/线下活动参 与人数。 4.根据权利要求3所述的展品评价方法， 其特征在于： 。

6、所述步骤S2中的4包括语音识别 模块输入的评价语音和评价器输入的评价。 5.一种展品评价推送方法， 其特征在于： 包括以下步骤： S1、 大数据处理平台接收语音识别模块、 人脸识别模块、 肢体语言识别模块和线上数据 采集模块的数据； S2、 大数据处理平台对S1中各模块数据进行处理， 得出展品评价结果R 1*n1+2*n2+ 3*n3+ 4*n4+ 5*n5+ 6*n6+ 7*n7， 其中， n1+n2+n3+n4+n5+n6+n71， 且0n11， 0n21， 0n31， 0 n41， 0n51， 0n61， 0n71； 1当日参观次数/入场总人数， 2为操作频次， 3为声音评价 结果， 3。

7、0、 1、 2、 3或4， 4为主观留言评价数据， 40、 1、 2、 3或4， 5线上点击次数/线上 访问人数； 6线上活动参与次数/线上活动参与人数； 7线下活动参与次数/线下活动参 与人数； S3、 获取展品的评价结果排名， 根据排名推送展品信息。 权利要求书 1/1 页 2 CN 111144359 A 2 一种展品评价装置和方法及展品推送方法 技术领域 0001 本发明属于展览展示行业领域， 更具体地说， 涉及一种展品评价装置和方法及展 品推送方法。 背景技术 0002 20世纪70年代末， 伴随着 “科学春天” 和 “科普春天” 的到来， 我国的科技馆建设得 到了蓬勃发展。 展厅面。

8、积的扩容、 展品种类的增多、 管理模式的改进， 一系列演变所带来的 是众多科技馆突破传统管理方式过渡到了采用条码识别、 互联网络、 软件技术的自动化管 理模式。 虽然使用了许多现代化技术， 但还是有许多问题困扰着科技馆的有效管理。 0003 随着我国科技馆事业的蓬勃发展， 各地新建、 改建和扩建的科技馆， 都不可避免地 遇到展品问题。 展品的质量很大程度上决定了科技馆的生机与活力， 决定了科技馆的教育 目的能否真正落实。 对科技馆展品质量进行评价是一项具有重要意义的事， 对全国科技馆 事业的健康发展具有导向作用。 因此， 展品是科技馆工作的基础， 目前对科技馆展品的评价 缺少统一标准和流程， 。

9、从评价方式来看， 多为单维的客户评价， 尚未实现多维度的全自动智 能评价， 评价结果不够客观。 0004 物联网即传感网， 被称为继计算机、 互联网之后， 世界信息产业的第三次浪潮。 物 联网技术的出现及应用对科技馆提升自动化管理能力、 实现人性化服务、 提升工作效率等 方面将产生巨大影响； 另外， 科技馆、 博物馆等场馆现已成为相关领域的学术研究热点， 这 些均为科技馆展品评价提供了新的研究思路和技术支撑。 0005 但当前科技馆展品评价主要存在以下问题： 以客户评价为主要手段和结果， 缺少 智能化的评价能力， 技术应用相对薄弱， 导致评价方式单一、 评价维度单薄、 评价响应周期 长(问卷)。

10、、 评价结果不够客观， 客户参与度、 满意度较低等等。 发明内容 0006 1.要解决的问题 0007 针对现有科技馆展览馆的客户参与度较低、 评价结果不客观等问题， 本发明提供 一种展品评价装置和方法及展品推送方法。 0008 2.技术方案 0009 为了解决上述问题， 本发明所采用的技术方案如下： 一种展品评价装置， 包括若干 个摄像头、 语音识别模块、 线上数据采集模块、 大数据处理平台， 所述摄像头设置在展品周 围， 其包括人脸识别模块和肢体语言识别模块， 人脸识别模块用于识别人面对展品时的面 部表情； 肢体语言识别模块用于获取游客对展品各区域的操作动作； 语音识别模块用于对 观众的语。

11、音进行抓取和识别， 识别出其中关于评价的语音； 线上数据采集模块对线上数据 进行采集， 语音识别模块、 人脸识别模块、 肢体语言识别模块、 线上数据采集模块将各模块 采集的数据传输给大数据处理平台， 大数据处理平台对各模块传输的数据进行处理输出展 品评价结果。 本技术方案通过对人像、 声音、 体态等数据的采集、 分析和处理， 能实现对展品 说明书 1/4 页 3 CN 111144359 A 3 的多维度评价， 提高对参观者评价数据的实用度， 提高大数据使用价值， 进而改善展览展示 中的互动以及用户体验。 0010 进一步地， 所述的语音识别模块还包括声纹识别模块。 声纹识别模块用于在采集 多。

12、人的语音时进行识别， 保证被采集参观者的语音独立录入不受噪声干扰。 0011 本发明同时提供一种展品评价方法， 包括以下步骤： 0012 S1、 大数据处理平台接收语音识别模块、 人脸识别模块、 肢体语言识别模块和线上 数据采集模块的数据； 0013 S2、 大数据处理平台对S1中各模块数据进行处理， 得出展品评价结果R 1*n1+ 2* n2+ 3*n3+ 4*n4+ 5*n5+ 6*n6+ 7*n7， 其中， n1+n2+n3+n4+n5+n6+n71， 0n11， 0n21， 0n31， 0n41， 0n51， 0n61， 0n71； 1当日参观次数/入场总人数， 2为操作频次， 3为声。

13、音评 价结果， 30、 1、 2、 3或4， 4为主观留言评价数据， 40、 1、 2、 3或4， 5线上点击次数/线 上访问人数； 6线上活动参与次数/线上活动参与人数； 7线下活动参与次数/线下活动 参与人数。 0014 进一步地， 所述步骤S2中的4包括语音识别模块输入的评价语音和评价器输入的 评价。 0015 本发明还提供一种展品评价推送方法， 包括以下步骤： 0016 S1、 大数据处理平台接收语音识别模块、 人脸识别模块、 肢体语言识别模块和线上 数据采集模块的数据； 0017 S2、 大数据处理平台对S1中各模块数据进行处理， 得出展品评价结果R 1*n1+ 2* n2+ 3*n。

14、3+ 4*n4+ 5*n5+ 6*n6+ 7*n7， 其中， n1+n2+n3+n4+n5+n6+n71， 0n11， 0n21， 0n31， 0n41， 0n51， 0n61， 0n71； 1当日参观次数/入场总人数， 2为操作频次， 3为声音评 价结果， 30、 1、 2、 3或4， 4为主观留言评价数据， 40、 1、 2、 3或4， 5线上点击次数/线 上访问人数； 6线上活动参与次数/线上活动参与人数； 7线下活动参与次数/线下活动 参与人数； 0018 S3、 获取展品的评价结果排名， 根据排名推送展品信息。 具体的推送形式可表现为 在展览馆的官网上的排名， 或者在微信公众号上的优。

15、先推送等等。 0019 3.有益效果 0020 相比于现有技术， 本发明的有益效果为： 0021 (1)本发明通过对人像、 声音、 体态等数据的采集、 分析、 处理， 能实现对展品的多 维度评价， 提高对参观者评价数据的实用度， 提高大数据使用价值， 改善展览展示中的互动 以及用户体验， 最终推动场馆业务、 展品质量和展示度不断提升； 0022 (2)本发明结构简单， 设计合理， 易于制造。 附图说明 0023 图1为本发明的逻辑框图。 具体实施方式 0024 下面结合具体实施例对本发明进一步进行描述。 0025 如图1所示， 本发明包括若干个摄像头、 语音识别模块、 线上数据采集模块、 大数。

16、据 说明书 2/4 页 4 CN 111144359 A 4 处理平台， 所述摄像头设置在展品周围， 其包括人脸识别模块和肢体语言识别模块， 人脸识 别模块用于识别游客面对展品时的面部表情， 比如大笑、 微笑等表情； 肢体语言识别模块用 于获取游客对展品各区域的操作动作， 比如驻足观看、 触摸等； 语音识别模块用于对观众的 语音进行抓取和识别， 识别出其中关于评价的语音； 线上数据采集模块对线上数据进行采 集， 语音识别模块、 人脸识别模块、 肢体语言识别模块、 线上数据采集模块将各模块采集的 数据传输给大数据处理平台， 大数据处理平台对各模块传输的数据进行处理输出展品评价 结果。 0026 。

17、具体实施时， 在展品附近安置摄像头， 设置一定区域， 定义进入该区域的人流即为 参观展品的游客， 通过摄像头中的人脸识别模块和肢体语言识别模块记录人群移动情况。 摄像头通过检测人头、 背景， 识别路过该展品的人流量， 从游客进入摄像监控区域开始、 至 离开该监控区域， 1表示展品热度值， 1当日参观次数/入场总人数； 通过热度分析， 能帮 助了解最受欢迎的展品及展品的摆放位置对参观者的影响， 展品热度值 1作为展品评价的 重要指标， 回传至大数据平台。 另外， 摄像头种的肢体语言识别模块会自动识别参观者的行 为动作， 包括驻足位置、 触摸展品的区域、 体验展品的某项功能。 0027 肢体语音识。

18、别模块用于检测和抓取游客触摸展品某块区域、 体验展品某项功能 (区域) 的数据， 获取游客的行为类型， 如驻足观看次数a1、 触摸次数a2、 深度使用次数a3等， 所谓深度使用是指游客对某些具有互动功能的展品进行互动， 得到游客的操作频次 2， 2 a1*k1+a2*k2+a3*k3， 其中， k1+k2+k31， 且0k11， 0k21， 0k31， 具体实施时， 可根据 展览馆的实际需求设定k1， k2和k3的值， 比如对于某些不允许触摸的展品， 可将触摸次数a2、 深度使用次数a3的权值均设为0， 将驻足观看次数a1的权值k1设为1； 而对于某些具备互动功 能的展品， 可将深度使用次数a。

19、3的权值k3的权值加大， 比如设为0.7， 将触摸次数a2的权值k2 设为0.2， 将驻足观看次数a1的权值k1设为0.1， 然后通过公式 2a1*k1+a2* k2+a3*k3得到操 作频次 2的值， 并将 2传输至大数据处理平台， 2的意义在于通过采集游客对展品的操作频 次， 获取游客的参与度， 从而便于展品摆放方案的优化， 提高展品呈现度。 在本实施例中， “深度使用” 触摸时长超过20s；“驻足观看” 停留在展品区域20s以内， 但未触摸展品。 同 时， 摄像头还抓取用户线下活动参与情况评价数据 7， 所谓的线下活动指的是游客在参观 展品的过程中对某一展品进行评价、 和展品进行互动等与。

20、展品有关的评价活动， 7线下 活动参与次数/线下活动参与人数。 0028 语音识别模块采集参观者的声音数据， 通过语音转文字将参观者的对话由语音转 化为文字， 通过声纹识别模块在采集多人的语音时进行识别， 保证被采集参观者的语音是 独立录入不受噪声干扰的。 在管理后台配置专业词汇库， 对专业词汇进行语义定义并组合 成多种语义识别模型。 语音转化为文字后， 根据用户语言习惯和语义识别模型的相似度大 小， 反馈出的多个语义识别结果并确认最终的语义识别结果， 获得声音评价结果 3。 0029 参观者的主观留言评价数据 4， 该数据包括2个来源， 第一种是通过外置话筒、 录 音设备采集的语音数据 4 。

21、， 外置话筒或录音设备接收声音后， 首先需要通过语音识别模块 中的声纹识别模块， 区分不同人的声音， 将声音分为多轨； 其次， 根据预先设置的关键词， 如： 我觉得、 我感觉、 我认为等等， 通过语义识别， 抓取关键词， 评估该句是否为有效语音， 如 清晰度不够或为无关语音， 则自动舍弃， 如为有效语音， 则进一步评测该句评论是 “褒义” 还 是贬义； 第二种是通过打分器录入的评价数据 4” ， 分为0、 1、 2、 3、 4， 由游客通过展品旁的评 说明书 3/4 页 5 CN 111144359 A 5 价器录入。 主观留言评价数据 4 4 *m1+ 4” *m2， 其中， m1+m21，。

22、 且0m11， 0m21。 展览馆 可根据硬件设施的具体情况设置m1和m2的具体权值， 比如有的展览馆可能话筒、 录音设备配 置得比较齐全， 则可以适当将m1的权值加大， m2的权值变小， 比如m10.7， m20.3； 而对于 展品旁的评价器配置得比较齐全的展览馆来说， 则可以适当将m1的权值加大， m2的权值变 小， 比如m10.3， m20.7。 0030 线上数据采集模块采集参观者的线上点击动作并进行标记、 归类和数据统计， 线 上点击动作是指在展览馆的官网上对展品进行点赞等点击动作， 5某展品线上点击次 数/线上访问人数； 同时线上数据采集模块还采集参观者线上活动参与情况评价数据 6。

23、， 线 上活动参与情况指的是参观者在展览馆的官网上参与点击、 点赞的频次； 6线上活动参 与次数/线上活动参与人数。 0031 将各个模块获取的数据回传至大数据处理平台， 大数据处理平台对S1中各模块数 据进行处理， 得出展品评价结果R 1*n1+ 2*n2+ 3*n3+ 4*n4+ 5*n5+ 6*n6+ 7*n7， 其中， n1+ n2+n3+n4+n5+n6+n71， 且0n11， 0n21， 0n31， 0n41， 0n51， 0n61， 0n71； 1为展品热 度值， 1当日参观次数/入场总人数， 当日参观次数指的是当日参观某一展品的次数， 入 场总人数则是当日进展览馆的总人数； 2。

24、为操作频次； 3为声音评价结果， 通过抓取游客的 语音关键词然后根据模型比对出结果， 30、 1、 2、 3或4， 其中0表示没有评价或评价结果无 效， 1表示评价为 “差” ， 2表示评价为 “中” ， 3表示评价为 “良” ， 4表示评价为 “优” ； 4为主观留 言评价数据， 40、 1、 2、 3或4， 其中0表示没有留言评价或留言评价结果无效， 1表示留言评 价为 “差” ， 2表示留言评价为 “中” ， 3表示留言评价为 “良” ， 4表示留言评价为 “优” ； 5表示 线上人均点击次数， 5线上点击次数/线上访问人数， 线上点击次数指的是针对某个展品 的线上点击次数， 线上访问人。

25、数指的是访问展览馆的官网等的总人数； 6表示线上活动参 与情况评价数据， 6线上活动参与次数/线上活动参与人数， 线上活动参与次数是针对某 个展品的线上活动参与次数， 线上活动参与人数则指的是参与线上活动的总人数； 7表示 线下活动参与情况评价数据， 7线下活动参与次数/线下活动参与人数， 线下活动参与次 数是针对某个展品的线下活动参与次数， 线下活动参与人数则指的是线下活动的总人数。 需要注意的是， 本发明在具体实施时可根据展出的类型来设定n1、 n2、 n3、 n4、 n5、 n6、 n7的取 值， 如互动类展品类评价模型可定义操作频次 2为高权值指标项因子， 主观留言评价数据 4 为低指。

26、标项因子， 这时可相应将n2的权值加大、 n4的权值变小， 比如n10.1、 n20.4、 n3 0.1、 n40.1、 n50.1、 n60.1、 n70.1； 若为观赏类展品类评价模型的主观留言评价数据 4为高权值指标项因子， 操作频次2为低权值指标项因子； 则这时可相应将n4的权值加大、 n2的权值变小， 比如n10.1、 n20.1、 n30.1、 n40.4、 n50.1、 n60.1、 n70.1； 如此便 可以根据展品的具体情况对展品进行比较客观的评价。 然后根据展品的评价结果排名推送 展品信息。 具体的推送形式可表现为在展览馆的官网上的排名， 或者在微信公众号上的推 送等等。 说明书 4/4 页 6 CN 111144359 A 6 图1 说明书附图 1/1 页 7 CN 111144359 A 7 。