信息处理设备及其控制方法、摄像设备和存储介质.pdf

《信息处理设备及其控制方法、摄像设备和存储介质.pdf》由会员分享，可在线阅读，更多相关《信息处理设备及其控制方法、摄像设备和存储介质.pdf（35页完成版）》请在专利查询网上搜索。

1、(19)中华人民共和国国家知识产权局 (12)发明专利申请 (10)申请公布号 (43)申请公布日 (21)申请号 201911191471.4 (22)申请日 2019.11.28 (30)优先权数据 2018-224125 2018.11.29 JP (71)申请人 佳能株式会社 地址 日本东京都大田区下丸子3丁目30番2 号 (72)发明人 多田润二 (74)专利代理机构 北京魏启学律师事务所 11398 代理人 魏启学 (51)Int.Cl. H04N 5/225(2006.01) H04N 5/232(2006.01) G06N 3/08(2006.01) (54)发明名称 信息处理。

2、设备及其控制方法、 摄像设备和存 储介质 (57)摘要 本发明提供一种信息处理设备及其控制方 法、 摄像设备和存储介质。 该信息处理设备包括 控制电路， 该控制电路其被配置为将第一学习参 数设置或发送到用于进行基于学习参数的处理 的判断装置。 在判断装置所进行的判断结果满足 预定条件的情况下， 控制电路将第二学习参数而 不是所述第一学习参数设置或发送到判断装置。 第一学习参数是通过使用第一学习数据组进行 机器学习而获得的学习参数。 第二学习参数是通 过使用第二学习数据组进行机器学习而获得的 学习参数。 第一学习数据组包含第二学习数据 组， 并且包括第二学习数据组中不包括的学习数 据。 权利要求。

3、书3页 说明书19页 附图12页 CN 111246056 A 2020.06.05 CN 111246056 A 1.一种信息处理设备， 包括： 控制电路， 其被配置为将第一学习参数设置或发送到用于进行基于学习参数的处理的 判断装置， 其中， 在所述判断装置所进行的判断的结果满足预定条件的情况下， 所述控制电路将 第二学习参数而不是所述第一学习参数设置或发送到所述判断装置， 所述第一学习参数是通过使用第一学习数据组进行机器学习而获得的学习参数， 所述第二学习参数是通过使用第二学习数据组进行机器学习而获得的学习参数， 以及 所述第一学习数据组包含所述第二学习数据组， 并且包括所述第二学习数据组。

4、中不包 括的学习数据。 2.根据权利要求1所述的信息处理设备， 其中， 在按顺序排列多个学习数据的情况下， 所述第一学习数据组包括位于所述第二 学习数据组之后的学习数据。 3.根据权利要求2所述的信息处理设备， 其中， 所述多个学习数据是按获得各学习数据的顺序排列的。 4.根据权利要求2所述的信息处理设备， 其中， 所述多个学习数据中的各个学习数据是根据拍摄图像生成的， 并且所述多个学 习数据是按拍摄与各个学习数据相对应的图像的顺序排列的。 5.根据权利要求1所述的信息处理设备， 其中， 在重复进行了预先设置的多个基准次数中的基准次数的学习的情况下， 所述控 制电路使通过该学习所获得的学习参数。

5、与该基准次数相关联地存储在存储器中。 6.根据权利要求5所述的信息处理设备， 其中， 所述第二学习参数是与比重复进行学习以获得所述第一学习参数的次数小的基 准次数中的最大基准次数相关联的学习参数。 7.根据权利要求6所述的信息处理设备， 其中， 在所述判断装置所进行的并且是基于与所述多个基准次数中的任何一个基准次 数相关联的学习参数的判断的结果满足所述预定条件的情况下， 所述控制电路将与次最大 基准次数相关联的学习参数设置或发送到所述判断装置。 8.根据权利要求7所述的信息处理设备， 其中， 在所述判断装置所进行的、 并且是基于与所述多个基准次数相关联并通过按顺 序选择包括所述第一学习数据组的。

6、多个学习数据重复进行学习所生成的任意学习参数的 判断的结果满足所述预定条件的情况下， 所述控制电路将在使用包括所述第一学习数据组 的多个学习数据的学习之前进行的学习中所生成的学习参数设置或发送到所述判断装置。 9.根据权利要求1所述的信息处理设备， 其中， 所述控制电路使所述判断装置基于学习参数来进行自动摄像和产品检查至少之 一。 10.根据权利要求9所述的信息处理设备， 其中， 所述预定条件是基于所述第一学习参数的自动摄像的频率低于阈值。 11.根据权利要求1所述的信息处理设备， 其中， 所述判断装置使用神经网络， 并且所述学习参数是用于设置所述神经网络的神 权利要求书 1/3 页 2 CN。

7、 111246056 A 2 经元之间的连接权重的值。 12.根据权利要求1所述的信息处理设备， 还包括所述判断装置。 13.一种信息处理设备， 包括： 存储器； 以及 控制电路， 其被配置为接收通过学习单元使用多个学习数据重复进行的学习所生成的 学习参数， 并且使所述存储器存储满足预定条件的多个学习参数， 其中， 满足所述预定条件的多个学习参数至少是： 在学习次数达到多个基准值其中之一的情况下所生成的各学习参数， 在用于学习的学习数据的数量达到多个基准值其中之一的情况下所生成的各学习参 数， 或者 在多个基准定时其中之一所生成的各学习参数。 14.根据权利要求13所述的信息处理设备， 其中，。

8、 所述控制电路使所述存储器除存储满足所述预定条件的多个学习参数之外， 还存储通 过重复进行学习而生成的最新学习参数， 以及 响应于接收到新的学习参数， 所述控制电路更新所述存储器中所存储的最新学习参 数， 但是不更新所述存储器中所存储的满足所述预定条件的多个学习参数。 15.根据权利要求14所述的信息处理设备， 还包括： 通信单元， 其被配置为将所述存储器中所存储的满足所述预定条件的多个学习参数中 的任一个学习参数输出到其它设备。 16.一种摄像设备， 包括： 摄像器件； 判断装置， 其被配置为判断是否满足用于基于学习参数进行自动摄像的条件； 以及 控制电路， 其被配置为将第一学习参数设置到所。

9、述判断装置， 其中， 在所述自动摄像的结果满足预定条件的情况下， 所述控制电路将第二学习参数 而不是所述第一学习参数设置到所述判断装置， 所述第一学习参数是通过使用第一学习数据组进行机器学习而获得的学习参数， 所述第二学习参数是通过使用第二学习数据组进行机器学习而获得的学习参数， 以及 所述第一学习数据组包含所述第二学习数据组， 并且包括所述第二学习数据组中不包 括的学习数据。 17.一种信息处理设备的控制方法， 所述控制方法包括： 将第一学习参数设置或发送到用于进行基于学习参数的处理的判断装置； 以及 在所述判断装置所进行的判断的结果满足预定条件的情况下， 将第二学习参数而不是 所述第一学习。

10、参数设置或发送到所述判断装置， 其中， 所述第一学习参数是通过使用第一学习数据组进行机器学习而获得的学习参 数， 所述第二学习参数是通过使用第二学习数据组进行机器学习而获得的学习参数， 以及 所述第一学习数据组包含所述第二学习数据组， 并且包括所述第二学习数据组中不包 括的学习数据。 18.一种用于存储程序的非暂时性存储介质， 所述程序能够由处理器执行， 其中， 所述 权利要求书 2/3 页 3 CN 111246056 A 3 程序在由所述处理器执行时使所述处理器执行图像处理方法， 所述图像处理方法包括： 将第一学习参数设置或发送到用于进行基于学习参数的处理的判断装置； 以及 在所述判断装置。

11、所进行的判断的结果满足预定条件的情况下， 将第二学习参数而不是 所述第一学习参数设置或发送到所述判断装置， 其中， 所述第一学习参数是通过使用第一学习数据组进行机器学习而获得的学习参 数， 所述第二学习参数是通过使用第二学习数据组进行机器学习而获得的学习参数， 以及 所述第一学习数据组包含所述第二学习数据组， 并且包括所述第二学习数据组中不包 括的学习数据。 权利要求书 3/3 页 4 CN 111246056 A 4 信息处理设备及其控制方法、 摄像设备和存储介质 技术领域 0001 本发明涉及一种用于防止机器学习中的学习偏差的技术。 背景技术 0002 在使用诸如照相机等的摄像设备的典型静。

12、止或运动图像拍摄中， 用户通过取景器 等来决定被摄体， 检查摄像状况以调整要拍摄的图像的取景， 并操作快门按钮以拍摄图像。 0003 与根据用户操作进行摄像的这种摄像设备相对地， 日本特表2016-536868公开了 一种生活日志照相机， 其在无需接收来自用户的摄像指示的情况下定期且连续地进行摄 像。 生活日志照相机在通过带子等附接到用户的身体的状态下使用， 并以规定时间间隔记 录用户在他/她的日常生活中看到的场景的图像。 生活日志照相机的摄像不是在诸如用户 按下快门按钮的定时等的期望定时进行的， 而是以规定间隔进行的。 因此， 可以将用户未正 常记录的非预期瞬间记录为图像。 0004 然而，。

13、 在将生活日志照相机放在用户身上的状态下定期地进行自动摄像的情况 下， 可能会获得用户不喜欢的图像， 并且可能无法获得用户真正想要的瞬间的图像。 0005 存在一种用于使摄像设备在机器学习中学习用户偏好的方法。 然而， 在这种方法 中， 学习精度取决于学习中使用的学习数据。 在摄像设备进入用户的手中之后， 用户准备仅 精度高的学习数据并不容易， 并且可能进行错误学习或偏差学习。 0006 除生活日志照相机外， 还存在使得使用机器学习来进行学习的摄像系统。 在工厂 中， 例如， 使用如下的检查系统， 该检查系统学习产品表面的划痕和污点， 拍摄所运输的产 品的图像， 并判断产品是否有缺陷。 000。

14、7 同样， 在这种检查系统中， 如果学习数据相对于在特定情况下生成的数据存在偏 差， 则进行偏差学习， 并且用户可能无法获得期望的检查结果。 发明内容 0008 本发明的实施例提供一种防止机器学习中的学习偏差的信息处理设备。 0009 根据本发明实施例的一种信息处理设备包括： 控制电路， 其被配置为将第一学习 参数设置或发送到用于进行基于学习参数的处理的判断装置， 其中， 在所述判断装置所进 行的判断的结果满足预定条件的情况下， 所述控制电路将第二学习参数而不是所述第一学 习参数设置或发送到所述判断装置， 所述第一学习参数是通过使用第一学习数据组进行机 器学习而获得的学习参数， 所述第二学习参。

15、数是通过使用第二学习数据组进行机器学习而 获得的学习参数， 以及所述第一学习数据组包含所述第二学习数据组， 并且包括所述第二 学习数据组中不包括的学习数据。 0010 根据本发明实施例的一种信息处理设备包括： 存储器； 以及控制电路， 其被配置为 接收通过学习单元使用多个学习数据重复进行的学习所生成的学习参数， 并且使所述存储 器存储满足预定条件的多个学习参数， 其中， 满足所述预定条件的多个学习参数至少是： 在 学习次数达到多个基准值其中之一的情况下所生成的各学习参数， 在用于学习的学习数据 说明书 1/19 页 5 CN 111246056 A 5 的数量达到多个基准值其中之一的情况下所生。

16、成的各学习参数， 或者在多个基准定时其中 之一所生成的各学习参数。 0011 根据本发明实施例的一种摄像设备包括： 摄像器件； 判断装置， 其被配置为判断是 否满足用于基于学习参数进行自动摄像的条件； 以及控制电路， 其被配置为将第一学习参 数设置到所述判断装置， 其中， 在所述自动摄像的结果满足预定条件的情况下， 所述控制电 路将第二学习参数而不是所述第一学习参数设置到所述判断装置， 所述第一学习参数是通 过使用第一学习数据组进行机器学习而获得的学习参数， 所述第二学习参数是通过使用第 二学习数据组进行机器学习而获得的学习参数， 以及所述第一学习数据组包含所述第二学 习数据组， 并且包括所述。

17、第二学习数据组中不包括的学习数据。 0012 根据本发明实施例的一种信息处理设备的控制方法包括： 将第一学习参数设置或 发送到用于进行基于学习参数的处理的判断装置； 以及在所述判断装置所进行的判断的结 果满足预定条件的情况下， 将第二学习参数而不是所述第一学习参数设置或发送到所述判 断装置， 其中， 所述第一学习参数是通过使用第一学习数据组进行机器学习而获得的学习 参数， 所述第二学习参数是通过使用第二学习数据组进行机器学习而获得的学习参数， 以 及所述第一学习数据组包含所述第二学习数据组， 并且包括所述第二学习数据组中不包括 的学习数据。 0013 根据本发明实施例的一种用于存储程序的非暂时。

18、性存储介质， 所述程序能够由处 理器执行， 其中， 所述程序在由所述处理器执行时使所述处理器执行图像处理方法， 所述图 像处理方法包括： 将第一学习参数设置或发送到用于进行基于学习参数的处理的判断装 置； 以及在所述判断装置所进行的判断的结果满足预定条件的情况下， 将第二学习参数而 不是所述第一学习参数设置或发送到所述判断装置， 其中， 所述第一学习参数是通过使用 第一学习数据组进行机器学习而获得的学习参数， 所述第二学习参数是通过使用第二学习 数据组进行机器学习而获得的学习参数， 以及所述第一学习数据组包含所述第二学习数据 组， 并且包括所述第二学习数据组中不包括的学习数据。 0014 通过。

19、以下参考附图对典型实施例的说明， 本发明的其它特征将变得明显。 附图说明 0015 图1A和图1B是示意性示出摄像设备的图。 0016 图2是示出摄像设备的结构的图。 0017 图3是示出无线通信系统的结构的图。 0018 图4是示出外部设备的结构的图。 0019 图5是用于描述控制电路的操作的流程图。 0020 图6是用于描述自动摄像模式处理的流程图。 0021 图7是用于描述神经网络的图。 0022 图8是用于描述图像显示处理的图。 0023 图9是用于描述学习模式判断的流程图。 0024 图10是用于描述学习模式处理的流程图。 0025 图11是用于描述返回学习模式判断的流程图。 002。

20、6 图12是用于描述返回学习模式处理的流程图。 说明书 2/19 页 6 CN 111246056 A 6 0027 图13是用于描述学习数据显示处理的图。 具体实施方式 0028 实施例 0029 摄像设备的结构 0030 图1A是示意性示出根据实施例的摄像设备的图。 本发明的实施例不仅适用于使用 数字照相机或数字摄像机的摄像， 而且还适用于诸如监视照相机、 Web照相机或移动电话等 的摄像设备。 在本实施例中， 将在摄像设备也用作进行机器学习的信息处理设备的假设下 给出描述。 可选地， 与摄像设备分离并且能够与摄像设备通信的信息处理设备可以针对摄 像设备进行机器学习。 0031 图1A所示。

21、的摄像设备101设置有可通过其操作电源开关的操作构件等(以下将该 操作构件称为电源按钮， 其可以在触摸屏上通过轻击、 轻拂或滑动来操作)。 作为容纳用于 进行摄像的摄像透镜组和摄像器件的壳体的镜筒102附接到摄像设备101， 并且设置有能够 相对于固定部103驱动并转动镜筒102的转动机构。 倾斜转动机构104是能够使镜筒102在图 1B所示的俯仰方向上转动的马达驱动机构， 并且平摇转动机构105是能够使镜筒102在图1B 所示的横摆方向上转动的马达驱动机构。 因此， 镜筒102可以沿一个或多个轴方向转动。 图 1B示出在固定部103的位置处的轴的定义。 角速度计106和加速度计107这两者均。

22、附接到摄 像设备101的固定部103。 利用角速度计106和加速度计107来检测摄像设备101的抖动， 并且 基于检测到的抖动角来驱动并转动倾斜转动机构104和平摇转动机构105。 因此， 补偿了作 为可移动部的镜筒102的抖动或倾斜。 0032 图2是示出根据本实施例的摄像设备101的结构的框图。 在图2中， 控制电路221包 括处理器(例如， 中央处理单元(CPU)、 图形处理单元(GPU)、 微处理器或微处理单元(MPU) 等)以及存储器(例如， 动态随机存取存储器(DRAM)或静态随机存取存储器(SRAM)等)。 这些 装置执行各种处理操作以控制摄像设备101的各个块并且控制各个块之间。

23、的数据传送。 非 易失性存储器(电可擦可编程只读存储器(EEPROM)214是电可擦且可记录的存储器， 并且 存储用于操作控制电路221的常数和程序等。 0033 在图2中， 变焦机构201包括用于改变倍率的变焦透镜。 变焦驱动控制电路202驱动 并控制变焦机构201。 调焦机构203包括用于调节焦点的透镜。 调焦驱动控制电路204驱动并 控制调焦机构203。 0034 摄像单元206包括摄像器件和A/D转换器。 摄像器件接收通过透镜组入射的光， 并 将与和光量相对应的电荷有关的信息作为模拟图像数据输出到图像处理电路207。 图像处 理电路207是配备有多个算术和逻辑单元(ALU)的计算电路，。

24、 对通过A/D转换输出的数字图 像数据进行诸如失真校正、 白平衡调整和颜色插值等的图像处理， 并输出所得到的数字图 像数据。 从图像处理电路207输出的数字图像数据由图像记录电路208转换成诸如JPEG格式 等的记录格式， 并且被发送到存储器213或后述的视频输出电路215。 0035 镜筒转动驱动电路205驱动倾斜转动机构104和平摇转动机构105以沿倾斜方向和 平摇方向驱动镜筒102。 0036 设备抖动检测电路209配备有例如用于检测沿摄像设备101的三个轴方向的角速 度的角速度计(陀螺仪传感器)106和用于检测沿摄像设备101的三个轴方向的加速度的加 说明书 3/19 页 7 CN 1。

25、11246056 A 7 速度计(加速度传感器)107。 设备抖动检测电路209基于检测到的信号来计算设备的转动角 度或设备的偏移量。 0037 音频输入电路211从设置在摄像设备101上的麦克风获得摄像设备101周围的音频 信号， 对该音频信号进行A/D转换， 并将转换后的音频信号发送到音频处理电路212。 音频处 理电路212对输入到音频处理电路212的数字音频信号进行诸如优化处理等的音频处理。 由 音频处理电路212处理的音频信号通过控制电路221发送到存储器213。 存储器213暂时存储 分别由图像处理电路207和音频处理电路212获得的图像信号和音频信号。 0038 图像处理电路20。

26、7和音频处理电路212分别读出暂时存储在存储器213中的图像信 号和音频信号， 并对图像信号和音频信号进行编码， 以生成压缩图像信号和压缩音频信号。 控制电路221将压缩图像信号和压缩音频信号发送到记录/再现电路218。 0039 记录/再现电路218在记录介质219上记录分别由图像处理电路207和音频处理电 路212生成的压缩图像信号和压缩音频信号、 以及与摄像有关的控制数据等。 在不对音频信 号进行压缩编码的情况下， 控制电路221将由音频处理电路212生成的音频信号和由图像处 理电路207生成的压缩图像信号发送到记录/再现电路218， 并且使记录/再现电路218将音 频信号和压缩图像信号。

27、记录在记录介质219上。 0040 记录介质219可以是内置在摄像设备101中的记录介质， 或者可以是可拆卸的记录 介质。 可以将包括由摄像设备101生成的压缩图像信号、 压缩音频信号和音频信号的各种数 据记录在记录介质219上。 通常， 将容量大于非易失性存储器214的容量的介质用作记录介 质219。 记录介质219可以是任何类型的记录介质， 例如硬盘、 光盘、 磁光盘、 可记录紧凑光盘 (CD-R)、 可记录数字多功能光盘(DVD-R)、 磁带、 非易失性半导体存储器或闪速存储器。 0041 记录/再现电路218读出(再现)记录介质219上所记录的压缩图像信号、 压缩音频 信号、 音频信号。

28、、 各种数据和程序。 控制电路221将已经读出的压缩图像信号和压缩音频信 号分别发送到图像处理电路207和音频处理电路212。 图像处理电路207和音频处理电路212 使存储器213分别暂时存储压缩图像信号和压缩音频信号， 以预定过程分别对压缩图像信 号和压缩音频信号进行解码， 并将解码图像信号和解码音频信号分别发送到视频输出电路 215和音频输出电路216。 0042 音频输入电路211从设置在摄像设备101上的多个麦克风获得音频信号。 音频处理 电路212能够检测放置多个麦克风的平面上的声音的方向， 并且用于后述的搜索或自动摄 像。 此外， 音频处理电路212检测特定音频命令。 音频命令可。

29、以是预先登记的多个命令。 可以 允许用户在摄像设备101中登记特定声音。 另外， 进行音频场景识别。 在音频场景识别中， 通 过预先基于大量音频数据进行了机器学习的网络来进行音频场景判断。 例如， 用于检测诸 如 “有掌声” 、“有拍手” 和 “产生语音” 等的特定场景的网络被设置到音频处理电路212。 当检 测到特定音频场景或特定音频命令时， 音频处理电路212将检测触发信号输出到控制电路 221。 电源电路210供给用于操作控制电路221的电力。 0043 音频输出电路216例如在摄像时从摄像设备101中内置的扬声器输出预先设置的 音频模式。 发光二极管(LED)控制电路222例如在摄像时。

30、以预先设置的点亮或闪烁模式控制 设置在摄像设备101上的LED。 视频输出电路215由例如视频输出端子构成， 并且将图像信号 发送到所连接的外部显示器等以在该外部显示器上显示视频。 可选地， 音频输出电路216和 视频输出电路215可以是组合的单个端子， 例如高清晰度多媒体接口(HDMI， 注册商标)端 说明书 4/19 页 8 CN 111246056 A 8 子。 0044 通信电路220用于进行摄像设备101与外部设备之间的通信， 并且发送和接收诸如 音频信号、 图像信号、 压缩音频信号和压缩图像信号等的数据。 另外， 通信电路220接收诸如 摄像开始/结束命令或平摇/倾斜或变焦驱动信号。

31、等的与摄像有关的控制信号， 并且响应于 来自能够与摄像设备101进行相互通信的外部设备的指示来驱动摄像设备101。 另外， 通信 电路220在摄像设备101和外部设备之间进行诸如与后述的学习处理电路217处理的学习有 关的各种参数等的信息的发送和接收。 通信电路220例如是无线通信模块， 诸如红外通信模 块、 蓝牙(Bluetooth， 注册商标)通信模块、 无线局域网(LAN)通信模块、 无线通用串行总线 (USB)或全球定位系统(GPS)接收器等。 0045 无线通信系统的结构 0046 图3是示出包括摄像设备101和外部设备301的无线通信系统的示例结构的图。 摄 像设备101是具有摄像。

32、功能的数字照相机， 并且外部设备301是包括蓝牙通信模块和无线 LAN通信模块的智能设备。 0047 摄像设备101和外部设备301能够经由使用符合例如IEEE 802.11标准系列的无线 LAN的通信装置302以及诸如低功耗蓝牙(BLE)等的具有控制站和从站之间的主从关系的通 信装置303彼此进行通信。 无线LAN和BLE对应于通信方式的示例。 可以使用其它通信方式， 只要各个通信装置具有两个或更多个通信功能， 并且在控制站和从站之间的关系中进行通 信的通信功能中的一个通信功能能够控制另一通信功能即可。 注意， 在不失一般性的情况 下， 诸如无线LAN等的第一通信方式能够比诸如BLE等的第二。

33、通信方式更快地通信， 并且第 二通信方式比第一通信方式消耗更低的功率或者比第一通信方式具有更短的通信范围。 0048 将参考图4来描述外部设备301的结构。 外部设备301包括例如用于无线LAN的无线 LAN控制电路401、 用于BLE的BLE控制电路402和用于公共无线通信的公共线路控制电路 406。 外部设备301还包括分组发送/接收电路403。 无线LAN控制电路401进行无线LAN的射频 (RF)控制、 通信处理、 以及与进行使用符合IEEE 802.11标准系列的无线LAN的通信的各种 控制操作的驱动器和使用无线LAN的通信有关的协议处理。 BLE控制电路402进行BLE的RF控 制。

34、、 通信处理、 以及与进行使用BLE的通信的各种控制操作的驱动器和使用BLE的通信有关 的协议处理。 公共线路控制电路406进行公共无线通信的RF控制、 通信处理、 以及与进行公 共无线通信的各种控制操作的驱动器和公共无线通信有关的协议处理。 公共无线通信符合 例如国际多媒体电信(IMT)标准或长期演进(LTE)标准等。 分组发送/接收电路403进行用于 至少执行与使用无线LAN和BLE的通信以及公共无线通信有关的分组的发送或接收的处理。 在该示例中， 将在外部设备301在通信期间至少进行分组的发送或接收的假设下给出描述。 可选地， 可以使用诸如电路交换等的其它通信方式来代替分组交换。 004。

35、9 外部设备301还包括例如控制电路411、 存储电路404、 GPS接收器电路405、 显示装 置407、 操作构件408、 音频输入/处理电路409和电源电路410。 控制电路411执行例如存储在 存储电路404中的控制程序， 以控制整个外部设备301。 存储电路404存储例如由控制电路 411执行的控制程序和诸如用于通信的参数等的各种信息。 当控制电路411执行存储在存储 电路404中的控制程序时， 进行以下描述的各种操作。 0050 电源电路410向外部设备301供电。 显示装置407如液晶显示器(LCD)或发光二极管 (LED)等那样具有例如用于输出视觉可识别信息的功能， 或者如扬声。

36、器等那样具有用于输 说明书 5/19 页 9 CN 111246056 A 9 出声音的功能， 并且显示各种信息。 操作构件408是用于接收在外部设备301上进行的用户 操作的按钮等。 显示装置407和操作构件408可以由诸如触摸屏等的共同构件形成。 0051 音频输入/处理电路409可以被配置为从例如内置在外部设备301中的通用麦克风 获得用户产生的语音， 并且通过语音识别处理从用户获得操作指示。 0052 另外， 音频输入/处理电路409经由外部设备301中的专用应用从用户产生的语音 获得音频命令。 可以将音频命令登记为特定音频命令， 以使得摄像设备101的音频处理电路 212经由使用无线。

37、LAN的通信装置302来识别特定音频命令。 0053 GPS接收器电路405接收从卫星发送的GPS信号， 分析GPS信号， 并估计外部设备301 的当前位置(经度和纬度信息)。 可选地， 可以通过使用Wi-Fi定位系统(WPS)等基于与周围 存在的无线网络有关的信息来估计外部设备301的当前位置。 在所获得的当前GPS位置信息 所指示的位置在预先设置的位置范围内(在预定半径的范围内)的情况下或者在GPS位置信 息已经改变了预定量以上的情况下， GPS接收器电路405经由BLE控制电路402将移动信息发 送到摄像设备101， 并且该移动信息用作用于后述的自动摄像或自动编辑的参数。 0054 如上。

38、所述， 外部设备301通过使用无线LAN控制电路401和BLE控制电路402的通信 来向摄像设备101发送数据/从摄像设备101接收数据。 例如， 发送/接收诸如音频信号、 图像 信号、 压缩音频信号和压缩图像信号等的数据。 另外， 外部设备301发送用于摄像设备101进 行摄像的操作指示， 发送音频命令登记数据， 并且发送基于GPS位置信息的预定位置检测通 知或移动通知。 此外， 外部设备301经由外部设备301中的专用应用发送/接收学习数据。 0055 摄像操作的序列 0056 图5是用于描述由根据本实施例的摄像设备101的控制电路221进行的操作的示例 的流程图。 0057 当用户操作摄。

39、像设备101的电源按钮时， 电源电路210向控制电路221和摄像设备 101的各个块供电。 图5所示的操作从供电开始。 在步骤S501(以下将 “步骤S” 简称为 “S” )中， 读取启动条件。 在本实施例中， 可以响应于手动按下电源按钮， 或者响应于通过外部通信 (例如， BLE通信)来自外部设备(例如， 外部设备301)的指示来进行电源接通。 可选地， 可以 响应于检测到用户对摄像设备101的轻击， 或者响应于检测到特定音频命令的输入来进行 电源接通。 这里读取的启动条件用作后述的被摄体搜索或自动摄像的一个参数元素。 在读 取启动条件之后， 操作进入S502。 0058 在S502中， 从。

40、各种传感器读取信息。 这里读取的信息包括设备抖动检测电路209中 所配备的诸如陀螺仪传感器和加速度传感器等的用于检测抖动的传感器所检测到的信息。 这里读取的信息还包括倾斜转动机构104和平摇转动机构105的转动位置。 这里读取的信息 还包括由音频处理电路212检测到的音频水平、 特定音频识别的检测触发以及声音方向。 0059 尽管在图1至4中未示出， 但是用于检测环境信息的传感器获得信息。 传感器的示 例包括用于以预定间隔检测摄像设备101的环境温度的温度传感器和用于检测摄像设备 101的环境大气压的变化的大气压传感器。 传感器的示例还包括用于检测摄像设备101的环 境照度的照度传感器、 用于。

41、检测摄像设备101的环境湿度的湿度传感器、 以及用于检测摄像 设备101周围的紫外线量的紫外线(UV)传感器。 除了检测到的温度信息、 大气压信息、 照度 信息、 湿度信息和UV信息之外， 通过根据检测到的信息计算按预定时间间隔的变化率而获 得的温度的变化量、 大气压的变化量、 照度的变化量、 湿度的变化量和紫外线的变化量可以 说明书 6/19 页 10 CN 111246056 A 10 用于后述的自动摄像等的判断。 0060 在S502中完成从各种传感器的信息读取之后， 操作进入S503。 在S503中， 判断是否 存在从外部设备301提供的通信指示。 在存在通信指示的情况下， 进行与外部。

42、设备301的通 信。 例如， 外部设备301经由无线LAN或BLE进行诸如音频信号、 图像信号、 压缩音频信号或压 缩图像信号等的数据的远程操作或者发送/接收。 另外， 进行读取以判断是否存在来自外部 设备301的用于由摄像设备101进行摄像的操作指示、 音频命令登记数据的发送、 基于GPS位 置信息的预定位置检测通知或移动通知、 或者用以发送/接收学习数据的指示。 0061 用于检测环境信息的上述各种传感器可以安装在摄像设备101或外部设备301上。 在传感器安装在外部设备301上的情况下， 通过使用BLE读取环境信息。 在S503中进行了通 过通信从外部设备301的读取之后， 操作进入S5。

43、04。 0062 在S504中， 进行模式设置判断。 从以下模式中判断并选择在S504中设置的模式。 0063 (1)手动摄像模式 0064 模式判断条件 0065 响应于检测到由外部设备301发送的用于设置手动摄像模式的命令来设置手动摄 像模式。 0066 模式下的处理 0067 在手动摄像模式处理(S506)中， 根据用户的输入进行平摇/倾斜驱动或变焦驱动， 并且根据来自用户的指示来拍摄静止图像或开始运动图像的记录。 用户。 0068 (2)自动摄像模式 0069 模式判断条件 0070 响应于要进行自动摄像的判断而设置自动摄像模式， 该判断是基于通过下述学习 而设置的检测到的信息(图像、。

44、 声音、 时间、 抖动、 场所、 身体变化和环境变化)、 从转变成自 动摄像模式起的经过时间、 或者与先前摄像有关的信息等而作出的。 0071 模式下的处理 0072 在自动摄像模式处理(S508)中， 用作判断装置的学习处理电路217基于检测到的 信息(图像、 声音、 时间、 抖动、 场所、 身体变化和环境变化)， 通过进行平摇/倾斜驱动或变焦 驱动来自动搜索被摄体。 当判断为拍摄用户喜欢的图像的定时已经到来时， 自动进行摄像。 在用户提供摄像指示的情况下， 根据该指示进行摄像。 0073 (3)学习模式 0074 模式判断条件 0075 响应于要进行学习的判断而设置学习模式， 该判断是基于。

45、从上次学习处理起的经 过时间、 或者与可用于学习的图像相关联的信息或学习数据的数量等而作出的。 还响应于 用以设置通过通信从外部设备301提供的学习参数的指示来设置该模式。 0076 模式下的处理 0077 在学习模式处理(S510)中， 学习处理电路217进行用于满足用户偏好的学习。 基于 与外部设备301中的操作以及来自外部设备301的学习数据的通知有关的信息， 通过使用神 经网络来进行用于满足用户偏好的学习。 与外部设备301中的操作有关的信息包括例如与 从摄像设备101获取图像有关的信息、 经由专用应用提供了手动编辑指示的信息、 以及与用 户针对摄像设备101中的图像输入的判断值有关的。

46、信息。 说明书 7/19 页 11 CN 111246056 A 11 0078 (4)返回学习模式 0079 模式判断条件 0080 响应于要将学习参数改变为先前学习参数的判断而设置返回学习模式， 该判断是 基于从上次学习处理起的累积启动时间以及从上次学习处理起已经进行自动摄像的次数 而作出的。 还响应于用以将学习参数改变为通过通信从外部设备301提供的先前学习参数 的指示来设置该模式。 0081 模式下的处理 0082 在返回学习模式处理(S512)中， 将针对用作判断装置的学习处理电路217所设置 的学习参数改变为在上次学习处理中所获得的学习参数。 可选地， 通过使用除了新获得的 学习数。

47、据之外的学习数据来再次进行学习处理。 0083 下面将描述自动摄像模式处理、 学习模式处理和返回学习模式处理的详情。 0084 在图5的S505中， 判断在S504中的模式设置判断中是否设置了手动摄像模式。 如果 判断为设置了手动摄像模式， 则操作进入S506， 其中在S506中， 进行手动摄像模式处理。 在 手动摄像模式处理中， 如上所述， 根据用户的输入来驱动摄像设备101。 在处理结束之后， 操 作返回到S502。 0085 另一方面， 如果在S505中判断为未设置手动摄像模式， 则操作进入S507， 其中在 S507中， 判断是否设置了自动摄像模式。 如果设置了自动摄像模式， 则操作进。

48、入S508， 其中 在S508中， 进行自动摄像模式处理。 在处理结束之后， 操作返回到S502。 如果在S507中判断 为未设置自动摄像模式， 则操作进入S509。 0086 在S509中， 判断是否设置了学习模式。 如果设置了学习模式， 则操作进入S510， 其 中在S510中， 进行学习模式处理。 在处理结束之后， 操作返回到S502， 并且重复该操作。 如果 在S509中判断为未设置学习模式， 则操作进入S511。 0087 在S511中， 判断是否设置了返回学习模式。 如果设置了返回学习模式， 则操作进入 S512， 其中在S512中， 进行返回学习模式处理。 在处理结束之后， 操作。

49、返回到S502， 并且重复 该操作。 如果在S511中判断为未设置返回学习模式， 则操作返回到S502， 并且重复该操作。 0088 自动摄像模式处理 0089 将参考图6来给出在图5的S508中的自动摄像模式处理的详情的描述。 如上所述， 以下描述的处理由根据本实施例的摄像设备101的控制电路221控制。 0090 在S601中， 使图像处理电路207对由摄像单元206拍摄的信号进行图像处理， 以生 成用于被摄体识别的图像。 对所生成的图像进行诸如人物识别或物体识别等的被摄体识 别。 0091 在识别人物的情况下， 检测人物的面部或身体。 在面部检测中， 预先确定用于判断 人物的面部的图案，。

50、 并且可以将拍摄图像的与该图案一致的部分检测为人物的面部图像。 0092 同时， 计算指示该部分可能是被摄体面部的程度的可靠度。 基于例如图像中的面 部区域的大小或者与面部图案的一致程度等来计算可靠度。 0093 同样地， 在物体识别中， 可以识别与预先登记的图案一致的物体。 还存在用于通过 使用拍摄图像的色相和饱和度等的直方图来提取特征被摄体的方法。 在这种情况下， 将从 视角内的被摄体的图像的色相和饱和度等的直方图导出的分布划分为多个区间， 并且在各 区间中对拍摄图像进行分类。 说明书 8/19 页 12 CN 111246056 A 12 0094 例如， 针对拍摄图像创建多个颜色分量的。