《阿尔茨海默氏症认知使能器.pdf》由会员分享,可在线阅读,更多相关《阿尔茨海默氏症认知使能器.pdf(13页完整版)》请在专利查询网上搜索。
1、(10)授权公告号 CN 102149319 B (45)授权公告日 2013.07.17 CN 102149319 B *CN102149319B* (21)申请号 200980135706.6 (22)申请日 2009.09.14 12/233,817 2008.09.19 US A61B 5/0476(2006.01) (73)专利权人 尤尼特尔神经系统学公司 地址 美国马里兰州 (72)发明人 马蒂尼罗思布拉特 (74)专利代理机构 广州三环专利代理有限公司 44202 代理人 温旭 郝传鑫 US 2005/0228785 A1,2005.10.13, 全文 . US 2008/013。
2、8783 A1,2008.06.12, 全文 . US 2007/0299360 A1,2007.12.27, 全文 . (54) 发明名称 阿尔茨海默氏症认知使能器 (57) 摘要 一种使处于智力衰弱状态的用户能够进行交 互的计算设备包括存储器、 输入部件、 处理器和输 出部件。所述存储器配置成存储脑电图 (EEG) 波 形信号的存储器。所述 EEG 波形信号是根据相关 的识别数据生成。根据所述相关的识别数据生成 响应数据并将该响应数据存储在所述存储器中。 所述输入部件配置成接收来自用户的 EEG 波形信 号。所述处理器配置成将接收到的 EEG 波形信号 与存储的 EEG 波形信号相比较以确。
3、定接收到的脑 电图波形信号与存储的脑电图波形信号是否匹 配。所述输出部件配置成根据所述处理器的确定 结果自动输出根据所述相关的识别数据生成的响 应数据。 (30)优先权数据 (85)PCT申请进入国家阶段日 2011.03.11 (86)PCT申请的申请数据 PCT/US2009/056837 2009.09.14 (87)PCT申请的公布数据 WO2010/033461 EN 2010.03.25 (51)Int.Cl. (56)对比文件 审查员 胡亚婷 权利要求书 1 页 说明书 8 页 附图 3 页 (19)中华人民共和国国家知识产权局 (12)发明专利 权利要求书1页 说明书8页 附图。
4、3页 (10)授权公告号 CN 102149319 B CN 102149319 B *CN102149319B* 1/1 页 2 1. 一种使处于智力衰弱状态的用户能够进行交互的计算设备, 所述计算设备包括 : 存储器, 配置成存储脑电图波形信号, 所述脑电图波形信号是根据相关的识别数据生 成, 其中, 根据所述相关的识别数据生成响应数据并将该响应数据存储在所述存储器中 ; 输入部件, 配置成接收来自用户的脑电图波形信号 ; 处理器, 配置成将所述接收到的脑电图波形信号与所述存储的脑电图波形信号相比 较, 以确定所述接收到的脑电图波形信号与所述存储的脑电图波形信号是否匹配 ; 以及 输出部件。
5、, 配置成基于所述处理器的确定结果自动输出根据所述相关的识别数据生成 的响应数据。 2. 根据权利要求 1 所述的计算设备, 其中, 所述相关的识别数据包括图像数据。 3. 根据权利要求 1 所述的计算设备, 其中, 所述相关的识别数据包括语音数据。 4. 根据权利要求 1 所述的计算设备, 其中, 所述响应数据包括语音数据。 5. 一种使处于智力衰弱状态的用户能够进行交互的计算系统, 所述计算系统包括 : 计算设备, 该计算设备包括 : 存储器, 配置成存储脑电图波形信号, 所述脑电图波形信号是根据相关的识别数据生 成, 其中, 根据所述相关的识别数据生成响应数据并将该响应数据存储在所述存储。
6、器中 ; 输入部件, 配置成接收来自用户的脑电图波形信号 ; 处理器, 配置成将所述接收到的脑电图波形信号与所述存储的脑电图波形信号相比较 从而确定所述接收到的脑电图波形信号与所述存储的脑电图波形信号是否匹配 ; 以及 输出部件, 配置成基于所述处理器的确定结果自动输出根据所述相关的识别数据生成 的响应数据 ; 和 服务器计算机, 配置成更新存储在所述计算设备的存储器中的脑电图波形信号、 相关 的识别数据和响应数据。 6. 根据权利要求 5 所述的计算系统, 所述计算系统还包括系统数据库。 7. 根据权利要求 5 所述的计算系统, 其中, 所述计算设备是可佩带式计算机。 8. 根据权利要求 5。
7、 所述的计算系统, 其中, 所述更新是通过无线传输实现。 9. 根据权利要求 5 所述的计算系统, 其中, 所述计算设备包括手机。 10. 根据权利要求 5 所述的计算系统, 其中, 所述计算设备包括个人电脑。 11. 根据权利要求 5 所述的计算系统, 其中, 所述相关的识别数据包括图像数据。 12. 根据权利要求 5 所述的计算系统, 其中, 所述相关的识别数据包括语音数据。 13. 根据权利要求 5 所述的计算系统, 其中, 所述响应数据包括语音数据。 14. 根据权利要求 6 所述的计算系统, 其中, 所述系统数据库包括视位数据库。 15. 根据权利要求 6 所述的计算系统, 其中, 。
8、所述系统数据库包括对话数据库。 16. 根据权利要求 6 所述的计算系统, 其中, 所述系统数据库包括自传数据库。 权 利 要 求 书 CN 102149319 B 2 1/8 页 3 阿尔茨海默氏症认知使能器 0001 相关专利申请的交叉引用 0002 本发明要求 2008 年 9 月 19 日提交的申请号为 12/233,817 的美国非临时专利申 请的优先权和权益, 该申请通过引用全部并入本文。 技术领域 0003 本发明实施方式涉及用于改善患有使人衰弱的疾病的个人以及受到患者能力减 弱影响的关心他们的人的生活质量的装置、 系统和方法。 背景技术 0004 影响人心智能力的使人衰弱的疾病。
9、, 对于患者个人以及必须照顾该患者的家庭成 员、 朋友和看护者而言, 都是特别难以忍受的。 在智力上使人衰弱的疾病的一种形式是痴呆 症。痴呆症是严重影响人实现日常活动的能力的大脑功能紊乱。在老年人中痴呆症最常见 的形式是阿尔茨海默氏症 (Alzheimer s disease), 这种疾病最初影响大脑控制思想、 记忆 和语言的部分。 在阿尔茨海默氏症的早期, 失忆是最常见的症状, 表现为难以记起最近知晓 的事实, 然而其起初经常被误诊为与年龄有关的失忆或压力过大。随着患者 ( 他或她 ) 感 官能力的下降, 随后的症状包括混乱、 愤怒、 情绪波动、 语言能力减退、 长期失忆以及普遍衰 退。每个。
10、人都以独特的方式经受阿尔茨海默氏症的症状。这种疾病的持续时间为 5 年至 20 年之间。 0005 当前, 阿尔茨海默氏症不能治愈, 而且也没有有效的方法使阿尔茨海默氏症患者 在这种疾病的各种阶段与家人和朋友进行有效地交互。 0006 因此, 需要一种使阿尔茨海默氏症患者能在这种疾病的各种阶段与家人、 朋友和 看护者等人进行有效交互的装置、 系统和方法。 发明内容 0007 因此, 本发明公开了一种阿尔茨海默氏症认知使能器, 使阿尔茨海默氏症患者能 够在阿尔茨海默氏症的各种阶段与家人、 朋友、 看护者等人进行有效地交互。 0008 根据本发明的一种实施方式, 一种使处于智力衰弱状态的用户能够进。
11、行交互的计 算设备包括存储器、 输入部件、 处理器和输出部件。其中, 所述存储器配置成存储脑电图 (EEG) 波形信号。所述脑电图波形信号是根据相关的识别数据生成。根据所述相关的识别 数据生成响应数据并且将该响应数据存储在所述存储器中。 所述输入部件配置成接收来自 用户的脑电图波形信号。 所述处理器配置成将接收到的脑电图波形信号与存储的脑电图波 形信号相比较以确定接收到的脑电图波形信号与存储的脑电图波形信号是否匹配。 所述输 出部件配置成根据所述处理器的确定结果自动输出根据所述相关的识别数据生成的响应 数据。 0009 根据本发明的另一种实施方式, 一种使处于智力衰弱状态的用户能够进行交互的 。
12、计算系统包括计算设备和服务器计算机。 所述计算设备包括存储器、 输入部件、 处理器和输 说 明 书 CN 102149319 B 3 2/8 页 4 出部件。所述存储器配置成存储脑电图波形信号。所述脑电图波形信号是根据相关的识别 数据生成。根据所述相关的识别数据生成响应数据并且将该响应数据存储在所述存储器 中。所述输入部件配置成接收来自用户的脑电图波形信号。所述处理器配置成将接收到的 脑电图波形信号与存储的脑电图波形信号相比较以确定接收到的脑电图波形信号与存储 的脑电图波形信号是否匹配, 以及, 所述输出部件配置成根据所述处理器的确定结果自动 输出根据所述相关的识别数据生成的响应数据。 所述服。
13、务器计算机配置成更新存储在所述 计算设备的存储器中的脑电图波形信号、 相关的识别数据和响应数据。 0010 根据本发明的又一种实施方式, 一种使处于智力衰弱状态的用户能够进行交互的 方法包括存储脑电图波形信号, 所述脑电图波形信号是根据相关的识别数据生成。所述方 法还包括存储根据所述相关的识别数据生成的响应数据的步骤和接收来自用户的脑电图 波形信号的步骤。 所述方法还包括将接收到的脑电图波形信号与存储的脑电图波形信号相 比较的步骤和确定接收到的脑电图波形信号与存储的脑电图波形信号是否匹配的步骤。 所 述方法还包括基于所述确定步骤自动输出根据所述相关的识别数据生成的响应数据的步 骤。 附图说明 。
14、0011 结合下面的具体实施方式、 所附权利要求书和附图, 将更好地理解本发明的上述 及其他特征、 各个方面和优点, 其中 : 0012 图1示出用户使用本发明的阿尔茨海默氏症认知使能器(Alzheimer s Cognitive Enabler, ACE) 设备的实施方式 ; 0013 图 2 示出可运行本发明的 ACE 设备、 系统和方法的运行环境 ; 以及 0014 图 3 是描述根据本发明一种实施方式的 ACE 设备中执行的步骤的流程图。 具体实施方式 0015 除非另作说明, 不指明具体数目 (“a” 或 “an” ) 是指 “一个 ( 种 ) 或一个 ( 种 ) 以上” 。 001。
15、6 用于赌博业的非侵入式脑电图(EEG)波形监测的新近发展使大量的EEG波形信号 能够与思想内容联系起来。另外, 图像和声音识别技术的新近发展使得这些技术能容易地 与个人电脑一起使用。 然而, 这些技术局限在他们特定的行业中实行, 并没有联系起来以帮 助患有阿尔茨海默氏症的人。通常, 阿尔茨海默氏症患者在智力上能做的比清晰明白地说 或表达出来的更多。根据本发明的实施方式, 阿尔茨海默氏症认知使能器 (ACE) 允许阿尔 茨海默氏症患者利用他或她受较少影响的认知波形来触发受大脑中的 - 淀粉样蛋白斑 块阻碍但可以通过 ACE 获得的识别和对话功能。换句话说, ACE 可以等同于或者概念化为 “认。
16、知轮椅” , 与传统轮椅提供的物理帮助相比,“认知轮椅” 提供智力帮助。 0017 例如, 假设图 1 中用户 110( 即 : 阿尔茨海默氏症患者 ) 携带 ACE 设备 100。在图 1 示出的示例性实施方式中, ACE 设备 100 接入输入设备, 例如 : EEG 设备 150、 摄像机 121、 话 筒 124 和输入设备 122( 例如, 键盘、 手写识别设备等 )。ACE 设备 100 还接入可视显示设备 132 和扬声器输出设备 134。在本发明的一些实施方式中, 所述输入设备和输出设备可以与 ACE 设备 100 结合在一起成为单一设备, 而在可选的实施方式中, ACE 设备。
17、 100 可以是单独 说 明 书 CN 102149319 B 4 3/8 页 5 的设备, 其能够 ( 例如, 通过物理或无线连接 ) 接收来自可接入的各种设备 ( 例如, 由用户 携带的设备或者位于周围附近的设备 ) 中任意设备的输入信号以及向可接入的各种设备 中任意设备提供输出信号。ACE 设备 100 还包括用于处理存储在其存储器 165 中的信息的 处理器 160, 将在下面更详细地描述。 0018 通过下面的具体实施方式和实施例进一步阐明本发明, 然而本发明决不局限于所 述具体实施方式和实施例。在图 1 所示的实施例中, 描述了用户 110 可能需要存储稍后可 用于帮助用户 110。
18、 与人 170 进行交互的信息的各种情形。根据本发明的一种实施方式, 建 议用户 110 出现最初的认知减退的迹象时就使用 ACE 设备。在这种依然相对健康的阶段, 阿尔茨海默氏症患者、 家人和 / 或看护者可为 ACE 设备 100 加载患者的特征图像、 声音数据 和记忆等以及相关的 EEG 波形。然而, 通过人工智能技术, 并不是每一位数据必须要有相关 联的 EEG 波形。例如, 可以有与患者儿子的图像相关联的 EEG 波形。然而, 不需要有与患者 和儿子在一起的图像相关联的 EEG 波形。控制 ACE 设备的人工智能程序使用关系数据库技 术在 EEG 触发索引图像之后集合相关图像。更一般。
19、地, ACE 设备 100 配置成在 EEG 波形与 刚识别出的人相关联后, 基于存储的数据和先进的基于人工智能的聊天机器人软件来引导 与这个人的正常会话。通常, 任何 EEG 波形都会触发 ACE 设备 100 之外的某种对话功能, 这 种对话功能与所存储的关联关系所允许的对话功能一样接近于引起所述 EEG 波形的动机。 当佩带 EEG 设备 150 时, 阿尔茨海默氏症患者能够培训 ACE 设备 100 在患者与其他人交互 时像他或她在给定情形中一样作出反应。之后, 一旦阿尔茨海默氏症有进一步的发展, ACE 设备 100 可用于利用先前存储的并且不断更新的图像和声音识别程序、 对话软件以。
20、及患者 特定的设置代表阿尔茨海默氏症患者与其他人交互, 将在下面更详细地阐述。 0019 例如, 在第一次遇到人170之后, 用户110可能需要存储有关这个人的各种信息以 用于之后的记忆。 具体地, 用户110可使用摄像机121和话筒124来记录这次相遇的视频和 音频记录。用户 110 也可以使用摄像机 121 来拍摄有关所处环境的其他当前信息, 所述信 息可能会帮助用户之后记起这次相遇, 所述信息例如相遇发生的地点的视频图像。 此外, 用 户 110 可使用话筒 124 来记录有关人 170 的口述信息, 例如这个人的姓名、 地址、 电子邮件 地址、 电话号码等。ACE 设备 100 随后可。
21、以音频记录的方式存储所述口述信息, 或者可改为 对所述口述执行声音识别以产生所述信息的文本版本。可选地, 用户 110 可通过文本输入 设备 121 将关于这个人的部分或全部信息直接以文本方式提供给 ACE 设备 100。在其他的 实施方式中, 用户 110 可通过任何其他可利用的输入装置向 ACE 设备 100 提供信息, 例如从 便携式设备 ( 图中未示出 ) 传送来的信息, 所述便携式设备可能是这个人携带的设备 ( 例 如, 另一 ACE 设备 )。在接收并处理有关与人 170 相遇的各种信息之后, ACE 设备 100 将这 些信息与从 EEG 设备接收到的 EEG 波形信号相关联。 。
22、0020 根据本发明的一种实施方式, ACE 设备 100 配置成使得再次遇见人 170 但未能认 出这个人的阿尔茨海默氏症患者, 可以基于EEG波形自动触发对人170的合适的问候, 所述 EEG 波形是在该阿尔茨海默氏症患者再次遇见这个人但是不能认出他时产生。 0021 ACE设备100可以是以通用的安装在身上(body-mounted)的可佩戴式计算机的形 式由用户佩戴。许多可佩戴式计算机可随用户移动, 例如用带子系在或缚在用户身体或衣 服上, 或者安装在套子中。 所述可佩戴式计算机具有各种用户佩戴的用户输入设备, 包括话 筒 124、 具有字符识别功能的手持平板显示器和各种其他的用户输入。
23、设备 222。相似地, 所 说 明 书 CN 102149319 B 5 4/8 页 6 述计算机具有各种用户佩戴的输出设备, 包括手持平板显示器、 耳塞式扬声器、 眼镜式显示 器等。除了所述各种用户佩戴的用户输入设备之外, 所述计算机还可接收来自各种用户传 感器输入设备和包括摄像机 121 在内的环境传感器输入设备的信息。ACE 设备 100 可接收 并处理各种输入信息并且可以将信息在所述各种输出设备上呈现给用户110。 因此, 当用户 110在各种环境周围移动时, ACE设备110接收可以存储的来自所述输入设备的各种输入信 息。 0022 所述通用的安装在身上的可佩戴式计算机可包括触摸屏部。
24、件 ( 例如, 所述触摸屏 部件可具有近似于人类头部的尺寸, 但可以具有任意尺寸 ), 所述触摸屏部件使 ACE 设备 100 能够响应触摸以及音频和视频输入。例如, 如果阿尔茨海默氏症患者处于阿尔茨海默 氏症后期, 所述触摸屏上患者的无所不在的自然移动的图像可被轻吻, 那么 ACE 设备 100 的编程部件能够识别出这种输入并用该阿尔茨海默氏症患者的声音作出回应, 例如回应为 “THANK YOU FOR THE KISS GRANDSON.” 。 0023 本领域技术人员可以理解, 为实现各种目的可以创建专用版本的安装在身上的计 算机。 本领域技术人员还可以理解, 各种生理状况可以被监测,。
25、 并且可以类似地实现设备的 其他专用版本。 0024 系统环境 0025 参见图 2, 本发明的 ACE 系统和方法主要运行在计算机网络环境中。在本实施方 式中, ACE 系统 20 包括程序系统管理站 10, 该程序系统管理站 10 包括服务器计算机 12、 系 统数据库 14 以及与所述服务器计算机 12 通信的多个工作站 18。工作站 18 可由患者或看 护者 18a、 家人 18b 或朋友 18c 或任何其他的系统参与者 18d 使用。根据本发明的实施方 式, 与 ACE 设备 100 一样, 工作站 18 可以是基于具有无线网络连接的系统的独立的个人电 脑 (PC) 和能与站外服务器。
26、 (off-site server) 进行 Wi-Fi 连接的智能手机。所述站外服 务器可提供软件更新、 充当用于某些数据库功能的贮藏室以及提供诊断的功能。例如, ACE 设备 100 和 ACE 系统 20 的无线连接功能有助于确保倘若 ACE 设备 100 发生故障、 盗取、 破 损或遗失时不会丢失数据。在用户设置期间, 来自 ACE 设备 100 的全部数据自动上传至服 务器计算机12, 并且随后上传至系统数据库14以安全存储。 这些存储的数据可以容易地下 载到替换的 ACE 设备中。所述个人计算机通常会需要视频监视器、 声卡和显卡。可选地, 工 作站18可以是能够与计算机网络交互的任何。
27、设备, 包括诸如个人数字助理(PDA)和手机之 类的设备。 0026 其他系统要求包括 PC 兼容的视频摄像机、 PC 兼容的定向话筒、 扬声器和蓝牙商用 EEG 耳机。在看护者或公共医疗机构, 除了上述装置之外, 还可需要平板 PC 和声音激活话 筒。本发明的实施方式在某些情况下还可能需要现场培训和患者支持设备 24, 或者患者在 使用本发明期间可能需要帮助, 在两种实例中, ACE 系统 20 服从于在提供输入或者培训患 者使用附加的系统输入设备中帮助患者的其他使用者。在 ACE 系统 20 的服务器计算机 12 上固化有阿尔茨海默氏症识别程序 16。此外, 使用 ACE 设备 100 和。
28、 ACE 系统 20 的无线连接 功能, 通过从服务器计算机 12 下载新的软件可以不断改进 ACE 设备 100 的反应性能。在服 务器计算机 12 中, 软件会分析每天上传的 ACE 交互模式以调整 ACE 设备 100 的程序, 以使 该程序更好地匹配阿尔茨海默氏症患者的健康对话模式。根据本发明的一种实施方式, 服 务器计算机 12 安装有较新版本的对话软件, 该较新版本的对话软件在复制正常对话模式 说 明 书 CN 102149319 B 6 5/8 页 7 方面更加完善。 这种软件配置成检查所保存的患者与家人之间的对话以识别错误并调整对 话参数。这类似于 “自动调音” 软件如何处理数。
29、字音乐, 因为可分析人类的声音失调并可纠 正。 0027 系统培训和数据库元素 0028 根据本发明的一种优选实施方式, 通过在下述每一个实例中进行患者交互来培训 ACE 设备 100 和 ACE 系统 20 : 记录患者的声音、 获得不同瞬间的患者面部表情 ( 说话、 笑、 喜 悦和悲伤 ) 的数字视频以获得视位数据库。正如本说明书通篇所使用, 视位被定义为可视 域内的语音单元, 人的面部如何形成言语和表情。ACE 设备 100 和 ACE 系统 20 根据患者的 录像带创建患者的视位词典。在患者不能参与的情形下, 人为创建所述词典。在人为创建 的过程中, 例如, 以高清晰度方式为患者的面部。
30、拍照, 并将捐献者 (donor) 的视位数字化地 覆盖在拍摄的患者面部上, 结果类似于真人动画。 0029 根据本发明的一种实施方式, 可以由受过培训的工作人员、 看护者等人来实施录 影。患者还可以构建或被帮助构建其希望进行交互的家人和朋友 ( 家人或朋友 ) 的数据 库。所述数据库还可以包括看护者和医护服务提供者的联系信息。根据本发明的实施, 这 些人的声音样本可从具有 Wi-Fi 功能的手机交互中收集, 也可以预先安排培训人员进行录 音。然后, 患者可构建、 或者被帮助构建、 或者由培训人员构建响应他们的电话 ( 手机和座 机 ) 和 PC 系统的数据库, 以及建立当所述系统对他们做出响。
31、应时的预先设置。 0030 根据本发明的示例性实施方式, 患者的原始声音样本可用于阿尔茨海默氏症分 析。可在培训和使用 EEG 设备 150 期间可以由工作人员来指导患者。如前所述, EEG 设备 150 用作 ACE 设备 100 和 ACE 系统 20 的辅助数据输入工具和数据收集设备, EEG 信号代替 PC鼠标服务, 充当在屏幕上进行拖拽和指出/选择的工具, 并且能够基于对象拖放屏幕。 根 据本发明可选的实施方式, 如果 EEG 信号受到干扰或者未被识别出来, 软件配置成缺省运 行, 像适当的 EEG 信号被触发一样。例如, 如果 “女儿” 具有特定的 EEG 信号, 但未被识别出 来。
32、, 则有可能将 “女儿” 确认为女儿拜访患者, 并且随后 ACE 设备 100 会交谈, 就像 “女儿” 的 EEG 信号已经被触发一样。熟悉 EEG 设备 150 还可帮助患者在健康下降时接入所述设备和 系统。从患者用户获得的原始 EEG 样本可上传至服务器 12 并且随后对数据进行分析。可 以培训患者使用作为辅助数据输入工具的声音识别软件。 这将使患者更容易地输入他或她 的自传记忆, 并且让患者更加充分地使用与 EEG 设备 150 协同作用的 PC。按照这种使用方 法获得的声音样本可用于声音合成和诊断分析。 0031 档案资料 0032 根据本发明的一种优选实施方式, 通过与患者和患者的。
33、家人或朋友的电话交谈和 会面收集的数据可用于帮助构建将要部署的ACE设备100和ACE系统20的确定的对话。 在 患者完全不能并且没有能力参与会面过程的情况下, 在本发明的优选实施方式中, 心理学 家工作人员可引导与家人或朋友的会面、 查看个人资料并构建患者的自传详细目录, 该自 传详细目录可用作构建在 ACE 设备 100 中存储的或者在 ACE 系统 20 中远程存储的对话数 据库和自传数据库的基础。 0033 根据 ACE 设备 100 和 ACE 系统 20 的操作, 如果用户 110 不能认出发起对话的人, 则由 EEG 设备 150 产生的 EEG 波形信号被用于重新获取正确的响应。
34、。根据 ACE 设备 100 和 ACE 系统 20 的可选的操作, 声音和面部识别软件被用于识别对话的发起者, 并且随后 ACE 说 明 书 CN 102149319 B 7 6/8 页 8 设备 100 和 ACE 系统 20 基于对该对话发起者的识别提供正确的响应集。在本发明的优选 实施方式中, 基于这个人与患者之间过去的精神动力学现象描绘响应。ACE 设备 100 和 ACE 系统 20 包括描绘方法, 该描绘方法是一种心理架构, 采用该心理架构, 最大限度地将治疗 精力投入到由患者的朋友或家人在与患者的化身交互时所经历的疑虑。根据本发明, 患者 的化身被定义为患者的音频构造, 其具有。
35、患者的脸、 面部表情和声音。 在患者是系统的早期 参与者并且参与了系统培训的情况下, 患者的化身会显现在监测器上以患者自己的声音讲 话, 并且在相当大程度上, 还具有患者自身的面部表情。如果患者未能参与, 所述声音将具 有适当的性别、 平稳的音高和音调。 根据本发明的示例性实施方式, 所述面部表情可以是人 性化的并且是亲切的, 并且所述脸将是患者的脸。 0034 根据本发明的可选实施方式, ACE 设备 100 和 ACE 系统 20 可包括基于阿尔茨海默 氏症患者的实际数字采样情绪的情绪软件引擎。根据本发明的这种实施方式, ACE 设备 100 和 ACE 系统 20 配置成, 受 EEG 。
36、波形信号和 / 或程序分析出的对话软件引擎中的语意线索触 发, 扮演阿尔茨海默氏症患者的真实情绪。 0035 根据本发明的一种实施方式, 对话数据库响应特别的讲话者而根据存储在系统数 据库 14 或 ACE 设备 100 的存储器中的信息生成适当的对话片段并随之做进一步处理。下 面提供一个对话的例子 : 0036 SARAH : HI NANA, HOW ARE YOU ? 0037 NANA : I M DOING SO-SO TODAY PRECIOUS, HOW IS YOUR LITTLE JO-JO ? 0038 孙女 Sarah 被 ACE 设备 100 或者 ACE 系统 20 。
37、认出, 或者被相关的 EEG 波形、 声音 识别软件或面部识别软件认出, 随后对话生成软件查找 Sarah, 识别她祖母对她的昵称, 而 且她的昵称是 Jo-Jo。 0039 系统输入 0040 根据本发明的一种实施方式, 作为 ACE 设备 100 和 ACE 系统 20 的一部分, 输入包 括患者在由培训人员引导的照稿宣读的对话过程中的录像带。 根据本发明的一种优选实施 方式, 例如, 这可被保留成多个 15 分钟持续时间的会话, 总计 60 分钟。所述会话设计用来 拍摄处于各种情绪反应和面部模式的患者。为了捕获患者的各种面部表情, 执行录像的培 训人员或技术人员除了遵循剧本外, 还可培训。
38、如何引起希望得到的各种情绪反应。 随后, 将 产生的视频处理到用于上述患者化身的视位数据库中。例如, 患者指定的家人或朋友的高 质量头部镜头可由培训人员拍摄并输入到 ACE 设备 100 和 ACE 系统 20 中供面部识别部件 使用。培训人员还可采样家人或朋友的声音记录输入到声音识别部件中。对于患者能力降 低并且不能承受会面过程中的困难的情况, 培训人员可拍摄患者脸部的高清晰度图像。然 后可根据所述图像人工合成构造视位。这个过程是将患者脸部覆盖在 “数字捐献者” 之上 的其中一种, 比如说, 用培训人员 Mary 的视位来实现映射的过程, 移走 Mary 的特有的面部 特征留下动态模板, 并。
39、且随后将患者的面部特征映射到所述模板上。这可以是由培训人员 在现场完成的一次处理。 0041 系统输出 0042 根据本发明的一种实施方式, 作为ACE设备100和ACE系统20的一部分, 响应从患 者收集的诊断数据, 可以根据患者的请求或者预先确定的设置, 通过患者的电话系统 ( 手 机和座机 ) 和 PC/PDA/ 智能电话输出文本响应、 视听响应或者音频响应。视频可以与患者 说 明 书 CN 102149319 B 8 7/8 页 9 的视位一起处理并合成, 以产生患者化身。 根据本发明的一种优选实施方式, 这个处理可由 培训人员现场进行。当 ACE 设备 100 和 ACE 系统 20。
40、 被对话发起者的激起, 随后可以提示在 系统数据库 14 中加载或者在 ACE 设备 100 的存储器本地加载关于该对话发起者的对话数 据库, 并且准备将语音合成引擎与患者化身结合在一起, 以响应发起者的言语。 0043 系统诊断 0044 根据本发明的一种优选实施方式, 对于阿尔茨海默氏症的早期发作, 可利用当前 建立的开发用于声音识别技术和阿尔茨海默氏症的征象的诊断基准分析从 PC 的语音控制 获得和从手机对话获得的语音数据。 可以将这种数据集与在患者最初使用该系统时收集到 的原始语音数据相比较。 可利用当前针对阿尔茨海默氏症的预测或征象建立的协议来分析 从患者收集到的 EEG 波形数据。。
41、通过这两个过程, 使得在能够了解患者在给定时间内的能 力减退的程度以及根据对电话呼叫或 PC 通信的反应确定是否调用患者的选择方面, 或者 在呼叫看护者、 医护提供者或家人方面, 存在合理程度的统计上的可能性。 0045 系统和程序模型 0046 根据本发明的又一种优选实施方式, ACE 系统 20 是设计用于帮助在阿尔茨海默氏 症的预发作阶段一直到阿尔茨海默氏症的后期被诊断出来的患者的系统平台。 在预发作阶 段, 优选的模型预想患者直接与 ACE 设备 100 和 ACE 系统 20 交互, 为系统培训、 患者的诊断 和患者的记忆存储提供输入。 当患者变得虚弱或者感觉不能完成或专心于基于特定。
42、交流的 任务时, 所述设备和系统为患者提供响应。如果患者变成需要送至专门机构照料或者需要 看护者并且达到对话能力减退的阶段, 则 ACE 设备 100 和 ACE 系统 20 配置成识别声音提示 或者识别在数据库 14 或本地存储器中编入索引的家人或朋友中的成员的脸部, 这将初始 化所述设备和系统并且将开始与索引指出的人进行对话。 0047 在阿尔茨海默氏症的预发作阶段, 患者通过多个维度与所述设备和系统交互。电 话交谈为家人或朋友数据库提供配置文件数据, 该配置文件也就是所述数据库中的人、 声 音样本、 交互的频率和持续时间, 手机数据通过 Wi-Fi 传输至服务器 12 以存储和分析。基 。
43、于 PC 的行为可由附加设备逐步控制, 所述行为即患者的口头命令 ( 声音识别 ) 和基于 EEG 波形的命令。从所述设备和系统收集的数据可传送至服务器 12 用于诊断分析以及用于患 者化身。如果患者感到疲劳, 或者如果基于 EEG 波形的诊断告知患者或其看护者该名患者 开始进入身体透支, 则所述设备和系统可缺省运行或者根据患者的选择运行, 以介入患者 可利用的任意或全部交流渠道。如果察觉到的身体透支达到预先确定的门限, 则所述设备 和系统配置成根据需要警告看护者、 医护提供者、 家人或朋友。 0048 在阿尔茨海默氏症中期, 患者具备一定的对话能力, 或者可能容易感到疲劳。 根据 本发明的优。
44、选实施方式, 患者可佩戴 ACE 设备并可通过 EEG 设备 150 与 ACE 设备和 ACE 系 统交互, 以及可引导与家人或朋友的对话, 通过平板 PC 选择来自对话数据库的对话元素或 者来自他或她的自传数据库的元素。在本发明的这种实施方式中, 患者还可以打开或关闭 患者化身。所建立的预先设置将确定患者是否处于做决定的状态。 0049 当患者达到衰弱阶段以致于自我维持的会话成为患者的负担或者在智力上不切 实际时, 则 ACE 设备和系统配置成在患者和其家人之间或者在患者和其朋友之间进行干 预。目前, 患者与 ACE 设备或 ACE 系统的视频监视器并置。在本发明的一种优选实施方式 中, 。
45、一次一名谈话者与患者对话, 并且每一位谈话者佩戴语音激活的话筒。在对患者说话 说 明 书 CN 102149319 B 9 8/8 页 10 时, 所述设备和系统通过使用其中提供的软件的语音和面部识别、 患者化身显示识别来激 活, 并且开始与谈话发起者进行对话。所述患者化身配置成大致像人们可能希望的年长的 家庭成员那样交谈, 例如 : 对于每个家庭参与者而言, 回答简短、 持续时间为 20 秒或者更短 以及谈话的总长度不多于 5 分钟。 0050 根据本发明的实施方式, 例如, 如果 (i) 原始数据库足够健全以及 (ii) 对话没有 复制内容, 则通常与相同的人的对话在下一次对话时不会重复相。
46、同的内容。即使是在第二 种情况下, 例如, 不能确保患者化身的对话内容相同。对话内容可上传至服务器 ( 例如服务 器 12) 用于诊断分析。患者化身引用的特定事件可由家人或朋友通过访问那天所涉及的自 传数据库中的事件来访问。 0051 遥测 0052 根据本发明的实施方式, ACE 设备和系统还可配置成通过 EEG 波形信号输出以及 输出的标准集 ( 例如, 心跳、 脉率、 血压等 ) 监测患者的疼痛和情绪水平。通过 Wi-Fi(PC 或 智能手机或 PDA) 或远程服务器, 收集到的全部数据可供患者的医护提供者以及曾经和实 时核准的用户使用。 0053 图 3 是根据本发明一种实施方式描述在。
47、 ACE 设备中执行的步骤的流程图。该流程 从起始状态 S400 开始并进入步骤 S401, 其中 EEG 波形信号存储在存储器中。所述 EEG 波形 信号是根据相关的识别数据生成。在步骤 S402 中, 基于相关的识别数据生成的响应数据也 存储在存储器中。在存储完所述信息之后, 在步骤 S403 中, 接收来自用户的 EEG 波形信号。 在接收所述 EEG 波形信号之后, 该流程进入步骤 S404, 其中, 将接收到的 EEG 波形信号与存 储的 EEG 波形信号相比较。在比较的步骤之后, 该流程进入判断步骤 S405, 其中, 确定接收 到的 EEG 波形信号与存储的 EEG 波形信号是否。
48、匹配。如果接收到的 EEG 波形信号与存储的 EEG 波形信号之一匹配, 则该流程进入步骤 S406, 否则流程返回到步骤 S403, 在步骤 S406 中, 自动输出根据相关的识别数据生成的响应数据。 0054 阿尔茨海默氏症的特点是慢性的、 认知能力逐渐降低, 这给阿尔茨海默氏症患者 以及他或她的家庭带来很大的伤痛并造成生活质量的下降。所述 ACE 设备、 系统和方法能 够显著地改善所述下降的生活质量。 0055 基于对示例性实施方式的描述, 其他的实施方式对本领域的技术人员而言是显而 易见的。因此, 这些示例性实施方式不应视为限制本发明权利要求书限定的范围。 说 明 书 CN 102149319 B 10 1/3 页 11 图 1 说 明 书 附 图 CN 102149319 B 11 2/3 页 12 图 2 说 明 书 附 图 CN 102149319 B 12 3/3 页 13 图 3 说 明 书 附 图 CN 102149319 B 13 。