一种自助设备的辅助交互方法与装置
专利汇可以提供一种自助设备的辅助交互方法与装置专利检索，专利查询，专利分析的服务。并且现在，各行业营业厅的自助设备业务办理机智能化程度较低，在自助设备旁边设置人工辅助还是大多数营业厅选择的补救措施，但人 力 成本高，营业时间固定，无法满足用户多方位的需求。本 发明 提出的自助设备的辅助交互方法与装置，通过人体感应模 块 检测用户，语音采集处理单元、 语音识别 处理引擎、语义分析处理引擎对用户语音分析处理，为用户提供咨询问题的答案、业务流程的流程演示说明或坐席终端人员的远程指导。本发明实现了使用多种交互手段来辅助自助设备主屏，扩展其基本功能，通过这些扩展的功能完成自助设备主屏的 人工智能 升级，降低人工成本，改善用户体验。，下面是一种自助设备的辅助交互方法与装置专利的具体信息内容。
1.一种自助设备的辅助交互方法，其特征在于，包括步骤：
人体感应模块检测用户，检测到用户后触发激活，语音指导用户进入业务办理；
语音采集处理单元通过线性麦克风阵列采集声音并进行降噪处理得到清晰的实时音频流；
语音识别处理引擎通过预先训练好的模型对实时音频流进行翻译、加工并整合成标准话术；
语义分析处理引擎对标准话术分析处理，分为三种导向：噪音话术、问题话术和意图话术；当导向为噪音话术时，将其直接抛弃并返回无效标识到副屏显示，当导向为问题话术时，经预先训练的模型二次处理后返回相应的答案到副屏显示，当导向为意图话术时，返回意图指令标记到副屏显示；
返回意图指令标记时，用户发出语音指令或点击副屏，所述意图指令标记包括智能咨询页面、远程指导页面和业务办理页面；
当智能咨询页面和业务办理页面被触发时，副屏业务界面会切换到当前正在进行的主屏业务办理的流程演示以及提示上面，主屏负责返回答案和实际的业务办理；
当远程指导页面被触发时，运行远程客服管理系统，用户可选择与坐席终端人员实时音视频通话或与坐席终端人员分享自助设备主屏及副屏进行业务办理的画面。
2.如权利要求1所述的自助设备的辅助交互方法，其特征在于，还包括步骤：
语义分析处理引擎根据标准话术将对应答案封装成格式化的JSON字符串发送给副屏，所述格式化的JSON字符串包含class、intent、answer、entity几个字段的内容；
语义分析处理引擎对标准话术的分析处理导向为问题话术时，对标准问题和对应答案进行解析，将知识数据库模块的JSON字符串中question和封装的格式化JSON字符串intent和answer通过相应的页面展示给用户；
语义分析处理引擎对标准话术的分析处理导向为意图话术时，将操作描述和对应的槽值实体赋予字段intent和entity并返回，用于描述本轮人机交互或自助设备主副屏通信交互的结果。
3.一种自助设备的辅助交互装置，其特征在于，包括：
人体感应模块，用于检测用户；
知识数据库模块，包含业务相关知识和槽类型的标准答案及话术，存储于JSON字符串中；
人机语音交互模块，包括语音采集处理单元，语音识别处理引擎和语义分析处理引擎，用于声音的采集、降噪、翻译、加工、整合和分析处理；
副屏，用于显示和感知用户触摸；
远程客服管理系统，包括摄像头和音视频通话服务器，是远程控制的统一管理平台，包含分配坐席账号、坐席工作安排、坐席通话管理的功能；
主副屏交互系统，用于主副屏的通信交互。
一种自助设备的辅助交互方法与装置
技术领域
背景技术
发明内容
人体感应模块检测用户，检测到用户后触发激活，语音指导用户进入业务办理；
语音采集处理单元通过线性麦克风阵列采集声音并进行降噪处理得到清晰的实时音频流；
语音识别处理引擎通过预先训练好的模型对实时音频流进行翻译、加工并整合成标准话术；
语义分析处理引擎对标准话术分析处理，分为三种导向：噪音话术、问题话术和意图话术；当导向为噪音话术时，将其直接抛弃并返回无效标识到副屏显示，当导向为问题话术时，经预先训练的模型二次处理后返回相应的答案到副屏显示，当导向为意图话术时，返回意图指令标记到副屏显示；
返回意图指令标记时，用户发出语音指令或点击副屏，所述意图指令标记包括智能咨询页面、远程指导页面和业务办理页面；
当智能咨询页面和业务办理页面被触发时，副屏业务界面会切换到当前正在进行的主屏业务办理的流程演示以及提示上面，主屏负责返回答案和实际的业务办理；
当远程指导页面被触发时，运行远程客服管理系统，用户可选择与坐席终端人员实时音视频通话或与坐席终端人员分享自助设备主屏及副屏进行业务办理的画面。
语义分析处理引擎对标准话术的分析处理导向为问题话术时，对标准问题和对应答案进行解析，将知识数据库模块的JSON字符串中question和封装的格式化JSON字符串intent和answer通过相应的页面展示给用户；
语义分析处理引擎对标准话术的分析处理导向为意图话术时，将操作描述和对应的槽值实体赋予字段intent和entity并返回，用于描述本轮人机交互或自助设备主副屏通信交互的结果。
知识数据库模块，包含业务相关知识和槽类型的标准答案及话术，存储于JSON字符串中；
人机语音交互模块，包括语音采集处理单元，语音识别处理引擎和语义分析处理引擎，用于声音的采集、降噪、翻译、加工、整合和分析处理；
副屏，用于显示和感知用户触摸；
远程客服管理系统，包括摄像头和音视频通话服务器，是远程控制的统一管理平台，包含分配坐席账号、坐席工作安排、坐席通话管理的功能；
主副屏交互系统，用于主副屏的通信交互。
具体实施方式
知识数据库模块，即知识引擎服务器包含业务相关知识和槽类型的标准答案及话术，存储于税务云业务系统的数据库JSON字符串中，与自助设备主屏连接；
人机语音交互模块，用于声音的采集、降噪、翻译、加工、整合和分析处理，在本实施例中，利用语音识别服务器作为语音采集处理单元和语音识别引擎获取和翻译音频流，语义解析服务器作为语义分析处理引擎返回用户对应的答案；
副屏，用于显示和感知用户触摸；
远程客服管理系统的坐席终端和音视频通话服务器，用于实现用户与坐席终端人员的音视频通话以及远程桌面指导；
主副屏交互系统，通过串口通信实现主副屏的通信交互。
语音采集处理单元通过线性麦克风阵列采集声音并进行降噪处理得到清晰的实时音频流；
语音识别处理引擎通过预先训练好的模型对用户口语文本实时音频流进行翻译、加工并整合成标准话术；
语义分析处理引擎对标准话术分析处理，将有用的信息生成会话ID，建立上下文的场景关系，通过主动对话的方式引导用户办理相关业务，语义分析处理引擎根据标准话术将对应答案封装成格式化的JSON字符串发送给副屏，所述格式化的JSON字符串包含class、intent、answer、entity几个字段的内容；
标准话术分为三种导向：噪音话术、问题话术和意图话术；当导向为噪音话术时，即与本行业无关的语句和声音，将其直接抛弃并返回无效标识到副屏显示，当导向为问题话术时，即知识数据库模块中有相应答案的问题语句，经预先训练的模型二次处理后返回相应的答案到副屏显示，当导向为意图话术时，即其他与本行业相关的语句，返回意图指令标记到副屏显示；
语义分析处理引擎对标准话术的分析处理导向为问题话术时，根据知识引擎服务器的知识对标准问题和对应答案进行解析，将数据库JSON字符串中question和intent和answer通过相应的页面展示给用户；
语义分析处理引擎对标准话术的分析处理导向为意图话术时，根据知识引擎服务器的知识将操作描述和对应的槽值实体赋予字段intent和entity，将query、class、intent、answer、entity等字段组合成标准的JSON字符串数据，用于描述本轮人机交互或自助设备主副屏通信交互的结果。
| 标题 | 发布/更新时间 | 阅读量 |
|---|---|---|
| 一种建筑工地智能化在线管理系统 | 2020-05-11 | 393 |
| 包含受信执行环境的主机的证明 | 2020-05-13 | 716 |
| 一种基于区块链的译员信用管理方法及系统 | 2020-05-17 | 887 |
| 一种人工智能英语教学互动课件设计系统 | 2020-05-11 | 728 |
| 一种大数据运营管理系统 | 2020-05-08 | 313 |
| 一种电话营销呼叫内容记录管理系统 | 2020-05-14 | 872 |
| 资源分配方法和装置及具有其的网络管理系统 | 2020-05-15 | 164 |
| 一种能源大数据整合系统及方法 | 2020-05-16 | 686 |
| 一种数据交互式档案转递管理系统 | 2020-05-11 | 89 |
| 一站式服务系统 | 2020-05-18 | 63 |
高效检索全球专利专利汇是专利免费检索,专利查询,专利分析-国家发明专利查询检索分析平台，是提供专利分析，专利查询，专利检索等数据服务功能的知识产权数据服务商。
我们的产品包含105个国家的1.26亿组数据，免费查、免费专利分析。
专利汇分析报告产品可以对行业情报数据进行梳理分析，涉及维度包括行业专利基本状况分析、地域分析、技术分析、发明人分析、申请人分析、专利权人分析、失效分析、核心专利分析、法律分析、研发重点分析、企业专利处境分析、技术处境分析、专利寿命分析、企业定位分析、引证分析等超过60个分析角度，系统通过AI智能系统对图表进行解读，只需1分钟，一键生成行业专利分析报告。
