营业厅智能提醒助手

技术领域

本申请涉及供配电技术领域，特别涉及营业厅智能提醒助手。

背景技术

本部分的陈述仅仅是提供了与本申请相关的背景技术信息，不必然构成在先技术。

供电营业厅是电力营销的业务受理窗口、电网公司形象展示窗口及服务传播窗口,担负着国家电网公司对外宣传的任务，随着时代和技术的发展，需要进行智能化改造，提升我们的服务水平，提升客户的满意度。

供电营业厅大都应用取号机和排号系统，通过在屏幕上显示排号信息来提醒客户办理业务，但由于客户年龄较大忘记自己号码或者客户忽略屏幕排号信息等原因，客户错过叫号的情况仍时有发生，增加了客户业务办理时间，降低了客户满意度，同时，也存在服务窗口工作人员离场造成客户无效等待的问题，同样降低了了客户满意度。

发明内容

本申请为了解决上述问题提出了营业厅智能提醒助手，通过图像识别技术指引提醒客户，同时通过提醒机构在窗口服务人员离场时更改指示面板状态，避免客户无效等待。

本申请提供了营业厅智能提醒助手，包括：控制模块和与控制模块电连接的图像采集模块、提醒模块和语音播放模块，所述图像采集模块包括设置于营业厅内的若干智能摄像机，所述语音播放模块包括设置于营业厅内的若干智能音箱，所述提醒模块包括自适应服务牌翻转机构和评价机构，所述控制模块包括控制单元和图像识别单元，所述控制模块与营业厅叫号系统连接。

优选地，控制模块通过营业厅叫号系统获取客户的取号信息、排号信息，当客户进入营业厅后，控制模块通过图像采集模块采集客户图像以进行图像识别，生成客户的识别信息、位置信息，绑定每个客户的取号信息、识别信息、位置信息生成实时更新的客户提醒信息并存入室内客户信息列表，当客户移动出营业厅后，在室内客户信息列表中删除相应客户提醒信息，提醒客户的具体方法包括：

进门提醒：当客户进入营业厅，控制模块识别客户进入并通过语音播放模块播放欢迎信息并提醒客户取号；

叫号指引提醒：控制模块根据每个客户的排号信息和实时客户提醒信息控制语音播放模块播放语音以提醒相应客户；

工作人员离座提醒：控制模块通过提醒模块实时监测工作人员，在工作人员离座时更改服务牌状态，避免客户无效等待；

日常语音播报：控制模块据室内客户信息列表控制语音播放模块播放日常宣传和提醒信息。

优选地，所述控制模块根据图像识别提取客户的衣着识别特征和性别特征，根据所述衣着识别特征和性别特征生成客户识别信息，并根据图像识别识别客户动作，当监控到客户有穿戴动作时，重新提取客户的衣着识别特征并更新相应客户提醒信息，所述控制模块根据采集的图像周期性地对各个客户进行视觉定位，生成相应客户的位置信息并更新相应客户提醒信息。

优选地，所述叫号指引提醒的具体方法包括：

S100：控制模块检索室内客户信息列表，根据各条客户提醒信息生成对应的分级语音提醒关键词，所述分级语音提醒关键词包括号码信息、特征位置信息、性别信息、最简识别特征，当客户提醒信息更新时，重新检索室内客户信息列表以更新分级语音提醒关键词；

S200：控制模块实时接收营业厅叫号系统传输的排号信息，当监测到某号码临号时，控制模块调取相应客户提醒信息以获取对应客户的实时位置信息，选取相应语音播放模块中最靠近对应位置的智能音箱，控制所述智能音箱根据相应分级语音提醒关键词分级别分次播放提醒语音；

所述最简识别特征为从客户提醒信息中提取的能够区分相应客户与室内客户信息列表中的其他客户的最少衣着识别特征组合，所述特征位置信息为营业厅内特征物与客户的相对位置信息。

优选地，智能音箱分级别分次播放提醒语音的具体方法如下：

S201：根据智能音箱位置和客户的距离确定播放音量；

S202：一级播放语音为基础提醒模板一与号码信息组合，二级播放语音为基础模板一、号码信息、最简识别特征、性别信息组合，三级播放语音为基础模板一、号码信息、最简识别特征、性别信息、特征位置信息组合，一至三级播放语音依次通过智能音箱播放预设次数；

S203:在所述步骤S202中，控制模块通过采集相应位置图像并对客户动作进行识别，判断客户是否被语音提醒，若是，提前结束提醒流程并通知营业厅叫号系统；

S204:等待播放完成后结束提醒流程并通知营业厅叫号系统。

优选地，在所述步骤S202和S203中，若一至三级播放语音播放完成，判断客户仍未被提醒，则进行二次分级提醒，具体方法如下：

S2031：控制模块检索室内客户信息列表，查询预设距离范围P1内是否存在邻近客户，若是，跳转到步骤S2032，若否，跳转到步骤S204；

S2032：控制模块选取距离最近的邻近客户，获取其语音提醒关键词，分级别分次播放提醒语音，一级播放语音为基础提醒模板二、邻近客户号码信息与目标客户的号码信息、最简识别特征、性别信息组合，二级播放语音为邻近客户号码信息、最简识别特征、性别信息与目标客户号码信息、最简识别特征、性别信息组合，依次播放一、二级播放语音预设次数。

优选地，所述日常语音播报的具体方法为：所述控制模块周期性检索室内客户信息列表，生成客户位置分布信息，根据客户位置分布信息在语音播放模块中选择适宜位置和数量的智能音箱播放日常语音。

优选地，若正在进行日常语音播报的智能音箱中存在与步骤S200选取的智能音箱距离小于预设干扰距离P2的智能音箱，则停止相应智能音箱的日常语音播报，防止干扰叫号指引提醒流程。

优选地，所述提醒模块包括自适应服务牌翻转机构和评价机构，所述自适应服务牌翻转机构包括基座和指示面板，所述基座四周侧壁上开设有安装环槽，所述安装环槽内嵌设有传送带，安装环槽顶壁和底壁上开设有环形的限位滑槽，所述限位滑槽内滑动设置有两个移动检测机构，所述移动检测机构与传送带活动连接，基座顶部嵌设有转动电机，指示面板设置于转动电机的输出轴顶部末端，所述评价机构包括遮蔽罩和设置于遮蔽罩内腔中的评价按钮，所述基座内部嵌设有与传送带、移动检测机构、转动电机、评价按钮电连接的分控器。

优选地，所述移动检测机构包括滑设于限位滑槽内的滑动块，所述滑动块靠近传送带的一侧垂设有伸缩机构，所述伸缩机构的伸缩轴末端连接有动摩擦片，所述传送带上环设有摩擦带，滑动块远离传送带的一侧设置有超声波传感器。

与现有技术相比，本申请的有益效果为：

(1)本申请通过图像采集模块、语音播放模块配合图像识别技术提供进门提醒、叫号指引提醒、日常语音播报服务，避免客户错过叫号，提升了客户满意度和营业厅的智能化水平。

(2)本申请通过分级语音提醒、邻近客户提醒等方法指引提醒客户，通过图像识别技术识别客户衣着特征，再通过智能音箱播放附带识别特征的语音提醒，避免因客户记错自身号码或者各种原因导致的忽略屏幕排号信息导致的错过叫号问题，也便于邻近客户识别临号客户以对其进行提醒，提高了业务办理的智能化水平，弘扬了互帮互助精神。

(3)本申请通过提醒机构的自适应服务牌翻转机构在服务人员离场时及时更改服务牌状态，避免客户无效等待，同时通过评价机构接收客户评价，便于提升服务水平。

附图说明

构成本申请的一部分的说明书附图用来提供对本申请的进一步理解，本申请的示意性实施例及其说明用于解释本申请，并不构成对本申请的不当限定。

图1是本申请一种实施例的系统结构示意图，

图2是本申请一种实施例的方法流程示意图一，

图3是本申请一种实施例的方法流程示意图二，

图4是本申请一种实施例的方法流程示意图三，

图5是本申请一种实施例的提醒模块整体结构示意图，

图6是本申请一种实施例的服务牌翻转机构结构示意图。

图中：

1、基座，2、指示面板，3、传送带，4、移动检测机构，5、转动电机，6、遮蔽罩，7、评价按钮，8、安装座，11、控制按钮，31、摩擦带，41、滑动块，42、超声波传感器，43、伸缩机构，44、动摩擦片，101、安装环槽，102、限位滑槽；

100、控制模块，200、图像采集模块，300、语音播放模块，400、提醒模块。

具体实施方式：

下面结合附图与实施例对本申请作进一步说明。

需要注意的是，这里所使用的术语仅是为了描述具体实施方式，而非意图限制根据本公开的示例性实施方式。如在这里所使用的，除非上下文另外明确指出，否则单数形式也意图包括复数形式，此外，还应当理解的是，当在本说明书中使用术语“包含”和/或“包括”时，其指明存在特征、步骤、操作、器件、组件和/或它们的组合。

在本公开中，术语如“上”、“下”、“左”、“右”、“前”、“后”、“竖直”、“水平”、“侧”、“底”等指示的方位或位置关系为基于附图所示的方位或位置关系，只是为了便于叙述本公开各部件或元件结构关系而确定的关系词，并非特指本公开中任一部件或元件，不能理解为对本公开的限制。

如图1和图6所示，本申请提供了营业厅智能提醒助手，包括：控制模块100和与控制模块100电连接的图像采集模块200、提醒模块400和语音播放模块300，所述图像采集模块200包括设置于营业厅内的若干智能摄像机，所述语音播放模块300包括设置于营业厅内的若干智能音箱，所述提醒模块400包括自适应服务牌翻转机构和评价机构，所述控制模块100包括控制单元和图像识别单元，所述控制模块100与营业厅叫号系统连接。

具体地，控制模块100通过营业厅叫号系统获取客户的取号信息、排号信息，当客户进入营业厅后，控制模块100通过图像采集模块200采集客户图像以进行图像识别，生成客户的识别信息、位置信息，绑定每个客户的取号信息、识别信息、位置信息生成实时更新的客户提醒信息并存入室内客户信息列表，当客户移动出营业厅后，在室内客户信息列表中删除相应客户提醒信息。

提醒客户的具体方法包括：

进门提醒：当客户进入营业厅，控制模块100识别客户进入并通过语音播放模块300播放欢迎信息并提醒客户取号；

叫号指引提醒：控制模块100根据每个客户的排号信息和实时客户提醒信息控制语音播放模块300播放语音以提醒相应客户；

工作人员离座提醒：控制模块100通过提醒模块400实时监测工作人员，在工作人员离座时更改服务牌状态，避免客户无效等待；

日常语音播报：控制模块100据室内客户信息列表控制语音播放模块300播放日常宣传和提醒信息。

具体地，当客户进入营业厅后，控制模块100识别客户进入并通过语音播放模块300播放欢迎信息并提醒客户取号，客户通过取号机取号，控制模块100通过图像采集模块200采集相应客户取号图像，并实时接收营业厅叫号系统传输的取号信息，控制模块100对相应图像进行图像识别，生成客户的识别信息、位置信息并与取号信息绑定。

具体地，所述控制模块100根据图像识别提取客户的衣着识别特征和性别特征，根据所述衣着识别特征和性别特征生成客户识别信息，并根据图像识别识别客户动作，当监控到客户有穿戴动作时，重新提取客户的衣着识别特征并更新相应客户提醒信息，所述控制模块100根据采集的图像周期性地对各个客户进行视觉定位，生成相应客户的位置信息并更新相应客户提醒信息。

所述穿戴动作包括穿的动作和脱的动作，比如脱掉或穿上外衣、帽子、墨镜。

所述叫号指引提醒的具体方法包括：

S100：控制模块100检索室内客户信息列表，根据各条客户提醒信息生成对应的分级语音提醒关键词，所述分级语音提醒关键词包括号码信息、特征位置信息、性别信息、最简识别特征，当客户提醒信息更新时，重新检索室内客户信息列表以更新分级语音提醒关键词；

S200：控制模块100实时接收营业厅叫号系统传输的排号信息，当监测到某号码临号时，控制模块100调取相应客户提醒信息以获取对应客户的实时位置信息，选取相应语音播放模块300中最靠近对应位置的智能音箱，控制所述智能音箱根据相应分级语音提醒关键词分级别分次播放提醒语音。

所述最简识别特征为从客户提醒信息中提取的能够区分相应客户与室内客户信息列表中的其他客户的最少衣着识别特征组合，所述特征位置信息为营业厅内特征物与客户的相对位置信息。

具体地，所述控制模块100提取衣着识别特征和性别特征生成客户识别信息，所述最简识别特征为相应客户衣着识别特征的子集，比如，客户信息列表中只有两条客户提醒信息，一条为{(005号)，(男士)，(黑色帽子、白色上衣、黑色裤子、黑鞋子)}，另一条为{(006号)，(男士)，(白色上衣、黑色裤子、白色鞋子)}，则从两条客户提醒信息中提取的最简识别特征分别为“黑色帽子”和“白色鞋子”，所述最简识别特征便于在区分客户的基础上控制语音播放的长度；所述特征位置信息为营业厅内特征物与客户的相对位置信息，比如“等待区xx排座椅”、“左侧立柱旁边”、“取号机前面”等，控制模块100对客户实时位置信息计算其与营业厅内的特征物的相对位置信息，若以客户位置为中心，预设距离Pk为半径的范围内存在特征物，则从中选取与客户位置最近的特征物，生成对应的特征位置信息，反之，若预设范围内不存在特征物，则对应的特征位置信息为空。

具体地，智能音箱分级别分次播放提醒语音的具体方法如下：

S201：根据智能音箱位置和客户的距离确定播放音量；

S202：一级播放语音为基础提醒模板一与号码信息组合，二级播放语音为基础模板一、号码信息、最简识别特征、性别信息组合，三级播放语音为基础模板一、号码信息、最简识别特征、性别信息、特征位置信息组合，一至三级播放语音依次通过智能音箱播放预设次数；

S203:在所述步骤S202中，控制模块100通过采集相应位置图像并对客户动作进行识别，判断客户是否被语音提醒，若是，提前结束提醒流程并通知营业厅叫号系统；

S204:等待播放完成后结束提醒流程并通知营业厅叫号系统。

举例说明步骤S202中一至三级播放语音，基础提醒模板一为“请xx到xx好创口办理业务”，一级播放语音可为“请005号客户到1号创口办理业务”，级播放语音可为“请005号、黑色帽子、男士到1号创口办理业务”，三级播放语音可为“请005号、位于等待区第一排座椅、黑色帽子、男士到1号创口办理业务”，分级提醒防止客户记错号码或其他忽略自身号码的情况，也便于周边客户听到播放语音后对其进行提醒。

优选地，在所述步骤S202中，若特征位置信息为空，则不生成三级播放语音，一、二级播放语音依次播放。

更进一步地，在所述步骤S202和S203中，若一至三级播放语音播放完成，控制模块100判断客户仍未被提醒，则进行二次分级提醒，具体方法如下：

S2031：控制模块100检索室内客户信息列表，查询预设距离范围P1内是否存在邻近客户，若是，跳转到步骤S2032，若否，跳转到步骤S204；

S2032：控制模块100选取距离最近的邻近客户，获取其语音提醒关键词，分级别分次播放提醒语音，一级播放语音为基础提醒模板二、邻近客户号码信息与目标客户的号码信息、最简识别特征、性别信息组合，二级播放语音为邻近客户号码信息、最简识别特征、性别信息与目标客户号码信息、最简识别特征、性别信息组合，依次播放一、二级播放语音预设次数。

所述步骤S2031中，所述预设距离范围P1指以目标客户的位置为中心，预设距离R1为半径的范围，在所述步骤S2032的过程中，控制模块100仍然执行步骤S203、S204的操作，即通过采集相应位置图像并对客户动作进行识别，判断客户是否被语音提醒，若是，提前结束提醒流程并通知营业厅叫号系统，若客户一直未被提醒，播放完成后结束提醒流程并通知营业厅叫号系统，基础提醒模板二可为“请xx提醒xx到xx号窗口办理业务”。

具体地，所述日常语音播报的具体方法为：

所述控制模块100周期性检索室内客户信息列表，生成客户位置分布信息，根据客户位置分布信息在语音播放模块300中选择适宜位置和数量的智能音箱播放日常语音，控制模块中预存有每个智能音箱的适宜播放范围，将各个智能音箱的适宜播放范围与客户位置分布拓扑比对，选取能够覆盖所有客户位置且数量最少的智能音箱组合。

优选地，若正在进行日常语音播报的智能音箱中存在与步骤S200选取的智能音箱距离小于预设干扰距离P2的智能音箱，则停止相应智能音箱的日常语音播报，防止干扰叫号指引提醒流程，若包括骤S200选取的智能音箱正在播放日常语音的情况，则应立即停止日常播放并进行叫号指引提醒。

具体地，所述提醒模块400包括自适应服务牌翻转机构和评价机构，所述自适应服务牌翻转机构包括基座1和指示面板2，所述基座1四周侧壁上开设有安装环槽101，所述安装环槽101内嵌设有传送带3，安装环槽101顶壁和底壁上开设有环形的限位滑槽102，所述限位滑槽102内滑动设置有两个移动检测机构4，所述移动检测机构4与传送带3活动连接，基座1顶部嵌设有转动电机5，指示面板2设置于转动电机5的输出轴顶部末端，所述评价机构包括遮蔽罩6和设置于遮蔽罩6内腔中的评价按钮7，所述基座1内部嵌设有与传送带3、移动检测机构4、转动电机5、评价按钮7电连接的分控器，基座内还嵌设有报警器，基座一侧设置有控制按钮11，所述报警器、控制按钮11与分控器电连接。

具体地，所述移动检测机构4包括滑设于限位滑槽102内的滑动块11，所述滑动块11靠近传送带3的一侧垂设有伸缩机构43，所述伸缩机构43的伸缩轴末端连接有动摩擦片44，所述传送带3的带体上环设有摩擦带31，滑动块11远离传送带3的一侧设置有超声波传感器42。

两个超声波传感器42中，其中一个超声波传感器42用于监测服务人员离座，当服务人员离座时，通知分控器，分控器控制转动电机5转动，进而带动指示面板2翻面，使标有“暂停服务”字样的一面朝向大厅(另一面标有“正在服务”)，另一个超声波传感器42用于监测客户，当距离服务窗口预设距离P5范围内存在客户时，若另一个超声波传感器42监测到服务人员离座，分控器控制报警器报警以提醒服务人员，防止服务人员离座时正好有客户靠近服务窗口。

所述传送带3与移动检测机构4活动连接，便于分别调整两个超声波传感器42的位置和朝向，当需要调整某个超声波传感器42时，分控器控制相应移动检测机构4的伸缩机构43的伸缩轴伸长，带动所述动摩擦片44与摩擦带31抵触，分控器控制传送带3移动，进而带动相应移动检测机构4移动，当调整好位置后，分控器控制传送带3停止，相应伸缩机构43的伸缩轴缩短，使动摩擦片44与摩擦带31脱离。

所述评价评价按钮7与分控器连接，其数量不限，用于通过分控器向控制模块上传评价信号。

所述分控器可为单片机，所述伸缩机构43可为电缸，所述控制模块为上位服务器，所述上位服务器上部署设置有控制程序和图像识别程序。

以上仅为本申请的优选实施例而已，并不用于限制本申请，对于本领域的技术人员来说，本申请可以有各种更改和变化。凡在本申请的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本申请的保护范围之内。

上述虽然结合附图对本申请的具体实施方式进行了描述，但并非对本申请保护范围的限制，所属领域技术人员应该明白，在本申请的技术方案的基础上，本领域技术人员不需要付出创造性劳动即可做出的各种修改或变形仍在本申请的保护范围以内。