基于线上会议的画板生成方法和装置、设备、存储介质

技术领域

本申请涉及人工智能和金融科技技术领域，尤其涉及一种基于线上会议的画板生成方法和装置、设备、存储介质。

背景技术

日常工作和生活中，通常是基于面对面的沟通，如传统的销售、问诊、工作会议等，以传统的保险销售为例，保险代理人通常需要与客户线下见面，花费大量时间和成本呈现并解释保险产品的建议书。然而，受天气影响(例如台风、洪水等)、地理位置影响(例如相隔十万八千里)、环境影响(例如疾病传播)等，保险代理人不便于与客户进行面对面的会面，从而影响保险销售。

发明内容

本申请实施例的主要目的在于提出一种基于线上会议的画板生成方法和装置、设备、存储介质，便于线上会议对所展示的内容进行讲解。

为实现上述目的，本申请实施例的第一方面提出了一种基于线上会议的画板生成方法，所述方法包括：

对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据；

获取操作请求；

基于所述操作请求识别当前屏幕操作；

基于所述当前屏幕操作对所述当前屏幕数据进行内容补充，得到当前绘制数据；

基于所述当前屏幕数据和所述当前绘制数据进行画板生成，得到目标画板数据；

通过所述线上会议展示所述目标画板数据。

在一些实施例，所述当前屏幕操作包括当前手势操作，所述基于所述当前屏幕数据和所述当前绘制数据进行画板生成，得到目标画板数据，包括：

获取所述当前手势操作的时间信息，得到操作时间和操作时长；

对所述当前屏幕数据和所述当前绘制数据进行关联处理，得到素材数据；

根据所述操作时间和所述和操作时长对所述素材数据进行画板绘制，得到所述目标画板数据。

在一些实施例，所述获取操作请求，包括：

获取由客户端触发的控制请求；

根据所述控制请求对所述客户端进行授权；

获取所述客户端在授权后发出的操作申请；

基于所述操作申请获取所述客户端的操作，得到所述操作请求。

在一些实施例，所述线上会议设有聊天机器人，基于所述当前屏幕数据和所述当前绘制数据进行画板生成，得到目标画板数据之后，所述方法还包括：

将所述目标素材数据发送给所述聊天机器人；

从所述线上会议获取讲解端与所述客户端之间的讨论数据，并将所述讨论数据发送给所述聊天机器人；

通过所述聊天机器人对所述目标素材数据进行解析，得到素材解析数据；

所述聊天机器人基于预先存储的原始客户信息、所述讨论数据和所述素材解析数据向所述客户端进行智能应答。

在一些实施例，所述聊天机器人基于预先存储的原始客户信息、所述讨论数据和所述素材解析数据向所述客户端进行智能应答，包括：

所述聊天机器人对所述原始客户信息进行特征提取，得到原始客户特征；

所述聊天机器人对所述讨论数据进行语义分析，得到讨论语义特征；

所述聊天机器人对所述素材解析数据进行素材特征提取，得到素材特征；

所述聊天机器人对所述原始客户特征、所述讨论语义特征、所述素材特征进行特征融合，得到融合特征；

所述聊天机器人根据所述融合特征向所述客户端进行智能应答。

在一些实施例，所述聊天机器人根据所述融合特征向所述客户端进行智能应答，包括：

所述聊天机器人根据所述融合特征从预设知识库筛选出候选应答数据；

所述聊天机器人根据所述候选应答数据进行答案拼接，得到当前答复数据；

所述聊天机器人根据所述融合特征对预设的原始讲解数据进行调整，得到当前讲解数据；

所述聊天机器人基于所述当前答复数据和所述当前讲解数据向所述客户端进行智能应答。

在一些实施例，所述对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据，包括：

对所述线上会议当前所展示的屏幕内容进行截图处理，得到当前屏幕图像；

对所述当前屏幕图像进行文字识别，得到屏幕文字内容；

对所述屏幕文字内容进行解析，得到所述当前屏幕数据。

为实现上述目的，本申请实施例的第二方面提出了一种基于线上会议的画板生成装置，所述装置包括：

屏幕内容识别模块，用于对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据；

操作请求获取模块，用于获取操作请求；

操作识别模块，用于基于所述操作请求识别当前屏幕操作；

内容补充模块，用于基于所述当前屏幕操作对所述当前屏幕数据进行内容补充，得到当前绘制数据；

画板生成模块，用于基于所述当前屏幕数据和所述当前绘制数据进行画板生成，得到目标画板数据；

画板数据展示模块，用于通过所述线上会议展示所述目标画板数据。

为实现上述目的，本申请实施例的第三方面提出了一种电子设备，所述电子设备包括存储器和处理器，所述存储器存储有计算机程序，所述处理器执行所述计算机程序时实现上述第一方面所述的方法。

为实现上述目的，本申请实施例的第四方面提出了一种存储介质，所述存储介质为计算机可读存储介质，所述存储介质存储有计算机程序，所述计算机程序被处理器执行时实现上述第一方面所述的方法。

本申请实施例提出的基于线上会议的画板生成方法和装置、设备、存储介质,其通过对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据，基于操作请求识别当前屏幕操作，并基于当前屏幕操作对当前屏幕数据进行内容补充，得到当前绘制数据，再基于当前屏幕数据和当前绘制数据进行画板生成，得到目标画板数据，并通过线上会议展示目标画板数据，从而讲解人可以远程向客户讲解目标画板数据，不需要拘泥于面对面沟通，方便讲解人和用户进行远程沟通交流，提升讲解效率。

附图说明

图1是本申请实施例提供的基于线上会议的画板生成方法的流程图；

图2是图1中的步骤101的流程图；

图3是图1中的步骤102的流程图；

图4是图1中的步骤105的流程图；

图5是本申请实施例提供的基于线上会议的画板生成方法的另一流程图；

图6是图5中的步骤504的流程图；

图7是图6中的步骤605的流程图；

图8是本申请实施例提供的基于线上会议的画板生成装置的结构示意图；

图9是本申请实施例提供的电子设备的硬件结构示意图。

具体实施方式

为了使本申请的目的、技术方案及优点更加清楚明白，以下结合附图及实施例，对本申请进行进一步详细说明。应当理解，此处所描述的具体实施例仅用以解释本申请，并不用于限定本申请。

需要说明的是，虽然在装置示意图中进行了功能模块划分，在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于装置中的模块划分，或流程图中的顺序执行所示出或描述的步骤。说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。

除非另有定义，本文所使用的所有的技术和科学术语与属于本申请的技术领域的技术人员通常理解的含义相同。本文中所使用的术语只是为了描述本申请实施例的目的，不是旨在限制本申请。

首先，对本申请中涉及的若干名词进行解析：

人工智能(artificial intelligence，AI)：是研究、开发用于模拟、延伸和扩展人的智能的理论、方法、技术及应用系统的一门新的技术科学；人工智能是计算机科学的一个分支，人工智能企图了解智能的实质，并生产出一种新的能以人类智能相似的方式做出反应的智能机器，该领域的研究包括机器人、语言识别、图像识别、自然语言处理和专家系统等。人工智能可以对人的意识、思维的信息过程的模拟。人工智能还是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。

自然语言处理(natural language processing，NLP)：NLP用计算机来处理、理解以及运用人类语言(如中文、英文等)，NLP属于人工智能的一个分支，是计算机科学与语言学的交叉学科，又常被称为计算语言学。自然语言处理包括语法分析、语义分析、篇章理解等。自然语言处理常用于机器翻译、手写体和印刷体字符识别、语音识别及文语转换、信息意图识别、信息抽取与过滤、文本分类与聚类、舆情分析和观点挖掘等技术领域，它涉及与语言处理相关的数据挖掘、机器学习、知识获取、知识工程、人工智能研究和与语言计算相关的语言学研究等。

日常工作和生活中，通常是基于面对面的沟通，如传统的销售、问诊、工作会议等，以传统的保险销售为例，保险代理人通常需要与客户线下见面，花费大量时间和成本呈现并解释保险产品的建议书；以问诊为例，医生通常是与患者面对面进行问诊，或者医生通常是到达现场进行问诊指导。然而，受天气影响(例如台风、洪水等)、地理位置影响(例如相隔十万八千里)、环境影响(例如疾病传播)等，保险代理人不便于与客户进行面对面的会面，从而影响保险销售。

基于此，本申请实施例提供了一种基于线上会议的画板生成方法和装置、设备、存储介质，旨在便于线上会议进行讲解，提高讲解效率，提升用户体验。

本申请实施例提供的基于线上会议的画板生成方法和装置、设备、存储介质，具体通过如下实施例进行说明，首先描述本申请实施例中的基于线上会议的画板生成方法。

本申请实施例可以基于人工智能技术对相关的数据进行获取和处理。其中，人工智能(Artificial Intelligence，AI)是利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能，感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。

人工智能基础技术一般包括如传感器、专用人工智能芯片、云计算、分布式存储、大数据处理技术、操作/交互系统、机电一体化等技术。人工智能软件技术主要包括计算机视觉技术、机器人技术、生物识别技术、语音处理技术、自然语言处理技术以及机器学习/深度学习等几大方向。

本申请实施例提供的基于线上会议的画板生成方法，涉及人工智能技术领域。本申请实施例提供的基于线上会议的画板生成方法可应用于终端中，也可应用于服务器端中，还可以是运行于终端或服务器端中的软件。在一些实施例中，终端可以是智能手机、平板电脑、笔记本电脑、台式计算机等；服务器端可以配置成独立的物理服务器，也可以配置成多个物理服务器构成的服务器集群或者分布式系统，还可以配置成提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、中间件服务、域名服务、安全服务、CDN以及大数据和人工智能平台等基础云计算服务的云服务器；软件可以是实现基于线上会议的画板生成方法的应用等，但并不局限于以上形式。

本申请可用于众多通用或专用的计算机系统环境或配置中。例如：个人计算机、服务器计算机、手持设备或便携式设备、平板型设备、多处理器系统、基于微处理器的系统、置顶盒、可编程的消费电子设备、网络PC、小型计算机、大型计算机、包括以上任何系统或设备的分布式计算环境等等。本申请可以在由计算机执行的计算机可执行指令的一般上下文中描述，例如程序模块。一般地，程序模块包括执行特定任务或实现特定抽象数据类型的例程、程序、对象、组件、数据结构等等。也可以在分布式计算环境中实践本申请，在这些分布式计算环境中，由通过通信网络而被连接的远程处理设备来执行任务。在分布式计算环境中，程序模块可以位于包括存储设备在内的本地和远程计算机存储介质中。

需要说明的是，在本申请的各个具体实施方式中，当涉及到需要根据用户个人信息、用户语音、用户行为等数据，用户历史数据以及用户属性信息等与用户身份或特性相关的数据进行相关处理时，都会先获得用户的许可或者同意，而且，对这些数据的收集、使用和处理等，都会遵守相关法律法规和标准。此外，当本申请实施例需要获取用户的敏感个人信息时，会通过弹窗或者跳转到确认页面等方式获得用户的单独许可或者单独同意，在明确获得用户的单独许可或者单独同意之后，再获取用于使本申请实施例能够正常运行的必要的用户相关数据。

图1是本申请实施例提供的基于线上会议的画板生成方法的一个可选的流程图，图1中的方法可以包括但不限于包括步骤101至步骤106。

步骤101，对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据；

步骤102，获取操作请求；

步骤103，基于操作请求识别当前屏幕操作；

步骤104，基于当前屏幕操作对当前屏幕数据进行内容补充，得到当前绘制数据；

步骤105，基于当前屏幕数据和当前绘制数据进行画板生成，得到目标画板数据；

步骤106，通过线上会议展示目标画板数据。

本申请实施例所示意的步骤101至步骤106，通过对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据，基于操作请求识别当前屏幕操作，并基于当前屏幕操作对当前屏幕数据进行内容补充，得到当前绘制数据，再基于当前屏幕数据和当前绘制数据进行画板生成，得到目标画板数据，并通过线上会议展示目标画板数据，从而讲解端可以远程向客户端讲解目标画板数据，不需要拘泥于面对面沟通，方便讲解人和客户进行远程沟通交流，提升讲解效率。

线上会议是一种多媒体会议系统，可以是音频会议，也可以是音视频会议，其中，音视频会议是指在会议上可以进行音频交互也可以进行视频交互。

该基于线上会议的画板生成方法可以用于远程线上交流，例如线上授课、线上会议等。以金融场景为例，该基于线上会议的画板生成方法可以应用于：保险代理人通过线上投屏的方式向投保客户讲解投保建议书方案，或者理财顾问通过线上投屏的方式向理财客户讲解理财规划方案。以医疗场景为例，该基于线上会议的画板生成方法可以应用于：医生通过线上投屏的方式向患者或者其他医生讲解问诊结果。

传统的保险销售，保险代理人通常需要与客户线下面对面沟通，保险代理人需要花费大量时间和成本解释、呈现保险产品的建议书，且保险代理人和客户可能位于不同的地理位置，或者保险代理人因其他原因无法方便地与客户进行面对面的会面而错过及时与客户沟通；相比于传统面对面的保险销售，本申请实施例可以减少保险代理人与客户之间的沟通成本，提高沟通效率，不需要拘泥于面对面沟通。

在一应用场景，讲解端和客户端在各自本地端登录线上会议系统，通过线上会议，讲解端和客户端之间可以进行线上交互，例如可以进行音频交互也可以进行视频交互。

请参阅图2，在一些实施例的步骤101，可以包括但不限于包括：

步骤201，对线上会议当前所展示的屏幕内容进行截图处理，得到当前屏幕图像；

步骤202，对当前屏幕图像进行文字识别，得到屏幕文字内容；

步骤203，对屏幕文字内容进行解析，得到当前屏幕数据。

在一些实施例的步骤201，线上会议可以通过智能电子装置进行运行，该智能电子装置可以包括触摸屏，通过该触摸屏可以接收操作人员的手势触屏操作。

在金融场景下，线上会议当前所展示的屏幕内容可以是保险投保建议书方案的内容，也可以是理财规划方案的内容。对线上会议当前所展示的屏幕内容进行截图处理，可以得到当前屏幕图像，例如，若线上会议当前所展示的屏幕内容是保险投保建议书方案的内容，则通过截图得到的当前屏幕图像是包含保险投保建议书方案的图像；当线上会议当前所展示的屏幕内容是理财规划方案的内容，则通过截图得到的当前屏幕图像是包含保险投保建议书方案的图像。

在一些实施例，可以设置截图周期进行截图处理，例如可以设置每隔30秒进行截图；也可以根据屏幕停留的时长确定是否截图，例如，可以设置为：若在当前屏幕的停留时间超过20秒，则进行截图处理；还可以设置为：基于操作人员的触发启动截图处理，例如，操作人员需要进行批注或者绘制时，可以触发截图处理。

表1

在一些实施例的步骤202，可以基于光学字符识别(Optical CharacterRecognition,OCR)原理对当前屏幕图像进行文字识别，得到屏幕文字内容。在金融场景下，屏幕文字内容可以是保险投保建议书方案的内容，也可以是理财规划方案的内容。在其他应用场景，屏幕文字内容也可以是授课内容。

在一些实施例的步骤203，对屏幕文字内容进行解析包括对屏幕文字内容的文字解析和对版面信息的解析，得到当前屏幕数据，如表1所示，为保险投保建议书方案的当前屏幕数据，该当前屏幕数据涉及到一对夫妻，其中，该夫妻中的男主人是30岁，女主人是28岁；该夫妻的投保需求是：医疗、意外、储蓄增值。给该夫妻的保险方案是：第一保险产品A和第二保险产品B。该当前屏幕数据涉及到的理赔服务包括：理赔程序、理赔所需材料、理赔时限保证。该当前屏幕数据涉及到的综合分析是：第一保险产品A可以很好地补充新的医疗改革大病封顶的政策，通过投保第一保险产品A，避免个人巨额医疗费用的支出；第二保险产品B兼具保障、投资，资金增值安全的特点，风险很小。

在一些实施例，步骤102的操作请求可以由讲解端触发；在另一些实施例，步骤102的操作请求可以由客户端触发。请参阅图3，以客户端触发操作请求为例进行说明，步骤102可以包括但不限于包括：

步骤301，获取由客户端触发的控制请求；

步骤302，根据控制请求对客户端进行授权；

步骤303，获取客户端在授权后发出的操作申请；

步骤304，基于操作申请获取客户端的操作，得到操作请求。

在一些实施例的步骤301，由客户端触发控制请求，例如，客户端可以在操作界面上通过点击“我要控制”触发控制请求，该控制请求传输至讲解端，该控制请求携带客户端的客户信息和会议房间信息。在金融科技场景下，客户端可以是投保人，客户端也可以是理财人。在其他场景下，客户端可以是会议参与方，讲解端是会议主持人。

在一些实施例的步骤302，讲解端接收到客户端发出的控制请求后可以对客户端进行授权，以允许客户端进行操作。例如，讲解端可以在操作界面上通过点击“同意”对客户端进行授权。

在一些实施例的步骤303，客户端在被讲解端授权后可以进行相应的操作，以发出操作申请。例如，客户端可以进行标注操作，从而发出标注操作请求；客户端还可以进行绘制操作，从而发出绘制操作请求。

在一些实施例的步骤304，获取客户端进行标注的具体操作，得到操作请求。

通过步骤301至步骤304，讲解端可以对客户端的控制请求进行授权，客户端在被讲解端授权后可以进行相应的操作，以实现标注操作、绘制操作等。

在一应用场景，客户可以在操作界面上点击“我要控制”屏幕，即可向讲解端申请控制权限，并向讲解端实时发送客户的信息和会议房间信息；客户端获得控制权后可在屏幕上实时标注、绘图。

在其他的应用场景，也可以由讲解端触发操作请求，讲解端触发的操作请求，由线上会议的后台直接进行授权，具体包括：

讲解端触发控制请求；

线上会议的后台基于控制请求对讲解端进行授权；

讲解端在授权后发出操作申请；

基于操作申请获取讲解端的操作，得到操作请求。

讲解端可以进行标注操作，从而发出标注操作请求；讲解端还可以进行绘制操作，从而发出绘制操作请求。

本申请实施例中，讲解端或者客户端都可以对当前屏幕内容进行标注，讲解端或者客户端也都可以对当前屏幕内容进行绘制。

在一些实施例的步骤103，通过线上会议的操作界面，可以识别当前屏幕操作，例如：若讲解端或者客户端在线上会议的操作界面触发标注操作，则可以识别到当前屏幕操作为标注操作；若讲解端或者客户端在线上会议的操作界面触发绘制操作，则可以识别到当前屏幕操作为绘制操作。

在一些实施例的步骤104至少包括以下步骤之一：

基于当前屏幕操作对当前屏幕内容进行标注；

基于当前屏幕操作对当前屏幕内容进行绘制。

内容补充包括标注和绘制中至少一种，通过对当前屏幕内容进行标注和绘制中的至少一种操作，可以得到当前绘制数据。当前绘制数据可以由讲解端或者客户端进行内容补充得到，当前绘制数据也可以由讲解端和客户端共同进行内容补充得到。当前绘制数据可以只包含进行标注的数据，也可以只包含绘制的数据，还可以包括既有标注又有绘制的数据。

在一些实施例，运行线上会议的智能电子装置包括触摸屏，可以用于接收操作人员的手势触控操作。当前屏幕操作包括当前手势操作，请参阅图4，在一些实施例的步骤105，可以包括但不限于包括：

步骤401，获取当前手势操作的时间信息，得到操作时间和操作时长；

步骤402，对当前屏幕数据和当前绘制数据进行关联处理，得到素材数据；

步骤403，根据操作时间和操作时长对素材数据进行画板绘制，得到目标画板数据。

标注操作、绘制操作可以通过在智能电子装置进行手势操作实现，当前手势操作可以是标注操作，也可以是绘制操作。

在一些实施例的步骤401，当前手势操作的时间信息包括操作时间和操作时长，当前手势操作的具体操作与操作时间、操作时长紧密相关，因此，要进行绘制以生成画板，需要获取当前手势操作的操作时间和操作时长。

在一些实施例的步骤402，当前绘制数据是基于对当前屏幕数据进行内容补充得到的数据，需要对当前屏幕数据和当前绘制数据进行关联处理，以得到素材数据，例如，当前屏幕数据所展示的是“理赔所需材料”的相关说明，当前绘制数据是“理赔所需材料”中证明文件的解释，将“理赔所需材料”中证明文件的解释与“理赔所需材料”进行关联，得到素材数据。

在一些实施例的步骤403，跟随操作人员的当前手势操作的操作时间和操作时长对素材数据进行画板绘制，得到目标画板数据。

通过步骤401至步骤403，跟随当前手势操作的操作时间和操作时长对素材数据进行画板生成，可以得到目标画板数据，该目标画板数据可以用于向客户展示，讲解人可以结合目标画板数据向客户讲解，可以更加直观、清楚地讲解，让用户更好地理解讲解人的讲解，提升用户体验。

在一应用场景，网络视图(Webview)将实时标注、绘图得到的当前绘制数据，与当前屏幕数据进行关联处理后形成新的画板内容，从而进行画板绘制，以得到目标画板数据，通过H5(HTML5)再实时返目标画板数据至线上会议，从而讲解人可以收到客户端同步的标注、绘制的目标画板数据，进行重点讲解，提升用户体验。

在一些实施例，线上会议设置有聊天机器人，该聊天机器人可以为ChatGPT(ChatGenerative Pre-trained Transformer)，ChatGPT具有类人特性，能够通过理解和学习人类的语言获得与用户对话的能力，ChatGPT还可以根据对话的上下文与用户进行交流互动，还可以实现翻译、搜索、情绪分析、意图识别等。

请参阅图5，在步骤105之后，该基于线上会议的画板生成方法还包括：

步骤501，将目标素材数据发送给聊天机器人；

步骤502，从线上会议获取讲解端与客户端之间的讨论数据，并将讨论数据发送给聊天机器人；

步骤503，通过聊天机器人对目标素材数据进行解析，得到素材解析数据；

步骤504，聊天机器人基于预先存储的原始客户信息、讨论数据和素材解析数据向客户端进行智能应答。

在一些实施例的步骤501，将步骤105得到的目标素材数据发送给聊天机器人，从而聊天机器人可以获得目标素材数据。在一应用场景，可以根据实际需要开启聊天机器人，在开启聊天机器人后，将目标素材数据发送给聊天机器人，从而聊天机器人可以获取到目标素材数据。

在一些实施例的步骤502，线上会议可以开启录音录像，从而得到录音数据、录像数据、或者录音录像数据；线上会议也可以开启录屏，从而得到录屏数据；线上会议设置有聊天功能，讲解端和客户端之间可以进行聊天，例如发送文字信息进行交流、讨论，将讲解端和客户端之间进行讨论、交流的数据作为讨论数据，讨论数据还可以包括录音数据、录像数据、录音录像数据、录屏数据的至少一种。将该讨论数据发送给聊天机器人。

在一些实施例的步骤503，聊天机器人可以对目标素材数据进行解析，得到素材解析数据，通过素材解析数据，聊天机器人可以知道讲解端和客户端之间讨论的话题，可以知道客户端咨询的问题，也可以知道目标素材数据中所标注或者所绘制的全部内容，还可以知道目标素材数据中所标注或者所绘制的重点内容等。

在一些实施例的步骤504，预先获取到的原始客户信息也会发送给聊天机器人，从而聊天机器人可以根据原始客户信息、讨论数据和素材解析数据，迅速向客户端进行智能应答，相比人工应答，聊天机器人可以迅速做出反应，并基于预先获取到的海量数据，可以做出更加符合客户端需求的应答。

原始客户信息可以包括客户基本信息和客户业务信息，其中，客户基本信息可以包括但不限于包括客户的姓名、年龄、性别、家庭情况等，其中，家庭情况可以包括客户的家庭成员、通信地址等，客户业务信息可以包括但不限于包括客户的经济水平、所涉及的业务情况等，所涉及的业务情况可以是客户所购买的保险产品或者理财产品等。在一应用场景，客户端的姓名为张三，性别为男，年龄为30岁，已婚，年薪30万，身体健康状况为良好，已购买第一保险产品A。

上述步骤501至步骤504可以在步骤105之后、步骤106之前执行，也可以在步骤106之后执行，还可以在步骤105之后，与步骤106同步执行，本申请实施例对此不做限定。

本申请实施例的步骤501至步骤504，可以利用聊天机器人向客户端进行智能应答，提高应答的效率和准确率，提升客户体验。

请参阅图6，在一些实施例的步骤504可以包括但不限于包括：

步骤601，聊天机器人对原始客户信息进行特征提取，得到原始客户特征；

步骤602，聊天机器人对讨论数据进行语义分析，得到讨论语义特征；

步骤603，聊天机器人对素材解析数据进行素材特征提取，得到素材特征；

步骤604，聊天机器人对原始客户特征、讨论语义特征、素材特征进行特征融合，得到融合特征；

步骤605，聊天机器人根据融合特征向客户端进行智能应答。

在一些实施例的步骤601，基于聊天机器人对原始客户信息进行特征提取，从而可以得到客户的原始客户特征，该原始客户特征包括用于表征客户属性的客户属性特征，例如性别特征、年龄特征等；该原始客户特征也可以包括用于表征客户所购买的业务产品的产品特征，例如保险产品特征、理财产品特征等。

在一些实施例的步骤602，基于聊天机器人对讨论数据进行语义分析，以得到讨论数据的讨论语义特征，例如用于表征讲解端和客户端之间所讨论的主题的主题特征，在一应用场景，主题特征可以是：三十岁投保；在另一场景，主题特征可以是：年薪30万理财。

在一些实施例的步骤603，基于聊天机器人对素材解析数据进行素材特征提取，以得到素材特征，该素材特征包括了所标注、绘制的特征，也包括了客户端所关注的特征，在一应用场景，素材特征可以是理赔所需要材料就，也可以是理赔时限保证。

在一些实施例的步骤604，基于聊天机器人对原始客户特征、讨论语义特征、素材特征进行特征融合，以得到融合特征，该融合特征融合了原始客户特征、讨论语义特征、素材特征，可以清楚完整地表征客户的基本情况、需求、关注点等。

在一些实施例的步骤605，聊天机器人可以基于融合特征向客户端进行智能应答。具体地，请参阅图7，在一些实施例的步骤605可以包括但不限于包括：

步骤701，聊天机器人根据融合特征从预设知识库筛选出候选应答数据；

步骤702，聊天机器人根据候选应答数据进行答案拼接，得到当前答复数据；

步骤703，聊天机器人根据融合特征对预设的原始讲解数据进行调整，得到当前讲解数据；

步骤704，聊天机器人基于当前答复数据和当前讲解数据向客户端进行智能应答。

在一些实施例的步骤701，预设知识库中预先存储了大量的知识素材，该包括预设问题以及对应预设问题的答案，该知识素材还包括相关知识点，可以用于与用户交谈。在一应用场景，融合特征涉及到：客户端张三，性别为男，年龄为30岁，已婚，年薪30万，身体健康状况为良好，已购买第一保险产品A，张三目前比较关注的是“当前还可以购买哪些类型的保险产品”；基于上述融合特征，聊天机器人预设知识库筛选出的候选应答数据包括：张三当前还可以购买第二保险产品B；若融合特征还涉及到年薪30万理财的方案，则聊天机器人预设知识库筛选出的候选应答数据还包括：购买理财产品C。

在一些实施例的步骤702，若客户端涉及多个需求，则聊天机器人将对应多个需求的候选应答数据进行答案拼接，从而得到当前答复数据。以上述实施例为例，若客户张三目前关注“当前还可以购买哪些类型的保险产品”和关注年薪30万理财的方案，则当前答复数据包括：张先生您好，基于您当前的家庭情况和经济状况，建议您购买第二保险产品B和购买理财产品C。

在一些实施例的步骤703，原始讲解数据是讲解端向客户端展示的数据，步骤101中线上会议当前所展示的屏幕内容来源于原始讲解数据，原始讲解数据可以是保险投保建议书方案，也可以是理财规划方案。将原始讲解数据发送给聊天机器人，聊天机器人根据融合特征对原始讲解数据进行调整，以更新原始讲解数据，从而得到当前讲解数据。在一应用场景，若给客户张三的原始讲解数据不涉及“年薪30万理财的方案”，而张三关注年薪30万理财的方案，则将“年薪30万理财的方案”的具体内容(例如购买理财产品C)补充到原始讲解数据中，从而得到当前讲解数据。

在一些实施例的步骤704，聊天机器人基于当前答复数据和当前讲解数据向客户端进行智能应答，从而聊天机器人可以辅助保险代理人一边跟用户交流，一边根据用户需求调整讲解数据，并将调整后的当前讲解数据反馈给用户。

通过步骤701至步骤704，借助于聊天机器人与用户交流，可以减轻讲解人的工作量，并且可以及时、准确地回应用户，提升用户体验。

在一些实施例，在步骤105之后，该基于线上会议的画板生成方法还包括：将目标素材数据存储至目标服务器。在该实施例，目标素材数据只需要存储至目标服务器，不需要存在本地，讲解端和客户端都可以从目标服务器拉取相关数据。在其他的实施例，讲解端也可以将目标素材数据存储在本地，同时目标素材数据存储至目标服务器；客户端也可以将目标素材数据存储在本地，同时目标素材数据存储至目标服务器。

在一些实施例的步骤106，通过线上会议展示目标画板数据，讲解端和客户端都可以在各自的智能电子装置阅览目标素材数据，从而讲解端可以向客户端讲解目标素材数据，对于客户端所关注的内容，讲解人可以重点讲解，方便讲解人与用户交流沟通。在讲解时，聊天机器人还可以演绎用户角色，模拟不同的保险方案和情景，让用户感同身受地理解和比较各保险方案可能带来的受益程度，方便用户及时做出反馈，例如在金融科技场景，以风险案例为例进行说明，聊天机器人演绎一位50岁左右的太太，保险代理人在同屏讲解时通过与聊天机器人对话交互为用户展示可能遇到的风险，并为聊天机器人制定方案解决风险，通过模拟不同的保险方案和情景，让用户感同身受地理解和比较各保险方案可能带来的受益程度，方便用户及时做出反馈。

本申请实施例提供的基于线上会议的画板生成方法，其通过对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据，基于操作请求识别当前屏幕操作，并基于当前屏幕操作对当前屏幕数据进行内容补充，得到当前绘制数据，再基于当前屏幕数据和当前绘制数据进行画板生成，得到目标画板数据，并通过线上会议展示目标画板数据，从而讲解端可以远程向客户端讲解目标素材数据，不需要拘泥于面对面沟通，方便讲解人和客户进行远程沟通交流，提升讲解效率。此外，本申请实施例利用聊天机器人与用户交流，聊天机器人辅助讲解人与用户交流，可以减轻讲解人的工作量，并且可以及时、准确地回应用户，提升用户体验。

请参阅图8，本申请实施例还提供一种基于线上会议的画板生成装置，可以实现上述基于线上会议的画板生成方法，该装置包括：

屏幕内容识别模块，用于对线上会议当前所展示的屏幕内容进行识别，得到当前屏幕数据；

操作请求获取模块，用于获取操作请求；

操作识别模块，用于基于操作请求识别当前屏幕操作；

内容补充模块，用于基于当前屏幕操作对当前屏幕数据进行内容补充，得到当前绘制数据；

画板生成模块，用于基于当前屏幕数据和当前绘制数据进行画板生成，得到目标画板数据；

画板数据展示模块，用于通过线上会议展示目标画板数据。

在一些实施例中，屏幕内容识别模块，具体可以用于实现：

对线上会议当前所展示的屏幕内容进行截图处理，得到当前屏幕图像；

对当前屏幕图像进行文字识别，得到屏幕文字内容；

对屏幕文字内容进行解析，得到当前屏幕数据。

具体地，屏幕内容识别模块可以用于实现上述步骤201至步骤203，在此不再赘述。

在一些实施例中，操作请求获取模块，具体可以用于实现：

获取由客户端触发的控制请求；

根据控制请求对客户端进行授权；

获取客户端在授权后发出的操作申请；

基于操作申请获取客户端的操作，得到操作请求。

具体地，操作请求获取模块可以用于实现上述步骤301至步骤304，在此不再赘述。

在一些实施例中，画板生成模块，具体可以用于实现：

获取当前手势操作的时间信息，得到操作时间和操作时长；

对当前屏幕数据和当前绘制数据进行关联处理，得到素材数据；

根据操作时间和操作时长对素材数据进行画板绘制，得到目标画板数据。

具体地，画板生成模块可以用于实现上述步骤401至步骤403，在此不再赘述。

在一些实施例中，该基于线上会议的画板生成装置还用于实现：

将目标素材数据发送给聊天机器人；

从线上会议获取讲解端与客户端之间的讨论数据，并将讨论数据发送给聊天机器人；

通过聊天机器人对目标素材数据进行解析，得到素材解析数据；

聊天机器人基于预先存储的原始客户信息、讨论数据和素材解析数据向客户端进行智能应答。

具体地，基于线上会议的画板生成装置可以用于实现上述步骤501至步骤504，在此不再赘述。

在一些实施例中，基于线上会议的画板生成装置用于实现“聊天机器人基于预先存储的原始客户信息、讨论数据和素材解析数据向客户端进行智能应答”，具体包括：

聊天机器人对原始客户信息进行特征提取，得到原始客户特征；

聊天机器人对讨论数据进行语义分析，得到讨论语义特征；

聊天机器人对素材解析数据进行素材特征提取，得到素材特征；

聊天机器人对原始客户特征、讨论语义特征、素材特征进行特征融合，得到融合特征；

聊天机器人根据融合特征向客户端进行智能应答。

具体地，基于线上会议的画板生成装置可以用于实现上述步骤601至步骤605，在此不再赘述。

在一些实施例中，基于线上会议的画板生成装置用于实现“聊天机器人根据融合特征向客户端进行智能应答”，具体包括：

聊天机器人根据融合特征从预设知识库筛选出候选应答数据；

聊天机器人根据候选应答数据进行答案拼接，得到当前答复数据；

聊天机器人根据融合特征对预设的原始讲解数据进行调整，得到当前讲解数据；

聊天机器人基于当前答复数据和当前讲解数据向客户端进行智能应答。

具体地，基于线上会议的画板生成装置可以用于实现上述步骤701至步骤704，在此不再赘述。

该基于线上会议的画板生成装置的具体实施方式与上述基于线上会议的画板生成方法的具体实施例基本相同，在此不再赘述。

本申请实施例还提供了一种电子设备，电子设备包括存储器和处理器，存储器存储有计算机程序，处理器执行计算机程序时实现上述基于线上会议的画板生成方法。该电子设备可以为包括平板电脑、车载电脑等任意智能终端。

请参阅图9，图9示意了另一实施例的电子设备的硬件结构，电子设备包括：

处理器901，可以采用通用的CPU(CentralProcessingUnit，中央处理器)、微处理器、应用专用集成电路(ApplicationSpecificIntegratedCircuit，ASIC)、或者一个或多个集成电路等方式实现，用于执行相关程序，以实现本申请实施例所提供的技术方案；

存储器902，可以采用只读存储器(ReadOnlyMemory，ROM)、静态存储设备、动态存储设备或者随机存取存储器(RandomAccessMemory，RAM)等形式实现。存储器902可以存储操作系统和其他应用程序，在通过软件或者固件来实现本说明书实施例所提供的技术方案时，相关的程序代码保存在存储器902中，并由处理器901来调用执行本申请实施例的基于线上会议的画板生成方法；

输入/输出接口903，用于实现信息输入及输出；

通信接口904，用于实现本设备与其他设备的通信交互，可以通过有线方式(例如USB、网线等)实现通信，也可以通过无线方式(例如移动网络、WIFI、蓝牙等)实现通信；

总线905，在设备的各个组件(例如处理器901、存储器902、输入/输出接口903和通信接口904)之间传输信息；

其中处理器901、存储器902、输入/输出接口903和通信接口904通过总线905实现彼此之间在设备内部的通信连接。

本申请实施例还提供了一种存储介质，存储介质为计算机可读存储介质，该存储介质存储有计算机程序，该计算机程序被处理器执行时实现上述基于线上会议的画板生成方法。

存储器作为一种非暂态计算机可读存储介质，可用于存储非暂态软件程序以及非暂态性计算机可执行程序。此外，存储器可以包括高速随机存取存储器，还可以包括非暂态存储器，例如至少一个磁盘存储器件、闪存器件、或其他非暂态固态存储器件。在一些实施方式中，存储器可选包括相对于处理器远程设置的存储器，这些远程存储器可以通过网络连接至该处理器。上述网络的实例包括但不限于互联网、企业内部网、局域网、移动通信网及其组合。

本申请实施例提供的基于线上会议的画板生成方法和装置、设备、存储介质，其通过对线上会议当前所展示的屏幕内容进行识别，并基于操作请求识别当前屏幕操作，并基于当前屏幕操作对当前屏幕数据进行内容补充，再基于当前屏幕数据和当前绘制数据进行画板生成，并通过线上会议展示目标画板数据，从而讲解端可以远程向客户端讲解目标素材数据，不需要拘泥于面对面沟通，方便讲解人和客户进行远程沟通交流，提升讲解效率。此外，本申请实施例利用聊天机器人与用户交流，聊天机器人辅助讲解人与用户交流，可以减轻讲解人的工作量，并且可以及时、准确地回应用户，提升用户体验。

本申请实施例描述的实施例是为了更加清楚的说明本申请实施例的技术方案，并不构成对于本申请实施例提供的技术方案的限定，本领域技术人员可知，随着技术的演变和新应用场景的出现，本申请实施例提供的技术方案对于类似的技术问题，同样适用。

本领域技术人员可以理解的是，图中示出的技术方案并不构成对本申请实施例的限定，可以包括比图示更多或更少的步骤，或者组合某些步骤，或者不同的步骤。

以上所描述的装置实施例仅仅是示意性的，其中作为分离部件说明的单元可以是或者也可以不是物理上分开的，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。

本领域普通技术人员可以理解，上文中所公开方法中的全部或某些步骤、系统、设备中的功能模块/单元可以被实施为软件、固件、硬件及其适当的组合。

本申请的说明书及上述附图中的术语“第一”、“第二”、“第三”、“第四”等(如果存在)是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本申请的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

应当理解，在本申请中，“至少一个(项)”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，用于描述关联对象的关联关系，表示可以存在三种关系，例如，“A和/或B”可以表示：只存在A，只存在B以及同时存在A和B三种情况，其中A，B可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a，b或c中的至少一项(个)，可以表示：a，b，c，“a和b”，“a和c”，“b和c”，或“a和b和c”，其中a，b，c可以是单个，也可以是多个。

在本申请所提供的几个实施例中，应该理解到，所揭露的装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，上述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。

上述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。

另外，在本申请各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。上述集成的单元既可以采用硬件的形式实现，也可以采用软件功能单元的形式实现。

集成的单元如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的全部或部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括多指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本申请各个实施例的方法的全部或部分步骤。而前述的存储介质包括：U盘、移动硬盘、只读存储器(Read-Only Memory，简称ROM)、随机存取存储器(Random Access Memory，简称RAM)、磁碟或者光盘等各种可以存储程序的介质。

以上参照附图说明了本申请实施例的优选实施例，并非因此局限本申请实施例的权利范围。本领域技术人员不脱离本申请实施例的范围和实质内所作的任何修改、等同替换和改进，均应在本申请实施例的权利范围之内。