控制方法、装置、电子设备以及存储介质

技术领域

本发明实施例涉及医疗器械控制技术领域，尤其涉及一种控制方法、装置、电子设备以及存储介质。

背景技术

现有的技术方案的手术机器人为用户通过医生操作系统远程控制机器人进行手术操作，其中，医生操作系统包括3D的手术界面、2D的配置界面和手柄，脚踏板等多件设备。

在当前的系统设置下，医生需要在手术过程中设定医生操作系统相关设定时，需要离开3D视界，并离开手术操作系统操作设备，用手指在2D触控屏上进行相关设定，设定完成后，需要重新进入3D视界和将手套入操作柄继续进行手术。

现有的操作设备只能通过手柄以及脚踏板实现对手术的控制，对比配置界面的控制需要配置单独的控制装置；因此，手术以及配置的单独设置会增加手术过程中的操作复杂繁琐，影响手术的流畅性。

发明内容

本发明提供控制方法、装置、电子设备以及存储介质，以实现增加操作设备的操作便利性以及提高任务操作的效率。

第一方面，本发明实施例提供了一种控制方法，应用于操作设备，该方法包括：

监听对操作设备上的操作部件发送的触发信号；其中，所述触发信号在所述操作部件被操作时生成，包括触发类型以及触发参数；

基于所述触发信号中的触发类型和触发参数生成对应的操作信号，其中，所述操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制显示设备切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制对应的所述操作对象的状态；

将所述操作信号发送至对应的设备，以使所述设备执行所述操作信号，其中，所述设备包括显示设备和任务执行设备。

可选的，所述操作设备包括两个操作区域，各所述操作区域内设置有多个操作部件，

所述基于所述触发信号中的触发类型和触发参数生成对应的操作信号，包括：

基于第一操作区域内操作部件发送的第一触发信号，和/或，第二操作区域内操作部件发送的第二触发信号生成对应的操作信号。

可选的，所述基于第一操作区域内操作部件发送的第一触发信号，和/或，第二操作区域内操作部件发送的第二触发信号生成对应的操作信号，包括：

若在第一触发信号接收后的预设时间间隔内接收到所述第二触发信号，或者，在第二触发信号接收后的预设时间间隔内接收到所述第一触发信号，则基于所述第一触发信号、所述第二触发信号以及预设操作信号库确定对应的操作信号。

可选的，所述基于所述第一触发信号、所述第二触发信号以及预设操作信号库确定对应的操作信号，包括：

若所述预设操作信号库中匹配到所述第一触发信号、所述第二触发信号的组合操作信号，则将所述组合操作信号确定为对应的操作信号；

若所述预设操作信号库中未匹配到所述第一触发信号、所述第二触发信号的组合操作信号，则将所述第一触发信号和所述第二触发信号分别确定为所述第一操作区域和所述第二操作区域分别对应的操作信号。

可选的，所述操作设备包括至少两个子设备，各所述子设备上分别设置有多个操作部件，所述子设备基于操作部件发送的触发信号生成操作信号，并分别独立发送至对应的设备。

可选的，所述操作设备包括主设备和至少一个从设备，各所述主设备和所述从设备上分别设置有多个操作部件，所述从设备将触发信号发送至所述主设备，所述主设备用于基于各从设备发送的触发信号以及自身操作部件发送的触发信号生成操作信号。

可选的，所述信息显示界面包括2D显示界面和3D显示界面，其中，所述2D显示界面对应的操作对象包括显示界面中的各内容对象，所述3D显示界面对应的操作对象为任务执行设备。

可选的，所述2D显示界面包括配置界面。

第二方面，本发明实施例还提供了一种控制方法，应用于显示设备，该方法包括：

接收各操作设备发送的操作信号；

将任一操作设备发送的操作信号确定为目标操作信号，或者，基于至少两个操作设备发送的操作信号确定目标操作信号；

执行所述目标操作信号；其中，所述目标操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制所述信息显示界面内操作对象的状态。

可选的，所述操作设备为至少两个；

所述基于至少两个操作设备发送的操作信号确定目标操作信号，包括：

若在第一操作设备发送的第三操作信号接收后的预设时间间隔内接收到所述第二操作设备发送的第四操作信号，或者，在所述第四操作信号接收后的预设时间间隔内接收到所述第三操作信号，则基于所述第三操作信号、所述第四操作信号以及预设操作信号库确定目标操作信号。

可选的，所述基于所述第三操作信号、所述第四操作信号以及预设操作信号库确定目标操作信号，包括：

若所述预设操作信号库中匹配到所述第三操作信号、所述第四操作信号的组合操作信号，则将所述组合操作信号确定为目标操作信号；

若所述预设操作信号库中未匹配到所述第三操作信号、所述第四操作信号的组合操作信号，则将所述第三操作信号和所述第四操作信号分别确定为所述第一操作区域或所述第一设备，以及所述第二操作区域或所述第二设备分别对应的目标操作信号。

可选的，若所述目标操作信号包括对象切换信号；

相应的，所述执行所述目标操作信号，包括：

基于所述对象切换信号将所述信息显示界面在2D显示界面和3D显示界面之间切换；或者，

基于所述对象切换信号在所述3D显示界面的基础上增加显示所述2D显示界面，或，由所述2D显示界面和3D显示界面的混合界面切换至所述3D显示界面。

可选的，所述执行所述目标操作信号，还包括：

基于所述对象切换信号控制至少两个信道的开关状态，其中，所述至少两个信道分别用于传输所述2D显示界面和所述3D显示界面。

可选的，所述2D显示界面和3D显示界面的混合界面，包括：所述2D显示界面和3D显示界面的叠加显示形成的混合界面，或，所述2D显示界面和所述3D显示界面在显示界面中组合显示形成的混合界面。

第三方面，本发明实施例还提供了一种控制装置，应用于操作设备，该装置包括：

触发信号监听模块，用于监听对操作设备上的操作部件发送的触发信号；其中，所述触发信号在所述操作部件被操作时生成，包括触发类型以及触发参数；

操作信号生成模块，用于基于所述触发信号中的触发类型和触发参数生成对应的操作信号，其中，所述操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制显示设备切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制对应的所述操作对象的状态；

操作对象发送模块，用于将所述操作信号发送至对应的设备，以使所述设备执行所述操作信号，其中，所述设备包括显示设备和任务执行设备。

第四方面，本发明实施例还提供了一种控制装置，应用于显示设备，该装置包括：

操作信号接收模块，用于接收各操作设备发送的操作信号；

目标操作信号生成模块，用于将所述设备发送的操作信号确定为目标操作信号，或者，基于至少两个操作设备发送的操作信号确定目标操作信号；

目标操作信号执行模块，用于执行所述目标操作信号；其中，所述目标操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制所述信息显示界面内操作对象的状态。

第五方面，本发明实施例还提供了一种电子设备，所述电子设备包括：

一个或多个处理器；

存储装置，用于存储一个或多个程序，

当所述一个或多个程序被所述一个或多个处理器执行，使得所述一个或多个处理器实现如本发明任意实施例提供的控制方法。

第六方面，本发明实施例还提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现本发明任意实施例提供的控制方法。

本发明实施例的技术方案具体包括：监听对操作设备上的操作部件发送的触发信号，以使后续基于该触发信号生成对应的操作信号，其中，触发信号在该操作部件被操作时生成，具体触发信号包括触发类型以及触发参数；进一步的基于该触发信号中的触发类型以及触发参数生成对应的操作信号，其中，操作信号包括操作对象控制信号和对象切换信号，对象切换信号用于控制显示设备切换信息显示界面，以及触发信息显示界面对应的操作对象，操作对象控制信号用于控制对应的操作对象的状态；再一步的将操作信号发送至对应的设备，以使该设备执行该操作信号，其中，设备包括显示设备和任务执行设备。本发明实施例的技术方案通过监听对操作部件操作动作，生成对应的操作信号，以实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于操作设备既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率。

附图说明

为了更加清楚地说明本发明示例性实施例的技术方案，下面对描述实施例中所需要用到的附图做一简单介绍。显然，所介绍的附图只是本发明所要描述的一部分实施例的附图，而不是全部的附图，对于本领域普通技术人员，在不付出创造性劳动的前提下，还可以根据这些附图得到其他的附图。

图1是本发明实施例一提供的控制方法的流程示意图；

图2是本发明实施例一涉及的配置界面的示意图；

图3是本发明实施例二提供的控制方法的流程示意图；

图4是本发明实施例三提供的控制方法的流程示意图；

图5是本发明实施例四提供的控制装置的结构示意图；

图6是本发明实施例五提供的控制装置的结构示意图；

图7为本发明实施例六提供的电子设备的结构示意图。

具体实施方式

下面结合附图和实施例对本发明作进一步的详细说明。可以理解的是，此处所描述的具体实施例仅仅用于解释本发明，而非对本发明的限定。另外还需要说明的是，为了便于描述，附图中仅示出了与本发明相关的部分而非全部结构。

实施例一

图1为本发明实施例一提供的一种控制方法的流程图，应用于操作设备。本实施例可适用于在对操作设备进行操作的情况，更具体的，适用于在检测到对操作设备中的操作部件的操作动作，并生成操作部件对应的操作信号的情况。该方法可以由控制装置来执行，该装置可以由软件和/或硬件的方式来实现。

在对本实施例的技术方案进行介绍之前，先对本实施例的应用场景进行示例性的介绍，当然下述应用场景只是作为可选应用场景，本实施例的技术方案还可以应用于其他应用场景，本实施例对此不加以限制。具体的，示例性介绍的应用场景包括：

现有的技术方案的手术机器人为用户通过医生操作系统远程控制机器人进行手术操作，医生操作系统包括显示装置和一系列的操作输入装置如手柄，脚踏板等。其中，显示装置包括一个3D视界和一个独立的触控屏，3D视界用于显示医生手术过程中的3D影像和相关的器械信息，用户通过观察3D视界的图像获得手术过程信息，从而能够远程操作器械进行手术。独立的触控屏通过配置界面显示和设定医生相关的医生操作系统设定，例如运动缩放比例，3D视界显示器角度，手臂托架的高度，脚踏板的前后位置等，使得操作系统的参数(高度等)符合人体工学。

在当前的系统设置下，医生在手术过程中需要设定医生操作系统相关设定时，需要离开3D视界，同时手需要离开手术操作手柄，用手指在触控屏上进行相关设定，设定完成后，需要重新进入3D视界和将手套入操作柄继续进行手术。因此，会增加手术过程中的操作复杂繁琐，影响手术的安全性。

为了解决上述技术问题，在执行本发明实施例的技术方案之前，先搭建了用于执行本发明实施例技术方案的操作系统，具体包括操作设备和显示设备。在上述操作系统的基础上，本实施例的技术方案提供的一种应用于操作设备的控制方法，该方法具体包括：监听对操作设备上的操作部件发送的触发信号，以使后续基于该触发信号生成对应的操作信号，其中，触发信号在该操作部件被操作时生成，具体触发信号包括触发类型以及触发参数；进一步的基于该触发信号中的触发类型以及触发参数生成对应的操作信号，其中，操作信号包括操作对象控制信号和对象切换信号，对象切换信号用于控制显示设备切换信息显示界面，以及触发信息显示界面对应的操作对象，操作对象控制信号用于控制对应的操作对象的状态；再一步的将操作信号发送至对应的设备，以使该设备执行该操作信号，其中，设备包括显示设备和任务执行设备。本发明实施例的技术方案通过监听对操作部件操作动作，生成对应的操作信号，以实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于操作设备既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率，从而提高了操作用户的操作效率。

如图1所示，本实施例的技术方案具体包括以下步骤：

S110、监听对操作设备上的操作部件发送的触发信号；其中，触发信号在操作部件被操作时生成，包括触发类型以及触发参数。

在本实施例中，操作设备可以是操作用户用来进行操作的设备。具体的，操作设备可以是至少一个操作手柄。操作部件包括设置于操作设备表面的部件或者以整个操作设备作为一个部件。操作部件的数量为至少一个。操作部件的类型包括操作切换部件以及操作对象控制部件，分别用于实现对信息显示界面的切换，以及对切换后的信息显示界面对应的操作对象进行控制。具体的，在对任一操作部件进行操作时会根据操作动作生成对应的触发信号；其中，该触发信号包括触发类型以及触发参数。触发类型包括移动、按动或者旋转等类型，触发参数包括距离、角度等参数。

具体的，对操作部件的操作可以包括但不限于按动操作部件、移动或旋转操作部件。可选的，若操作部件是设置于操作设备表面的操作按键，则按动或移动该操作按键时产生对应的触发信号；若操作部件时整个操作设备，则按动或移动整个操作设备时产生对应的触发信号。以操作部件为整个操作设备为例介绍监听对操作设备上的操作部件发送的触发信号：具体的，对操作设备的操作动作包括六个自由度的操作，即X、Y、Z轴的平移以及X、Y、Z轴的旋转；示例性的，若对操作设备进行了Y轴正方向移动K毫米的操作，则此时监听到的触发信号包括触发类型为Y轴正方向移动，触发参数为K毫米。当然，上述实施例只是作为可选实施例，还可以基于其他方式获取操作部件的触发信号，本实施例对此不加以限制。

S120、基于触发信号中的触发类型和触发参数生成对应的操作信号。

在本实施例中，操作信号包括操作对象控制信号和对象切换信号，对象切换信号用于控制显示设备切换信息显示界面，以及触发信息显示界面对应的操作对象，操作对象控制信号用于控制对应的操作对象的状态。

可选的，基于触发信号生成对应的操作信号可以包括基于任一操作部件的触发信号生成对应的操作信号，即基于任一操作部件的触发信号的触发类型以及触发参数生成对应的操作信号；基于触发信号生成对应的操作信号还可以包括基于多个操作部件的触发信号生成对应的操作信号，即分别基于各触发信号对应的触发类型以及触发参数生成对应的组合操作信号。

示例性的，若操作设备为操作手柄，可以基于监听到的单个手柄发送的触发信号生成对应的操作信号；还可以基于监听到的多个(例如两个)手柄发送的触发信号生成对应的组合操作信号。具体的，可以基于监听到的多个触发信号之间的时间差以及预设的操作信号库确定对应的组合操作信号。

S130、将操作信号发送至对应的设备，以使设备执行操作信号，其中，设备包括显示设备和任务执行设备。

在本发明实施例中，操作信号可以仅包括操作切换信号，相应的，将操作切换信号发送至对应的设备，即发送至显示设备，以使显示设备执行信息显示界面的切换；具体的，信息显示界面包括2D显示界面和3D显示界面，相应的，显示设备执行由2D显示界面切换为3D显示界面，或者由3D显示界面切换为2D显示界面。

可选的，操作信号还可以仅包括操作对象控制信号，相应的，根据当前显示的信息显示界面生成该信息显示界面对应的操作对象的操作对象控制信号，并将该操作对象控制信号发送至对应的设备。具体的，2D显示界面对应的操作对象包括显示界面中的各内容对象，3D显示界面对应的操作对象为任务执行设备。

可选的，若当前显示的信息显示界面为2D显示界面，相应的，当前界面对应的操作对象包括显示界面中的各内容对象，则将该操作对象控制信号发送至显示设备，以使显示设备控制当前信息显示界面中的各内容对象。本实施例中的各内容对象包括但不限于光标、文字、图片以及界面等内容对象。

可选的，若当前显示的信息显示界面为3D显示界面，相应的，当前界面对应的操作对象为任务执行设备中的各设备，则将该操作对象控制信号发送至任务执行设备，以使该执行设备中的各设备可以对任务对象进行操作。本实施例中的任务执行设备可以是进行内窥镜手术设备以及进行细微雕刻设备等设备。

在一些实施例中，2D显示界面包括配置界面，例如图2所示的配置界面，具体包括但不限于对用户数据进行配置、对操作设备进行参数配置以及对显示设备进行参数配置所对应的配置界面等。

本发明实施例的技术方案具体包括：监听对操作设备上的操作部件发送的触发信号，以使后续基于该触发信号生成对应的操作信号，其中，触发信号在该操作部件被操作时生成，具体触发信号包括触发类型以及触发参数；进一步的基于该触发信号中的触发类型以及触发参数生成对应的操作信号，其中，操作信号包括操作对象控制信号和对象切换信号，对象切换信号用于控制显示设备切换信息显示界面，以及触发信息显示界面对应的操作对象，操作对象控制信号用于控制对应的操作对象的状态；再一步的将操作信号发送至对应的设备，以使该设备执行该操作信号，其中，设备包括显示设备和任务执行设备。本发明实施例的技术方案通过监听对操作部件操作动作，生成对应的操作信号，以实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于操作设备既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率。

实施例二

图3为本发明实施例二提供的一种控制方法的流程图，本实施例在上述各实施例的基础上，步骤“基于触发信号中的触发类型和触发参数生成对应的操作信号”细化为“基于触发信号中的触发类型和触发参数生成对应的操作信号；其中，操作设备包括两个操作区域，各操作区域内设置有多个操作部件。”其中与上述各实施例相同或相应的术语的解释在此不再赘述。参见图3，本实施例提供的控制方法包括：

S210、监听对操作设备上的操作部件发送的触发信号；其中，触发信号在操作部件被操作时生成，包括触发类型以及触发参数。

S220、基于触发信号中的触发类型和触发参数生成对应的操作信号；其中，操作设备包括两个操作区域，各操作区域内设置有多个操作部件。

在本实施例中，操作设备包括两个操作区域，以操作设备为操作手柄为例，为了方便用户单手进行操作，可以分别设置在手柄顶部以及手柄侧端的操作区域，当然还可以是分别处于操作手柄中左右两个区域，以便于用户双手同时操作该操作手柄。当然，还可以是设置于操作手柄的其他多个区域，本实施例对操作设备上的操作区域的个数以及位置不加以限制。

可选的，在本实施例中，当监听到对操作设备上的不同操作区域的操作部件发送的触发信号时，基于第一操作区域内操作部件发送的第一触发信号，和/或，第二操作区域内操作部件发送的第二触发信号生成对应的操作信号。换言之，可以仅基于第一区域的第一操作区域内操作部件发送的第一触发信号生成对应的操作信号；还可以仅基于第二操作区域内操作部件发送的第二触发信号生成对应的操作信号；当然还可以基于第一操作区域内操作部件发送的第一触发信号，和第二操作区域内操作部件发送的第二触发信号共同生成对应的操作信号。也可以说明基于上述第一操作区域的第一触发信号以及第二操作区域的第二触发信号生成的对应的操作信号可能为单一操作信号，也可能为组合操作信号。

具体的，确定基于上述第一操作区域的第一触发信号以及第二操作区域的第二触发信号生成的对应的操作信号为单一操作信号还是组合操作信号的方法可以是基于监听到的第一触发信号对应的时间戳与监听到的第二触发信号对应的时间戳之间的时间差进行确定。

可选的，确定方法具体包括若在第一触发信号接收后的预设时间间隔内接收到第二触发信号，或者，在第二触发信号接收后的预设时间间隔内接收到第一触发信号，则基于第一触发信号、第二触发信号以及预设操作信号库确定对应的操作信号。

可选的，基于第一触发信号、第二触发信号以及预设操作信号库确定对应的操作信号的方法具体包括：若预设操作信号库中匹配到第一触发信号、第二触发信号的组合操作信号，则将组合操作信号确定为对应的操作信号。

当然，在一些实施例中，若预设操作信号库中未匹配到第一触发信号、第二触发信号的组合操作信号，则将第一触发信号和第二触发信号分别确定为第一操作区域和第二操作区域分别对应的操作信号。

在一些其他实施例中，操作设备还包括主设备和至少一个从设备，各主设备和从设备上分别设置有多个操作部件，从设备将触发信号发送至主设备，主设备用于基于各从设备发送的触发信号以及自身操作部件发送的触发信号生成操作信号。

在本实施例中，主设备将自身操作部件发送的触发信号作为第一触发信号，根据各从设备的数量将各从设备发送的触发信号作为第二触发信号、第三触发信号灯根据从设备的数量依次排序。进一步的，依据上述确定不同操作区域发送的触发信号确定对应的操作信号的方法对主设备中的各触发信号进行对应的操作信号的确定，具体的确定方法本实施例在此不加以赘述。

在一些其他实施例中，操作设备还包括至少两个子设备，各子设备上分别设置有多个操作部件，子设备基于操作部件发送的触发信号生成操作信号，并分别独立发送至对应的设备，以使对应的设备执行接收到的操作信号。

S230、将操作信号发送至对应的设备，以使设备执行操作信号，其中，设备包括显示设备和任务执行设备。

本发明实施例的技术方案通过监听对操作部件操作动作，生成对应的操作信号，以实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于操作设备既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率。

在上述各实施例的基础上，本发明实施例还提供了优选实施例，当当前信息显示界面为2D显示界，即为配置界面时：通过对手柄进行操作实现屏幕光标上下左右移动为例：具体的，控制操作手柄向X轴逆时针旋转X度以实现光标上移；控制操作手柄向Y轴顺时针旋转X度，以实现光标下移；控制操作手柄向Z轴逆时针旋转X度以实现操作手柄左移。控制操作手柄向Z轴顺时针旋转X度，以实现光标右移。当然本实施例还包括基于对操作手柄进行其他操作实现确定选择、取消选择、以及拖动等对操作对象的控制。具体的，控制操作手柄向Z轴正方形移动Xmm，以实现确定选择；控制操作手柄向Z轴负方形移动Xmm，以实现取消选择；当然，还可以在选择确定后，按相应方向移动操作手柄，以实现拖动，当然还可以基于操作手柄进行文字的输入以及图像的导入，本实施例在此不加以限制。

在上述各实施例的基础上，本发明实施例还提供了另一个优选实施例，即为了方便用户操作，本实施例的技术方案还可以采用双手控制操作手柄，以实现对当前信息显示界面对应的操作对象进行控制。同样的，当当前信息显示界面为2D显示界，即为配置界面时：通过对手柄进行操作实现屏幕光标上下左右移动为例：具体的，为实现光标上移，控制左操作手柄向Y轴正方形移动Xmm。为实现光标上移，控制左操作手柄向Y轴负方向移动Xmm。为实现光标下移控制左操作手柄向X轴负方向移动Xmm。为实现光标左移，控制左操作手柄向X轴正方向移动Xmm。为实现光标右移，控制操作右手柄向X轴正方向移动Xmm。同样的，本实施例还包括基于对不同的操作手柄进行其他操作实现确定选择、取消选择、以及拖动等对操作对象的控制。具体的，为实现确定选择，按动右手柄A按钮；为实现取消选择，按动右手柄B按钮；为实现拖动：选择确定后，按相应方向移动手柄；为实现图像、界面或者文字缩放：在选择确定后，左右手柄同时按住B按钮，相对或者相反方形移动Xmm。当然，上述优选实施例只是作为本申请中各实施例的可选实施例，本申请的技术方案还可以例举其他优选实施例，本实施例在此不进行一一例举。

实施例三

图4为本发明实施例三提供的一种控制方法的流程图，应用于显示设备。本实施例可适用于在对操作设备进行操作的情况，更具体的，适用于在接收到的操作信号进行显示情况。该方法可以由控制装置来执行，该装置可以由软件和/或硬件的方式来实现。如图4所示，该方法具体包括以下步骤：

S310、接收各操作设备发送的操作信号。

在本实施例中，操作信号包括操作切换信号以及操作对象控制信号。

具体的，各操作设备发送的操作信号可以包括单一操作部件的操作动作生成的单一操作信号；还可以是基于多个操作部件的操作动作生成的组合操作信号，本实施例对此不加以限制。

S320、将任一操作设备发送的操作信号确定为目标操作信号，或者，基于至少两个操作设备发送的操作信号确定目标操作信号。

在本实施例中，若操作设备的数量为一个，接收任一操作设备发送的操作信号，并将该操作信号作为目标信号。若操作设备的数量为多个，则获取接收到的操作信号对应的时间戳，并根据各时间戳确定目标操作信号。可选的，基于各时间戳确定目标操作信号的方法包括：若在第一操作设备发送的第三操作信号接收后的预设时间间隔内接收到第二操作设备发送的第四操作信号，或者，在第四操作信号接收后的预设时间间隔内接收到第三操作信号，则基于第三操作信号、第四操作信号以及预设操作信号库确定目标操作信号。

可选的，基于第三操作信号、第四操作信号以及预设操作信号库确定目标操作信号的方法包括：若预设操作信号库中匹配到第三操作信号、第四操作信号的组合操作信号，则将组合操作信号确定为目标操作信号。

在一些其他实施例中，若预设操作信号库中未匹配到第三操作信号、第四操作信号的组合操作信号，则将第三操作信号和第四操作信号分别确定为第一操作区域或第一设备，以及第二操作区域或第二设备分别对应的目标操作信号。

S330、执行目标操作信号。

在本发明实施例中，目标操作信号包括操作对象控制信号和对象切换信号，对象切换信号用于控制切换信息显示界面，以及触发信息显示界面对应的操作对象，操作对象控制信号用于控制信息显示界面内操作对象的状态。

具体的，根据目标操作信号的类型执行对应的操作，具体的，当目标操作信号为操作对象控制信号，即根据当前显示界面，确定界面对应的操作对象，并对该操作对象执行操作对象控制信号。

具体的，当目标操作对象包括对切换信号时，基于对象切换信号将信息显示界面在2D显示界面和3D显示界面之间切换；或者，基于对象切换信号在3D显示界面的基础上增加显示2D显示界面，或，由2D显示界面和3D显示界面的混合界面切换至3D显示界面。在本实施例中，2D显示界面和3D显示界面的混合界面，包括：2D显示界面和3D显示界面的叠加显示形成的混合界面，或，2D显示界面和3D显示界面在显示界面中组合显示形成的混合界面2D显示界面包括配置界面，3D显示界面包括任务执行界面。

在一些实施例中，在对信息显示界面进行切换时，还基于对象切换信号控制至少两个信道的开关状态，其中，至少两个信道分别用于传输2D显示界面和3D显示界面。

具体的，分别确定2D显示界面对应的第一信道以及3D显示界面对应的第二信道，进一步地根据操作切换信号确定对应的信息显示界面，并进一步控制各信道的开关状态。示例性的，当信息显示界面包括2D显示界面时，控制第一信道处于打开状态以及第二信道处于关闭状态，以便于操作用户对2D显示界面对应的配置界面进行配置操作，当然，当信息显示界面为3D显示界面时，控制第二信道处于打开状态以及第一信道处于关闭状态，以便于操作用户对2D显示界面对应的任务画面显示界面进行任务操作。

在一些实施例中，当信息显示界面对应的信道处于关闭开状态时，该信息显示界面对应的操作对象也处于不可操作状态，以避免因误操作任务画面显示界面的操作对象而引起的安全问题。

本发明实施例的技术方案具体包括：接收各操作设备的操作信号，并将任意操作设备发送的操作信号确定为目标操作信号，获取基于至少两个操作设备发送的操作信号确定为目标信号，进一步的执行该目标操作信号；其中，目标操作信号包括操作对象控制信号和对象切换信号，对象切换信号用于控制切换信息显示界面，以及触发信息显示界面对应的操作对象，操作对象控制信号用于控制信息显示界面内操作对象的状态。本发明实施例的技术方案通过接收各操作信号，并确定各操作信号的信号类型，即基于执行该目标操作信号实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于操作设备的既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率。

以下是本发明实施例提供的控制装置的实施例，该装置与上述各实施例的控制方法属于同一个发明构思，在控制装置的实施例中未详尽描述的细节内容，可以参考上述控制方法的实施例。

实施例四

图5为本发明实施例四提供的控制装置的结构示意图，应用于操作设备。本实施例可适用于在对操作设备进行操作的情况，更具体的，适用于在检测到对操作设备中的操作部件的操作动作，并生成操作部件对应的操作信号的情况。该控制装置的具体结构包括：触发信号监听模块410、操作信号生成模块420和操作对象发送模块430；其中，

触发信号监听模块410，用于监听对操作设备上的操作部件发送的触发信号；其中，所述触发信号在所述操作部件被操作时生成，包括触发类型以及触发参数；

操作信号生成模块420，用于基于所述触发信号中的触发类型和触发参数生成对应的操作信号，其中，所述操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制显示设备切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制对应的所述操作对象的状态；

操作对象发送模块430，用于将所述操作信号发送至对应的设备，以使所述设备执行所述操作信号，其中，所述设备包括显示设备和任务执行设备。

本发明实施例的技术方案具体包括：监听对操作设备上的操作部件发送的触发信号，以使后续基于该触发信号生成对应的操作信号，其中，触发信号在该操作部件被操作时生成，具体触发信号包括触发类型以及触发参数；进一步的基于该触发信号中的触发类型以及触发参数生成对应的操作信号，其中，所述操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制显示设备切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制对应的所述操作对象的状态；再一步的将操作信号发送至对应的设备，以使该设备执行该操作信号，其中，设备包括显示设备和任务执行设备。本发明实施例的技术方案通过监听对操作部件操作动作，生成对应的操作信号，以实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于单个操作设备既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率。

在上述技术方案的基础上，所述操作设备包括两个操作区域，各所述操作区域内设置有多个操作部件，

所述操作信号生成模块420，包括：

操作信号生成子模块，用于基于第一操作区域内操作部件发送的第一触发信号，和/或，第二操作区域内操作部件发送的第二触发信号生成对应的操作信号。

在上述技术方案的基础上，操作信号生成子模块，包括：

操作信号生成单元，用于若在第一触发信号接收后的预设时间间隔内接收到所述第二触发信号，或者，在第二触发信号接收后的预设时间间隔内接收到所述第一触发信号，则基于所述第一触发信号、所述第二触发信号以及预设操作信号库确定对应的操作信号。

在上述技术方案的基础上，操作信号生成单元，包括：

第一操作信号生成子单元，用于若所述预设操作信号库中匹配到所述第一触发信号、所述第二触发信号的组合操作信号，则将所述组合操作信号确定为对应的操作信号；

第二操作信号生成子单元，用于若所述预设操作信号库中未匹配到所述第一触发信号、所述第二触发信号的组合操作信号，则将所述第一触发信号和所述第二触发信号分别确定为所述第一操作区域和所述第二操作区域分别对应的操作信号。

在上述技术方案的基础上所述操作设备包括至少两个子设备，各所述子设备上分别设置有多个操作部件，所述子设备基于操作部件发送的触发信号生成操作信号，并分别独立发送至对应的设备。在上述技术方案的基础上，，包括：

在上述技术方案的基础上，所述操作设备包括主设备和至少一个从设备，各所述主设备和所述从设备上分别设置有多个操作部件，所述从设备将触发信号发送至所述主设备，所述主设备用于基于各从设备发送的触发信号以及自身操作部件发送的触发信号生成操作信号。

在上述技术方案的基础上，所述信息显示界面包括2D显示界面和3D显示界面，其中，所述2D显示界面对应的操作对象包括显示界面中的各内容对象，所述3D显示界面对应的操作对象为任务执行设备。

在上述技术方案的基础上，所述2D显示界面包括配置界面。

本发明实施例所提供的控制装置可执行本发明任意实施例所提供的应用于操作设备的控制方法，具备执行方法相应的功能模块和有益效果。

实施例五

图6为本发明实施例五提供的控制装置的结构示意图，应用于显示设备。本实施例可适用于在对操作设备进行操作的情况，更具体的，适用于在接收到的操作信号进行显示情况。该控制装置的具体结构包括：操作信号接收模块510、目标操作信号生成模块520和目标操作信号执行模块530；其中，

操作信号接收模块510，用于接收各操作设备发送的操作信号；

目标操作信号生成模块520，用于将所述设备发送的操作信号确定为目标操作信号，或者，基于至少两个操作设备发送的操作信号确定目标操作信号；

目标操作信号执行模块530，用于执行所述目标操作信号；其中，所述目标操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制所述信息显示界面内操作对象的状态。

本发明实施例的技术方案具体包括：接收各操作设备的操作信号，并将任意操作设备发送的操作信号确定为目标操作信号，获取基于至少两个操作设备发送的操作信号确定为目标信号，进一步的执行该目标操作信号；其中，所述目标操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制所述信息显示界面内操作对象的状态。本发明实施例的技术方案通过接收各操作信号，并确定各操作信号的信号类型，即基于执行该目标操作信号实现对信息显示界面的界面切换以及对切换后的界面对应的操作对象进行控制，实现了基于操作设备的既实现了对界面的切换还实现了对不同界面下的操作对象进行操作，增加了操作设备的操作便利性以及提高任务操作的效率。

在上述技术方案的基础上，所述操作设备为至少两个；

所述目标操作信号生成模块620，包括：

目标操作信号生成单元，用于若在第一操作设备发送的第三操作信号接收后的预设时间间隔内接收到所述第二操作设备发送的第四操作信号，或者，在所述第四操作信号接收后的预设时间间隔内接收到所述第三操作信号，则基于所述第三操作信号、所述第四操作信号以及预设操作信号库确定目标操作信号。

在上述技术方案的基础上，目标操作信号生成单元，包括：

第一目标操作信号生成子单元，用于若所述预设操作信号库中匹配到所述第三操作信号、所述第四操作信号的组合操作信号，则将所述组合操作信号确定为目标操作信号；

第二目标操作信号生成子单元，用于若所述预设操作信号库中未匹配到所述第三操作信号、所述第四操作信号的组合操作信号，则将所述第三操作信号和所述第四操作信号分别确定为所述第一操作区域或所述第一设备，以及所述第二操作区域或所述第二设备分别对应的目标操作信号。

在上述技术方案的基础上，若所述目标操作信号包括对象切换信号；

相应的，所述目标操作信号执行模块630，包括：

第一目标操作信号执行单元，用于基于所述对象切换信号将所述信息显示界面在2D显示界面和3D显示界面之间切换；或者，

第二目标操作信号执行单元，用于基于所述对象切换信号在所述3D显示界面的基础上增加显示所述2D显示界面，或，由所述2D显示界面和3D显示界面的混合界面切换至所述3D显示界面。

在上述技术方案的基础上，目标操作信号执行模块630，包括：

信道开关状态控制单元，用于基于所述对象切换信号控制至少两个信道的开关状态，其中，所述至少两个信道分别用于传输所述2D显示界面和所述3D显示界面。

在上述技术方案的基础上，所述2D显示界面和3D显示界面的混合界面，包括：所述2D显示界面和3D显示界面的叠加显示形成的混合界面，或，所述2D显示界面和所述3D显示界面在显示界面中组合显示形成的混合界面。

本发明实施例所提供的控制装置可执行本发明任意实施例所提供的应用于显示设备的控制方法，具备执行方法相应的功能模块和有益效果。

值得注意的是，上述控制装置的实施例中，所包括的各个单元和模块只是按照功能逻辑进行划分的，但并不局限于上述的划分，只要能够实现相应的功能即可；另外，各功能单元的具体名称也只是为了便于相互区分，并不用于限制本发明的保护范围。

实施例六

图7为本发明实施例四提供的一种电子设备的结构示意图。图7示出了适于用来实现本发明实施方式的示例性电子设备12的框图。图7显示的电子设备12仅仅是一个示例，不应对本发明实施例的功能和使用范围带来任何限制。

如图7所示，电子设备12以通用计算电子设备的形式表现。电子设备12的组件可以包括但不限于：一个或者多个处理器或者处理单元16，系统存储器28，连接不同系统组件(包括系统存储器28和处理单元16)的总线18。

总线18表示几类总线结构中的一种或多种，包括存储器总线或者存储器控制器，外围总线，图形加速端口，处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说，这些体系结构包括但不限于工业标准体系结构(ISA)总线，微通道体系结构(MAC)总线，增强型ISA总线、视频电子标准协会(VESA)局域总线以及外围组件互连(PCI)总线。

电子设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被电子设备12访问的可用介质，包括易失性和非易失性介质，可移动的和不可移动的介质。

系统存储器28可以包括易失性存储器形式的计算机系统可读介质，例如随机存取存储器(RAM)30和/或高速缓存存储器32。电子设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例，存储系统34可以用于读写不可移动的、非易失性磁介质(图7未显示，通常称为“硬盘驱动器”)。尽管图7中未示出，可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器，以及对可移动非易失性光盘(例如CD-ROM,DVD-ROM或者其它光介质)读写的光盘驱动器。在这些情况下，每个驱动器可以通过一个或者多个数据介质接口与总线18相连。系统存储器28可以包括至少一个程序产品，该程序产品具有一组(例如至少一个)程序模块，这些程序模块被配置以执行本发明各实施例的功能。

具有一组(至少一个)程序模块42的程序/实用工具40，可以存储在例如系统存储器28中，这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据，这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本发明所描述的实施例中的功能和/或方法。

电子设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信，还可与一个或者多个使得用户能与该电子设备12交互的设备通信，和/或与使得该电子设备12能与一个或多个其它计算设备进行通信的任何设备(例如网卡，调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且，电子设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(LAN)，广域网(WAN)和/或公共网络，例如因特网)通信。如图7所示，网络适配器20通过总线18与电子设备12的其它模块通信。应当明白，尽管图7中未示出，可以结合电子设备12使用其它硬件和/或软件模块，包括但不限于：微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。

处理单元16通过运行存储在系统存储器28中的程序，从而执行各种功能应用以及样本数据获取，例如实现本发实施例所提供的一种控制方法步骤，具体的：

应用于操作设备的控制方法包括：

监听对操作设备上的操作部件发送的触发信号；其中，所述触发信号在所述操作部件被操作时生成，包括触发类型以及触发参数；

基于所述触发信号中的触发类型和触发参数生成对应的操作信号，其中，所述操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制显示设备切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制对应的所述操作对象的状态；

将所述操作信号发送至对应的设备，以使所述设备执行所述操作信号，其中，所述设备包括显示设备和任务执行设备。

应用于显示设备的方法包括：

接收各操作设备发送的操作信号；

将任一操作设备发送的操作信号确定为目标操作信号，或者，基于至少两个操作设备发送的操作信号确定目标操作信号；

执行所述目标操作信号；其中，所述目标操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制所述信息显示界面内操作对象的状态。

当然，本领域技术人员可以理解，处理器还可以实现本发明任意实施例所提供的样本数据获取方法的技术方案。

实施例七

本实施例七提供了一种计算机可读存储介质，其上存储有计算机程序，该程序被处理器执行时实现例如实现本发实施例所提供的一种控制方法步骤，具体的：

应用于操作设备的控制方法包括：

监听对操作设备上的操作部件发送的触发信号；其中，所述触发信号在所述操作部件被操作时生成，包括触发类型以及触发参数；

基于所述触发信号中的触发类型和触发参数生成对应的操作信号，其中，所述操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制显示设备切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制对应的所述操作对象的状态；

将所述操作信号发送至对应的设备，以使所述设备执行所述操作信号，其中，所述设备包括显示设备和任务执行设备。

应用于显示设备的方法包括：

接收各操作设备发送的操作信号；

将任一操作设备发送的操作信号确定为目标操作信号，或者，基于至少两个操作设备发送的操作信号确定目标操作信号；

执行所述目标操作信号；其中，所述目标操作信号包括操作对象控制信号和对象切换信号，所述对象切换信号用于控制切换信息显示界面，以及触发所述信息显示界面对应的操作对象，所述操作对象控制信号用于控制所述信息显示界面内操作对象的状态。

本发明实施例的计算机存储介质，可以采用一个或多个计算机可读的介质的任意组合。计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质。计算机可读存储介质例如可以是但不限于：电、磁、光、电磁、红外线、或半导体的系统、装置或器件，或者任意以上的组合。计算机可读存储介质的更具体的例子(非穷举的列表)包括：具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本文件中，计算机可读存储介质可以是任何包含或存储程序的有形介质，该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。

计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号，其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式，包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质，该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。

计算机可读介质上包含的程序代码可以用任何适当的介质传输，包括但不限于：无线、电线、光缆、RF等等，或者上述的任意合适的组合。

可以以一种或多种程序设计语言或其组合来编写用于执行本发明操作的计算机程序代码，所述程序设计语言包括面向对象的程序设计语言，诸如Java、Smalltalk、C++，还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中，远程计算机可以通过任意种类的网络，包括局域网(LAN)或广域网(WAN)，连接到用户计算机，或者，可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。

本领域普通技术人员应该明白，上述的本发明的各模块或各步骤可以用通用的计算装置来实现，它们可以集中在单个计算装置上，或者分布在多个计算装置所组成的网络上，可选地，他们可以用计算机装置可执行的程序代码来实现，从而可以将它们存储在存储装置中由计算装置来执行，或者将它们分别制作成各个集成电路模块，或者将它们中的多个模块或步骤制作成单个集成电路模块来实现。这样，本发明不限制于任何特定的硬件和软件的结合。

注意，上述仅为本发明的较佳实施例及所运用技术原理。本领域技术人员会理解，本发明不限于这里所述的特定实施例，对本领域技术人员来说能够进行各种明显的变化、重新调整和替代而不会脱离本发明的保护范围。因此，虽然通过以上实施例对本发明进行了较为详细的说明，但是本发明不仅仅限于以上实施例，在不脱离本发明构思的情况下，还可以包括更多其他等效实施例，而本发明的范围由所附的权利要求范围决定。