图像处理方法、装置、芯片、通信设备、及存储介质

技术领域

本申请涉及电子技术领域，尤其涉及一种图像处理方法及装置、芯片、通信设备、存储介质。

背景技术

随着用户拍摄需求的提高，电子设备通常设置适用于不同场景的拍摄模式。例如，普通模式、夜景模式、人像模式等。在不同的拍摄场景下开启相应的拍摄模式，可以获得理想的拍摄效果。目前，一次完整的拍摄模式切换，需要完成场景参数配置以及预览图像的平滑处理，导致切换方式不够灵活。

发明内容

本申请实施例提供一种图像处理方法及装置、芯片、通信设备、存储介质。

本申请的技术方案是这样实现的：

第一方面，本申请实施例提供一种图像处理方法，应用于应用处理器，包括：

响应模式切换指令，切换拍摄模式；所述拍摄模式切换过程包括参数配置阶段和平滑处理阶段；

在所述拍摄模式切换过程处于平滑处理阶段的情况下，向图像处理器发送第一指令，所述第一指令用于指示执行平滑处理；以及，

在所述拍摄模式切换过程处于参数配置阶段的情况下，向所述图像处理器发送第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

第二方面，本申请实施例还提供一种图像处理方法，应用于图像处理器，包括：

在拍摄模式切换过程处于平滑处理阶段的情况下，接收应用处理器发送的第一指令，所述第一指令用于指示执行平滑处理；和/或，

在所述拍摄模式切换过程处于参数配置阶段的情况下，接收所述应用处理器发送的第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

第三方面，本申请实施例提供一种图像处理装置，包括：

发送单元，被配置为响应模式切换指令，切换拍摄模式；所述拍摄模式切换过程包括参数配置阶段和平滑处理阶段；在所述拍摄模式切换过程处于平滑处理阶段的情况下，向图像处理器发送第一指令，所述第一指令用于指示执行平滑处理；以及，在所述拍摄模式切换过程处于参数配置阶段的情况下，向所述图像处理器发送第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

第四方面，本申请实施例还提供一种图像处理装置，包括：

接收单元，被配置为在拍摄模式切换过程处于平滑处理阶段的情况下，接收应用处理器发送的第一指令，所述第一指令用于指示执行平滑处理；和/或，在所述拍摄模式切换过程处于参数配置阶段的情况下，接收所述应用处理器发送的第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

第五方面，本生擒实施例提供一种图像处理系统，包括：应用处理器和图像处理器；其中，

所述应用处理器，被配置为响应模式切换指令，切换拍摄模式；所述拍摄模式切换过程包括参数配置阶段和平滑处理阶段；在所述拍摄模式切换过程处于平滑处理阶段的情况下，向所述图像处理器发送第一指令，所述第一指令用于指示执行平滑处理；以及，在所述拍摄模式切换过程处于参数配置阶段的情况下，向所述图像处理器发送第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置；

所述图像处理器，被配置为，在拍摄模式切换过程处于平滑处理阶段的情况下，接收所述应用处理器发送的第一指令，所述第一指令用于指示执行平滑处理；和/或，在所述拍摄模式切换过程处于参数配置阶段的情况下，接收所述应用处理器发送的第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

第六方面，本申请实施例提供一种芯片，包括：处理器，用于从存储器中调用并运行计算机程序，使得安装有所述芯片的设备执行第一方面或第二方面所述的图像处理方法。

第七方面，本申请实施例提供一种通信设备，包括应用处理器和图像处理器，其中，所述应用处理器用于执行第一方面所述的方法，所述图像处理器用于执行第二方面所述的方法。

第八方面，本申请实施例还提供一种计算机可读存储介质，其上存储有计算机程序，该计算机程序被处理器执行时实现第一方面，或者第二方面所述图像处理方法中的步骤。

本申请实施例提供的图像处理方法中，应用处理器可以通过第一指令控制图像处理器进行平滑处理，通过第二指令控制图像处理器进行参数配置，实现参数配置和平滑处理的分离控制。这样，应用处理器可以分别控制拍摄模式切换的参数配置过程和平滑处理过程，提高拍摄模式切换的灵活度。

附图说明

图1为本申请实施例提供的一种图像处理方法流程示意图一；

图2为本申请实施例提供的一种图像处理方法流程示意图二；

图3为本申请实施例提供的一种图像处理方法流程示意图三；

图4为本申请实施例提供的一种图像处理方法流程示意图四；

图5为本申请实施例提供的一种图像处理方法流程示意图五；

图6为本申请实施例提供的一种图像处理方法流程示意图六；

图7为本申请实施例提供的一种图像处理方法流程示意图七；

图8为本申请实施例提供的一种图像处理方法流程示意图八；

图9为本申请实施例提供的一种图像处理方法流程示意图九；

图10为本申请实施例提供的一种图像处理装置结构组成示意图一；

图11为本申请实施例提供的一种图像处理装置结构组成示意图二；

图12为本申请实施例提供的一种芯片结构组成示意图；

图13为本申请实施例提供的一种通信设备的硬件结构组成示意图。

具体实施方式

下面将结合本申请实施例中的附图，对本申请实施例中的技术方案进行描述，显然，所描述的实施例是本申请一部分实施例，而不是全部的实施例。基于本申请中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都属于本申请保护的范围。

本申请实施例提供的图像处理方法可以应用于设置有前置图像处理器(PreImage Signal Processing，PreISP)的电子设备。PreISP用于在图像预览阶段对图像采集装置采集的预览图像进行处理。电子设备中设置有PreISP的情况下，可以同时实现多种功能组合。例如，在电子设备进行空间对齐变换(Spatial Alignment Transform，SAT)的过程中可以根据拍摄场景自动调整拍摄模式。

实际应用中，传统变焦方案分为光学变焦(Optical Zoom)和数码变焦(DigitalZoom)两种方式。其中，光学变焦是依靠光学镜头结构实现变焦。具体地，光学变焦通过镜片移动来放大与缩小需要拍摄的景物。数码变焦是通过处理器把图片内的每个像素面积增大，从而达到放大目的。

然而，由于电子设备的厚度限制，难以集成光学结构复杂的变焦镜头。目前，电子设备可以采用空间对齐变换(Spatial Alignment Transform，SAT)进行变焦。简单来说，SAT是一种采用定焦镜头接力的方式实现变焦的技术。在SAT切换时，摄像装置可以通过切换定焦镜头，并结合数码变焦的方式来实现连续变焦。

应理解，在设置有PreISP的情况下，为了减少拍摄模式切换过程中图像的跃变，一次完整的拍摄模式切换过程可以包括参数配置阶段和平滑处理阶段。其中，参数配置操作阶段可以是对拍摄参数的调整阶段，通常情况下，参数配置操作阶段可以是对PreISP的后端(Back End，BE)硬件模块的参数调整。平滑操作阶段可以理解为对切换前后图像进行滤波、除噪处理，使得拍摄模式切换前后的图像不会发生跃变。

实际应用中，拍摄模式切换通常通过PreISP的固件(Firmware)完成。切换过程无法中断，每次进行拍摄模式切换的耗费较长的时间。

基于此，本申请实施例提供一种图像处理方法，该方法可以应用于电子设备的应用处理器(Application Processor，AP)和图像处理器(Image Signal Processing，ISP)。参考图1所示，本申请实施例提供的图像处理方法可以包括以下步骤：

步骤110、AP响应模式切换指令，切换拍摄模式，拍摄模式切换过程包括参数配置阶段和平滑处理阶段；

步骤120、AP在拍摄模式切换过程处于平滑处理阶段的情况下，向ISP发送第一指令，第一指令用于指示执行平滑处理；以及，在拍摄模式切换过程处于参数配置阶段的情况下，向ISP发送第二指令，第二指令用于指示ISP进行目标拍摄模式的参数配置。

对应的，ISP可以在拍摄模式切换过程处于平滑处理阶段的情况下接收第一指令，和/或，在拍摄模式切换过程处于参数配置阶段的情况下接收第二指令，并对第一指令和/或第二指令分别进行响应。

可选地，模式切换指令可以是用户手动触发，例如，用户在夜间拍摄时，手动触发拍摄模式的切换。模式切换指令也可以是AP自动触发，具体来说，AP可以实时获取拍摄的相关参数，在相关参数满足预设条件后自动触发模式切换指令。例如，在进行SAT切换的同时，AP可以根据待拍摄场景的亮度自动触发模式切换指令。

应理解，一个完整的拍摄模式切换过程可以包括参数配置阶段和平滑处理阶段。在本申请实施例中，AP可以对参数配置阶段和平滑处理阶段分别控制，实现参数配置阶段和平滑处理阶段的分离。

具体来说，AP可以判断当前拍摄模式切换过程所处的阶段。AP在判断拍摄模式切换过程处于参数配置阶段的情况下，可以通过第二指令控制图像处理器进行针对目标拍摄模式进行参数配置。AP在判断拍摄模式切换过程处于平滑处理阶段的情况下，可以通过第一指令控制图像处理器对切换前后的图像进行平滑处理。

需要说明的是，本申请实施例中的ISP可以是上述实施例中的PreISP。其中，拍摄模式切换过程的参数配置阶段，可以是对PreISP的BE模块的硬件参数的配置。

可选地，以上处理过程可以通过AP中的硬件抽象层(Hardware AbstractionLayer，HAL)端实现。

可以理解的是，AP可以通过第一指令控制PreISP进行平滑处理，通过第二指令控制PreISP进行参数配置，实现参数配置和平滑处理的分离控制。这样，AP可以分别控制拍摄模式切换的参数配置过程和平滑处理过程，提高拍摄模式切换的灵活度。

实际应用中，不同模式切换方向的处理操作会有差异。示例性的，对于从普通拍摄模式(Normal Mode，NM)切换为超夜拍摄模式(Super Night Mode，SN)/极夜拍摄模式(Ultra Dark Mode，UD)的场景，可以先进行BE模块的参数配置，再进行平滑处理。对于从SN/UD切换到NM的场景，可以先进行平滑处理，再进行BE模块的参数配置。

在本申请一实施例中，参考图2所示的流程示意图，在步骤120之前本申请实施例提供的图像处理方法，还可以包括以下步骤：

步骤130、AP获取待拍摄场景的环境参数；

步骤140、AP确定与环境参数匹配的图像数量，图像数量是指拍摄模式切换过程中需要进行平滑处理的图像数量；

步骤150、AP向ISP发送第三指令，第三指令用于指示ISP基于所述图像数量执行平滑处理，以完成拍摄模式的切换。

本申请实施例中，AP可以对接收到的模式切换指令进行响应，获取待拍摄场景的环境参数，并基于环境参数确定需要进行平滑(smooth)处理的图像数量。在本申请实施例中，需要进行平滑处理的图像数量也可以称为smooth图像帧数。这里，不同的环境参数可以对应不同的smooth图像帧数。

可以理解的是，AP可以根据当前场景的环境参数的实际需求，动态调整smooth处理过程中的smooth的图像帧数。

可选地，环境参数可以包括但不限于以下中的至少一项：光通量、亮度、照度。其中，AP在接收到模式切换指令后，可以控制光线传感器采集当前待拍摄场景的环境参数。

在一种可能的实现方式中，AP可以预先设置不同环境参数对应的smooth图像帧数。这样，AP在进行模式切换时，可以根据采集到的环境参数确定smooth图像帧数。

在另一种可能的实现方式中，AP可以将采集到的环境参数输入到预先训练好的神经网络模型中进行处理，得到当前环境参数对应的smooth图像帧数。需要说明的是，预先训练好的神经网络模型可以根据机器学习算法进行训练得到。

可选地，由于在不同拍摄模式之间进行切换时的配置参数不同，AP还可以结合拍摄模式的切换方向和环境参数，确定smooth图像帧数。可以理解的是，在拍摄模式的切换方向不同的情况下，AP可以根据不同的对应关系确定实际需要进行平滑处理的图像数量。示例性的，对于从普通拍摄模式(Normal Mode，NM)切换为夜景拍摄模式的场景，其中，夜景模式可以包括超夜拍摄模式(Super Night Mode，SN)/极夜拍摄模式(Ultra Dark Mode，UD)，表1示出了照度索引值(lux index)和smooth图像帧数之间的对应关系。

表1

从表1可以看出，在从NM切换到SN/UD的场景中，当lux index大于350且小于或等于370时，AP可以确定需要进行平滑处理的图像数量为3帧；当lux index大于370且小于或等于390时，AP可以确定需要进行平滑处理的图像数量为1帧；当lux index大于390时，AP可以确定需要进行平滑处理的图像数量为0帧。

另外，对于从SN/UD切换到NM的场景，表2示出了照度索引值(lux index)和smooth图像帧数之间的对应关系。

表2

从表2可以看出，在从SN/UD切换到NM的场景中，当lux index小于或等于320且大于310时，AP可以确定需要进行平滑处理的图像数量为3帧；当lux index小于或等于310且大于290时，AP可以确定需要进行平滑处理的图像数量为1帧；当lux index小于或等于290时，AP可以确定需要进行平滑处理的图像数量为0帧。

本申请实施例中，在AP确定了当前的smooth图像帧数后，可以向图像处理器PreISP发送三指令，以指示该PreISP基于确定的smooth图像帧数执行平滑操作，以完成拍摄模式的切换。

可以理解的是，第三指令中可以包括AP确定的smooth图像帧数。图像处理器可以结合第一指令和第三指令，根据第三指令所指示的smooth图像帧数进行平滑处理。

可选地，第三指令可以与第一指令为同一指令，也可以为独立的两个指令，本申请实施例对此不做限制。

综上所述，本申请实施例提供的图像处理方法中，应用处理器可以根据待拍摄场景的环境参数动态调整需要进行平滑处理的图像数量，并控制图像处理器基于确定出的图像数量进行拍摄模式切换过程中的平滑处理。也就是说，在需要进行对多个图像进行平滑处理的环境中，应用处理器可以动态增加进行平滑处理的图像数量，提高拍摄模式切换过程中的平滑效果，而在仅需对少量图像进行平滑处理的环境中，应用处理器可以动态减少进行平滑处理的图像数量，优化拍摄模式切换的速度。如此，可以兼顾拍摄模式切换过程中的平滑效果和模式切换速度。

在本申请一实施例中，参考图3所示，本申请实施例提供的图像处理方法还可以包括以下步骤：

步骤160、AP确定经过平滑操作的累计图像数量；

步骤170、若累计图像数量与图像数量匹配，则AP确定完成拍摄模式切换过程中的平滑处理。

应理解，AP可以向PreISP发送第一指令，触发PreISP执行拍摄模式切换过程中的平滑处理。而对于拍摄模式切换过程中平滑处理的结束，可以由PreISP中FW控制。考虑到AP和PreISP针对平滑处理是否完成延时的影响，本申请实施例中，PreISP和AP可以分别控制smooth处理帧数，以降低延时。

也就是说，AP可以统计经过平滑操作的累计图像数量。若累计图像数量与AP确定的图像数量匹配，则可以确定平滑处理已完成。其中，AP可以在PreISP执行平滑处理时，根据图像帧率统计当前经过平滑处理的帧数。

进一步地，AP在确定平滑处理已完成之后，还可以根据当前拍摄模式的切换方向确定拍摄模式切换过程是否完成。示例性的，对于从NM切换到SN/UD的场景，PreISP可以先进行BE模块的参数配置再进行平滑处理，因此，AP在确定平滑处理已完成后，可以确定当前拍摄模式切换已完成。对于从SN/UD切换到NM的场景，PreISP可以先进行平滑处理再进行BE模块的参数配置，因此，AP在确定平滑处理已完成后，可以确定当前拍摄模式切换还需进行BE模块的参数配置处理，并控制PreISP进行BE模块的参数配置处理。

综上所述，本申请实施例提供的图像处理方法中，应用处理器可以统计当前已经进行平滑处理的图像数量，以便于确定当前拍摄模式切换的进度，从而进行后续的控制处理。应用处理器自己统计当前已经进行平滑处理的图像数量，避免图像处理器向其发送完成指令造成的时延问题。

在本申请一实施例中，参考图4所示，本申请实施例提供的图像处理方法还可以包括以下步骤：

步骤180、在切换拍摄模式的过程中，若接收到待处理任务请求指令，则AP向PreISP发送第四指令，该第四指令用于指示停止拍摄模式切换过程中的平滑处理，待处理任务的优先级高于切换拍摄模式的优先级。

可以理解的是，AP可以将拍摄模式切换过程中的参数配置过程和平滑处理过程进行分离控制，基于此，本申请实施例中AP还可以提供一种平滑处理的快停机制。在AP接收到优先级更高的任务时，可以调用该平滑处理的快停机制，停掉更耗时的平滑处理过程，从而优化拍摄模式的切换时间以及更高优先级任务的处理时间，提升处理效率。

本申请实施例中，AP可以预先设置每种类型任务的优先级。这样，AP在接收到待处理任务后，可以根据每个任务的优先级与拍摄模式切换任务优先级之间的关系，确定是否向图像处理器发送第四指令，以快速终止平滑处理过程。在确定拍摄模式切换结束后，可以继续执行待处理任务，从而优化待处理任务的处理时间，提高处理效率。

可选地，步骤180中若接收到待处理任务请求指令，则向图像处理器发送第四指令，还可以通过以下方式实现：

步骤1801、若接收到待处理任务，则AP判断拍摄模式切换过程是否处于平滑处理的初始阶段；

步骤1802、若拍摄模式切换过程处于平滑处理的初始阶段，则AP向PreISP发送第四指令。

可以理解的是，AP可以在平滑处理的初始阶段向PreISP发送第四指令，以便于在平滑处理的初始阶段就停止该平滑处理的操作，进一步缩短拍摄模式切换的时间，提高处理效率。

可选地，平滑处理的初始阶段可以平滑处理的第一帧图像，或前N帧图像。N可以为预设值，例如2或3。

可选地，在发送第四指令之后，本申请实施例提供的图像处理方法还可以包括以下步骤：

若拍摄模式切换方向从普通模式切换为夜景模式，AP确定本次拍摄模式切换已完成；

若拍摄模式切换方向从夜景模式切换为普通模式，AP确定本次拍摄模式切换提前结束。

可以理解的是，由于从普通模式切换到夜景模式(例如SN/UD)是先进行BE模块的参数配置，再进行平滑处理。因此，在该场景下，AP通过第四指令快速终止拍摄模式切换中的平滑处理后，可以直接确定当前拍摄模式切换已经完成。

可选地，AP在确定当前拍摄模式切换完成之后，可以在日志中记录平滑处理提前结束的相关信息。

另外，由于从夜景模式(例如SN/UD)切换到NM是先进行平滑处理，再进行BE模块的参数配置。因此，在该场景下，AP通过第四指令快速终止拍摄模式切换中的平滑处理后，BE模块的参数配置也同样会提前结束。

可选地，AP在确定本次拍摄模式切换提前结束后，可以输出拍摄模式切换失败的通知信息。

需要说明的是，待处理任务可以是任意想要缩短拍摄模式切换时间的任务。

可选地，上述待处理任务可以包括SAT切换任务。也就是说，SAT切换的优先级高于平滑处理的优先级。当AP的HAL端确定执行STA切换时，AP可以向PreISP发送第四指令，以指示停止拍摄模式切换过程中的平滑处理。

在本申请一实施例中，参考图5所示，本申请实施例提供的图像处理方法中，步骤110中AP响应模式切换指令，切换拍摄模式，可以通过以下方式实现：

步骤1101、接收模式切换指令，确定目标拍摄模式的第一标识信息和执行本次模式切换的目标图像传感器的第二标识信息；

步骤1102、在所述第一标识信息与所述图像处理器当前拍摄模式的标识信息不同的情况下，确定当前图像传感器的标识信息是否为所述第二标识信息；

步骤1103、在所述当前图像传感器的标识信息为所述第二标识信息的情况下，切换拍摄模式。

应理解，目标切换模式可以是即将要切换的拍摄模式。第一标识信息可以唯一地标识目标切换模式。

本申请实施例中，目标拍摄标识的第一标识信息可以通过模式切换指令携带。该模式切换指令可以是根据用户手触发的，也可以根据采集的环境亮度来触发的，本申请实施例对此不做限制。

在接收到模式切换指令后，AP可以判断当前的拍摄模式是否为目标拍摄模式。若当前的拍摄模式为目标拍摄模式，则说明不需要进行模式切换，AP可以不对接收到的模式切换指令进行响应。若当前的拍摄模式不是目标拍摄模式，则可以确定AP需要将当前的拍摄模式切换为目标拍摄模式。

需要说明的是，AP可以根据帧率在每帧时间上判断当前PreISP的拍摄模式的标识信息是否是目标拍摄模式的第一标识信息。

本申请实施例中，AP可以对比当前拍摄模式的标识信息和目标拍摄模式的第一标识信息，来确定当前的拍摄模式是否为目标拍摄模式。若当前拍摄模式的标识信息和目标拍摄模式的第一标识信息一致，则当前的拍摄模式为目标拍摄模式。若当前拍摄模式的标识信息和目标拍摄模式的第一标识信息不一致，则当前的拍摄模式不为目标拍摄模式。

此外，拍摄模式的切换需要针对同一图像传感器(sensor)。因此，在切换拍摄模式之前，需要判断当前sensor是否为需要实现拍摄模式切换的目标sensor。

本申请实施例中，AP在接收模式切换指令时，可以确定执行本次模式切换的目标图像传感器的第二标识信息。

可选地，AP在接收到模式切换指令时，可以初始化本次拍摄模式切换的相关设置信息。其中，相关设置信息可以包括本次切换拍摄模式的目标图像传感器的第二标识信息。

本申请实施例中，若当前sensor的标识信息与第二标识信息相同，则说明当前sensor为实现拍摄模式切换的目标sensor。在该情况下，AP可以执行模式切换指令，实现模式切换相关的命令。具体地，AP在拍摄模式切换过程处于平滑处理阶段的情况下，可以向ISP发送第一指令，第一指令用于指示执行平滑处理；或者，在拍摄模式切换过程处于参数配置阶段的情况下，可以向ISP发送第二指令，第二指令用于指示ISP进行目标拍摄模式的参数配置。此外，AP在切换拍摄模式的过程中，接收到优先级较高的待处理任务的请求指令时，还可以向ISP发送第四指令，指示ISP停止述拍摄模式切换过程中的所平滑处理。

此外，若当前sensor的标识信息与第二标识信息不同，则说明当前sensor并不是实现拍摄模式切换的目标sensor。此时，AP可以退出模式切换流程。

以下结合具体应用场景对本申请实施例提供的图像处理方法进行详细说明。

参考图6-图8所示的流程示意图，本申请实施例提供的图像处理方法可以通过以下方式实现。

步骤S1、AP确定目标拍摄模式的第一标识信息。

应理解，第一标识信息标识可以唯一地标识需要切换的目标拍摄模式。

步骤S2、AP判断目标拍摄模式的第一标识信息是否与当前PreISP的拍摄模式的标识信息相同。

需要说明的是，AP可以在根据帧率在每帧时间上判断目标拍摄模式的第一标识信息是否与当前PreISP的拍摄模式的标识信息相同。

若两者不相同，则继续执行步骤3。若两者相同，则AP确定没有发生拍摄模式切换，结束本次处理流程。

步骤S3、初始化本次拍摄模式切换的相关设置信息。

其中，相关设置信息可以包括本次切换拍摄模式的图像传感器的第二标识信息(sensor ID)。

步骤S4、判断当前sensor ID是否为初始化的sensor ID。

需要说明的是，拍摄模式的切换需要针对同一图像传感器。因此，在切换拍摄模式之前，需要判断当前sensor ID是否为需要实现拍摄模式切换的sensor ID。

若当前sensor ID为初始化的sensor ID，则继续执行步骤S5。

若当前sensor ID不是初始化的sensor ID，则确定当前sensor与本次拍摄模式切换的sensor不匹配或没有进行拍摄模式的切换，结束本次处理流程。

步骤S5、执行拍摄模式切换的相关命令。

拍摄模式切换的相关命令可以包括拍摄模式切换执行命令“SCENE_SWITCH_AND_SMOOTH_PROCESS”，以及快停命令“SCENE_SWITCH_AND_SMOOTH_FASTSTOP”。

可选地，AP在普通的拍摄模式切换情况下，可以执行“SCENE_SWITCH_AND_SMOOTH_PROCESS”。

可选地，在切换拍摄模式的过程中，AP若接收到高优先级的待处理任务的请求指令，可以执行“SCENE_SWITCH_AND_SMOOTH_FASTSTOP”。

在本示例中，“SCENE_SWITCH_AND_SMOOTH_PROCESS”对应步骤S6-步骤S21。“SCENE_SWITCH_AND_SMOOTH_FASTSTOP”对应步骤S22-步骤S25。

参考图7所示，“SCENE_SWITCH_AND_SMOOTH_PROCESS”命令的处理流程可以包括以下步骤。

步骤S6、AP确定执行“SCENE_SWITCH_AND_SMOOTH_PROCESS”，初始化本次拍摄模式切换的相关参数。

示例性的，拍摄模式切换的相关参数可以包括smooth图像帧数。AP可以根据采集到的光通量、亮度、照度中的至少一项，确定smooth图像帧数。

步骤S7、AP判断当前HAL端设置的目标拍摄模式是否与当前正在切换的目标拍摄模式一致。

若一致，则继续执行步骤8。若不一致，则结束本次处理流程。

步骤S8、AP判断拍摄模式切换过程所处的阶段。

若处于BE模块的参数配置阶段，则执行步骤S9-步骤S14。

若处于平滑处理处理阶段，则执行步骤S15-步骤S21。

步骤S9、在确定处于BE模块的参数配置阶段时，AP向PreISP发送第二指令。

其中，第二指令用于指示PreISP进行目标拍摄模式的参数配置。

步骤S10、AP判断第二指令是否执行成功。

若第二指令执行成功，则给HAL端反馈切换成功的通知信息，并继续执行步骤S11。

若第二指令执行失败，则给HAL端反馈失败的通信信息，并执行错误处理流程。

步骤S11、AP判断当前拍摄模式切换过程包括一个阶段还是两个阶段。

若当前拍摄模式切换过程仅有一个阶段，则执行步骤S12。

若当前拍摄模式切换过程包含两个阶段，则执行步骤S13。

步骤S12、AP设置当前拍摄模式切换成功。

步骤S13、AP判断当前拍摄模式切换的方向。

若从SN/UD切换到NM，则跳转至步骤S14.1。

若从NM切换到SN/UD，则跳转至步骤S14.2。

步骤S14.1、AP确定当前拍摄模式切换完成。

由于从SN/UD切换到NM是先进行平滑处理，再进行BE模块的参数配置。因此，在BE模块的参数配置成功之后，可以确定当前拍摄模式切换完成。

步骤S14.2、AP确定当前拍摄模式切换阶段为平滑处理阶段。

由于从NM切换到SN/UD是先进行BE模块的参数配置，再进行平滑处理。因此，在BE模块的参数配置成功之后，还需要进行平滑处理。基于此，AP可以设置当前拍摄模式切换阶段为平滑处理阶段。可以继续执行平滑处理阶段的处理流程。

步骤S15、在确定处于平滑处理阶段时，AP可以判断当前HAL端设置的smooth图像帧数是否为非0值。

若smooth图像帧数为0，则说明未设置smooth图像帧数，此时，AP可以确定结束平滑处理阶段的处理流程。

若smooth图像帧数为非0的有效值，则继续执行步骤S16。

步骤S16、AP判断当前是否为平滑处理的初始阶段。

具体地，AP可以判断当前是否为平滑处理阶段的第一帧图像。若为第一帧图像，则继续执行步骤S17。若不为第一帧图像，则继续执行步骤S18。

需要说明的是，AP可以根据帧率在每帧时间执行上述判断。

步骤S17、AP向PreISP发送第一指令或第三指令。

其中，第一指令用于指示执行平滑处理，第三指令用于指示基于步骤S6确定的smooth图像帧数执行平滑处理。

步骤S18、AP将当前已经进行了平滑处理的图像帧数加1。

步骤S19、AP判断经过平滑处理的累计图像数量是否与预先设置的smooth图像帧数相同。

若两者相同，则可以确定平滑处理已完成，AP可以继续执行步骤S20。

若两者不同，则继续进行下一帧图像的平滑处理。

步骤S20、判断当前拍摄模式切换的方向。

若从SN/UD切换到NM，则跳转至步骤S21.1。

若从NM切换到SN/UD，则跳转至步骤S21.2。

步骤S21.1、AP确定当前拍摄模式切换阶段为平滑处理阶段。

由于从SN/UD切换到NM是先进行平滑处理，再进行BE模块的参数配置。因此，在平滑处理完成之后，还需要进行BE模块的参数配置。基于此，AP可以设置当前拍摄模式切换阶段为参数配置阶段。可以继续执行参数配置阶段的处理流程。

步骤S21.2、AP确定当前拍摄模式切换完成。

由于从NM切换到SN/UD是先进行BE模块的参数配置，再进行平滑处理。因此，在BE模块的参数配置成功之后，可以确定当前拍摄模式切换完成。

参考图8所示，“SCENE_SWITCH_AND_SMOOTH_FASTSTOP”命令的处理流程可以包括以下步骤。

步骤S22、AP确定执行“SCENE_SWITCH_AND_SMOOTH_FASTSTOP”，AP判断是否处于拍摄模式切换过程中，且当前处于平滑处理的初始阶段。

若未处于拍摄模式切换过程，或者当前不处于平滑处理的初始阶段，则AP确定结束本次处理流程。应理解，AP判断当前没有处于拍摄模式切换过程中，或者当前不处于平滑处理阶段，可以确定当前没有发生拍摄模式切换。

若处于拍摄模式切换过程中，且当前处于平滑处理的初始阶段，则跳转至步骤S23。

步骤S23、AP向PreISP发送第四指令。

应理解，AP可以通过第四指令，快速停止平滑处理的操作，以提高处理速度。

步骤S24、AP判断当前拍摄模式切换方向。

若从NM切换到SN/UD，则跳转至步骤S25.1。

若从SN/UD切换到NM，则跳转至步骤S25.2。

步骤S25.1、AP确定本次拍摄模式切换已完成，在日志中记录平滑处理提前结束的相关信息。

由于从NM切换到SN/UD是先进行BE模块的参数配置，再进行平滑处理。因此，在该场景下，AP通过第四指令快速终止拍摄模式切换中的平滑处理后，可以直接确定当前拍摄模式切换已经完成。

步骤S25.2、AP确定本次拍摄模式切换提前结束，输出拍摄模式切换失败的通知信息。

由于从SN/UD切换到NM是先进行平滑处理，再进行BE模块的参数配置。因此在该场景下，AP通过第四指令快速终止拍摄模式切换中的平滑处理后，BE模块的参数配置也同样会提前结束。

综上所述，本申请实施例可以将拍摄模式切换过程拆分为两个阶段分别控制，当有优先级更高的任务需要处理时，可以停掉更耗时的smooth平滑阶段，从而优化拍摄模式切换同时发生时切换所需要的时间，提升了用户的体验。

下面以SAT切换过程中自动切换拍摄模式的场景为例进行说明。

为了优化SAT切换的性能，在图像传感器进行SAT切换的过程中可以调用SCENE_SWITCH_AND_SMOOTH_FASTSTOP”命令，缩短拍摄模式切换时间以及SAT切换的时间，从而优化处理时间。参考图9所示，SAT切换过程中进行拍摄模式切换的方式可以包括以下步骤：

步骤1、AP的HAL端确定进行SAT切换。

步骤2、AP判断当前是否正在执行拍摄模式的切换。

可选地，AP可以在SAT切换过程中获取待拍摄场景的环境参数，根据环境参数来触发拍摄模式的切换。

若当前正在执行拍摄模式的切换，则继续执行步骤3。若当前未执行拍摄模式的切换，则跳转至步骤7。

步骤3、AP调用“SCENE_SWITCH_AND_SMOOTH_FASTSTOP”命令，以控制PreISP快速停止平滑处理的操作。

步骤4、AP判断当前是否处于平滑处理阶段。

若处于平滑处理阶段，则执行步骤5。若未处于平滑处理阶段，则结束当前处理流程。

步骤5、判断拍摄模式的切换方向。

若从NM切换到SN/UD，则跳转至步骤6.1。

若从SN/UD切换到NM，则跳转至步骤6.2。

步骤6.1、AP确定本次拍摄模式切换已完成，在日志中记录平滑处理提前结束的相关信息。

由于从NM切换到SN/UD是先进行BE模块的参数配置，再进行平滑处理。因此，在该场景下，AP通过第四指令快速终止拍摄模式切换中的平滑处理后，可以直接确定当前拍摄模式切换已经完成。

步骤6.2、AP确定本次拍摄模式切换提前结束，输出拍摄模式切换失败的通知信息。

由于从SN/UD切换到NM是先进行平滑处理，再进行BE模块的参数配置。因此在该场景下，AP通过第四指令快速终止拍摄模式切换中的平滑处理后，BE模块的参数配置也同样会提前结束。

步骤7、AP确定开始进行SAT切换。

本申请实施例可以实现平滑处理的快停机制，在SAT切换过程中遇到拍摄模式切换，可以通过平滑处理的快停机制来加速SAT的切换速度。

以上结合附图详细描述了本申请的优选实施方式，但是，本申请并不限于上述实施方式中的具体细节，在本申请的技术构思范围内，可以对本申请的技术方案进行多种简单变型，这些简单变型均属于本申请的保护范围。例如，在上述具体实施方式中所描述的各个具体技术特征，在不矛盾的情况下，可以通过任何合适的方式进行组合，为了避免不必要的重复，本申请对各种可能的组合方式不再另行说明。又例如，本申请的各种不同的实施方式之间也可以进行任意组合，只要其不违背本申请的思想，其同样应当视为本申请所公开的内容。又例如，在不冲突的前提下，本申请描述的各个实施例和/或各个实施例中的技术特征可以和现有技术任意的相互组合，组合之后得到的技术方案也应落入本申请的保护范围。

本申请一实施例还提供一种图像处理装置，应用于应用处理器，参考图10所示，该图像处理装置1000可以包括：

发送单元1001，被配置为响应模式切换指令，切换拍摄模式；所述拍摄模式切换过程包括参数配置阶段和平滑处理阶段；在所述拍摄模式切换过程处于平滑处理阶段的情况下，向图像处理器发送第一指令，所述第一指令用于指示执行平滑处理；以及，在所述拍摄模式切换过程处于参数配置阶段的情况下，向所述图像处理器发送第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

可选地，所述图像处理装置1000还可以包括获取单元和确定单元。

所述获取单元，可以被配置为获取待拍摄场景的环境参数；

所述确定单元，可以被配置为确定与所述环境参数匹配的图像数量，所述图像数量是指拍摄模式切换过程中需要进行平滑处理的图像数量；

所述发送单元1001，还被配置为向所述图像处理器发送第三指令，所述第三指令用于指示所述图像处理器基于所述图像数量执行所述平滑处理，以完成所述拍摄模式的切换。

可选地，所述环境参数包括以下中的至少一项：

光通量、亮度、照度。

可选地，所述确定单元，还可以被配置为确定经过所述平滑处理的累计图像数量；若所述累计图像数量与所述图像数量匹配，则确定完成所述拍摄模式切换过程中的平滑处理。

可选地，所述发送单元1001，还被配置为在切换拍摄模式的过程中，若接收到待处理任务的请求指令，则向所述图像处理器发送第四指令，所述第四指令用于指示所述图像处理器停止所述拍摄模式切换过程中的所述平滑处理，所述待处理任务的优先级高于所述切换拍摄模式的优先级。

可选地，所述发送单元1001，还配配置为若接收到所述待处理任务，则判断所述拍摄模式切换过程是否处于所述平滑处理的初始阶段；若所述拍摄模式切换过程处于所述平滑处理的初始阶段，则向所述图像处理器发送所述第四指令。

可选地，所述确定单元，还被配置为若拍摄模式切换方向从普通模式切换为夜景模式，确定本次拍摄模式切换已完成；

若拍摄模式切换方向从夜景模式切换为普通模式，确定本次拍摄模式切换提前结束。

可选地，所述待处理任务包括SAT任务。

可选地，图像处理装置1000还包括指令接收单元，被配置为接收模式切换指令，确定目标拍摄模式的第一标识信息和执行本次模式切换的目标图像传感器的第二标识信息；

所述确定单元，还被配置为在所述第一标识信息与所述图像处理器当前拍摄模式的标识信息不同的情况下，确定当前图像传感器的标识信息是否为所述第二标识信息；在所述当前图像传感器的标识信息为所述第二标识信息的情况下，切换拍摄模式。

本申请一实施例还提供一种图像处理装置，应用于图像处理器，参考图11所示，该图像处理装置1100可以包括：

接收单元1101，被配置为在拍摄模式切换过程处于平滑处理阶段的情况下，接收应用处理器发送的第一指令，所述第一指令用于指示执行平滑处理；和/或，在所述拍摄模式切换过程处于参数配置阶段的情况下，接收所述应用处理器发送的第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

可选地，所述接收单元1101，还被配置为接收应用处理器发送的第三指令，所述第三指令用于指示基于图像数量执行所述平滑处理，以完成所述拍摄模式的切换；所述图像数量是所述应用处理器基于待拍摄场景的环境参数确定。

可选地，所述环境参数包括以下中的至少一项：

光通量、亮度、照度。

可选地，所述接收单元1101，还被配置为接收所述应用处理器发送的第四指令，所述第四指令用于指示停止所述拍摄模式切换过程中的所述平滑处理，

所述第四指令是所述应用处理器在所述切换拍摄模式的过程中，接收到待处理任务的请求指令的情况下发送的，所述待处理任务的优先级高于所述切换拍摄模式的优先级。

可选地，所述待处理任务包括SAT任务。

图12是本申请实施例的芯片的示意性结构图。该芯片可以是上述实施例中的应用处理器，也可以是图像处理器。图12所示的芯片1200包括处理器1210，处理器1210可以从存储器中调用并运行计算机程序，以实现本申请实施例中的图像处理方法。

可选地，如图12所示，芯片1200还可以包括存储器1220。其中，处理器1210可以从存储器1220中调用并运行计算机程序，以实现本申请实施例中的方法。

其中，存储器1220可以是独立于处理器1210的一个单独的器件，也可以集成在处理器1210中。

可选地，该芯片1200还可以包括输入接口1230。其中，处理器1210可以控制该输入接口1230与其他设备或芯片进行通信，具体地，可以获取其他设备或芯片发送的信息或数据。

可选地，该芯片1200还可以包括输出接口1240。其中，处理器1210可以控制该输出接口1240与其他设备或芯片进行通信，具体地，可以向其他设备或芯片输出信息或数据。

可选地，该芯片可应用于本申请实施例中的应用处理器，并且该芯片可以实现本申请实施例的各个方法中由应用处理器实现的相应流程，为了简洁，在此不再赘述。

可选地，该芯片可应用于本申请实施例中的图像处理器，并且该芯片可以实现本申请实施例的各个方法中由图像处理器实现的相应流程，为了简洁，在此不再赘述。

应理解，本申请实施例提到的芯片还可以称为系统级芯片，系统芯片，芯片系统或片上系统芯片等。

图13是本申请实施例提供的一种通信系统/通信设备1300的示意性框图。如图13所示，该通信设备1300包括应用处理器1301和图像处理器1302。

应用处理器1301，被配置为响应模式切换指令，切换拍摄模式；所述拍摄模式切换过程包括参数配置阶段和平滑处理阶段；在所述拍摄模式切换过程处于平滑处理阶段的情况下，向所述图像处理器1302发送第一指令，所述第一指令用于指示执行平滑处理；以及，在所述拍摄模式切换过程处于参数配置阶段的情况下，向所述图像处理器1302发送第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置；

图像处理器1302，被配置为在拍摄模式切换过程处于平滑处理阶段的情况下，接收所述应用处理器1301发送的第一指令，所述第一指令用于指示执行平滑处理；和/或，在所述拍摄模式切换过程处于参数配置阶段的情况下，接收所述应用处理器1301发送的第二指令，所述第二指令用于指示所述图像处理器进行目标拍摄模式的参数配置。

可选地，所述应用处理器1301，还被配置为获取待拍摄场景的环境参数；确定与所述环境参数匹配的图像数量，所述图像数量是指拍摄模式切换过程中需要进行平滑处理的图像数量；向所述图像处理器1302发送第三指令，所述第三指令用于指示所述图像处理器1302基于所述图像数量执行所述平滑处理，以完成所述拍摄模式的切换。

相应的，所述图像处理器1302，还被配置为接收应用处理器1301发送的第三指令。

可选地，所述环境参数包括以下中的至少一项：

光通量、亮度、照度。

可选地，应用处理器1301，还被配置为确定经过所述平滑处理的累计图像数量；若所述累计图像数量与所述图像数量匹配，则确定完成所述拍摄模式切换过程中的平滑处理。

可选地，应用处理器1301，还被配置为在切换拍摄模式的过程中，若接收到待处理任务的请求指令，则向所述图像处理器1302发送第四指令，所述第四指令用于指示所述图像处理器1302停止所述拍摄模式切换过程中的所述平滑处理，所述待处理任务的优先级高于所述切换拍摄模式的优先级。

可选地，应用处理器1301，还被配置为若接收到所述待处理任务，则判断所述拍摄模式切换过程是否处于所述平滑处理的初始阶段；若所述拍摄模式切换过程处于所述平滑处理的初始阶段，则向所述图像处理器1302发送所述第四指令。

相应的，图像处理器1302，还被配置为接收所述应用处理器发送的第四指令，所述第四指令用于指示停止所述拍摄模式切换过程中的所述平滑处理。

可选地，应用处理器1301，还被配置为若拍摄模式切换方向从普通模式切换为夜景模式，确定本次拍摄模式切换已完成；若拍摄模式切换方向从夜景模式切换为普通模式，确定本次拍摄模式切换提前结束。

可选地，所述待处理任务包括SAT任务。

可选地，应用处理器1301，还被配置为接收模式切换指令，确定目标拍摄模式的第一标识信息和执行本次模式切换的目标图像传感器的第二标识信息；在所述第一标识信息与所述图像处理器当前拍摄模式的标识信息不同的情况下，确定当前图像传感器的标识信息是否为所述第二标识信息；在所述当前图像传感器的标识信息为所述第二标识信息的情况下，切换拍摄模式。

需要说明的是，该应用处理器1301可以用于实现上述方法中由应用处理器AP实现的相应的功能，以及该图像处理器1302可以用于实现上述方法中由图像处理器ISP实现的相应的功能为了简洁，在此不再赘述。

应理解，本申请实施例的处理器可能是一种集成电路芯片，具有信号的处理能力。在实现过程中，上述方法实施例的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器可以是通用处理器、数字信号处理器(Digital SignalProcessor，DSP)、专用集成电路(Application Specific Integrated Circuit，ASIC)、现成可编程门阵列(Field Programmable Gate Array，FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成，或者用译码处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器读取存储器中的信息，结合其硬件完成上述方法的步骤。

可以理解，本申请实施例中的存储器可以是易失性存储器或非易失性存储器，或可包括易失性和非易失性存储器两者。其中，非易失性存储器可以是只读存储器(Read-Only Memory，ROM)、可编程只读存储器(Programmable ROM，PROM)、可擦除可编程只读存储器(Erasable PROM，EPROM)、电可擦除可编程只读存储器(Electrically EPROM，EEPROM)或闪存。易失性存储器可以是随机存取存储器(Random Access Memory，RAM)，其用作外部高速缓存。通过示例性但不是限制性说明，许多形式的RAM可用，例如静态随机存取存储器(Static RAM，SRAM)、动态随机存取存储器(Dynamic RAM，DRAM)、同步动态随机存取存储器(Synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(Double Data RateSDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(Enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(Synchlink DRAM，SLDRAM)和直接内存总线随机存取存储器(DirectRambus RAM，DR RAM)。应注意，本文描述的系统和方法的存储器旨在包括但不限于这些和任意其它适合类型的存储器。

应理解，上述存储器为示例性但不是限制性说明，例如，本申请实施例中的存储器还可以是静态随机存取存储器(static RAM，SRAM)、动态随机存取存储器(dynamic RAM，DRAM)、同步动态随机存取存储器(synchronous DRAM，SDRAM)、双倍数据速率同步动态随机存取存储器(double data rate SDRAM，DDR SDRAM)、增强型同步动态随机存取存储器(enhanced SDRAM，ESDRAM)、同步连接动态随机存取存储器(synch link DRAM，SLDRAM)以及直接内存总线随机存取存储器(Direct Rambus RAM，DR RAM)等等。也就是说，本申请实施例中的存储器旨在包括但不限于这些和任意其它适合类型的存储器。

本申请实施例还提供了一种计算机存储介质，具体为计算机可读存储介质。其上存储有计算机指令，在计算机存储介质位于应用处理器和/或图像处理器时，该计算机指令被处理器执行时实现本申请实施例上述图像处理方法中的任意步骤。

在本申请所提供的几个实施例中，应该理解到，所揭露的设备和方法，可以通过其它的方式实现。以上所描述的设备实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，如：多个单元或组件可以结合，或可以集成到另一个系统，或一些特征可以忽略，或不执行。另外，所显示或讨论的各组成部分相互之间的耦合、或直接耦合、或通信连接可以是通过一些接口，设备或单元的间接耦合或通信连接，可以是电性的、机械的或其它形式的。

上述作为分离部件说明的单元可以是、或也可以不是物理上分开的，作为单元显示的部件可以是、或也可以不是物理单元，即可以位于一个地方，也可以分布到多个网络单元上；可以根据实际的需要选择其中的部分或全部单元来实现本实施例方案的目的。

另外，在本申请各实施例中的各功能单元可以全部集成在一个处理单元中，也可以是各单元分别单独作为一个单元，也可以至少两个单元集成在一个单元中；上述集成的单元既可以采用硬件的形式实现，也可以采用硬件加软件功能单元的形式实现。

本领域普通技术人员可以理解：实现上述方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成，前述的程序可以存储于一计算机可读取存储介质中，该程序在执行时，执行包括上述方法实施例的步骤；而前述的存储介质包括：移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

或者，本申请上述集成的单元如果以软件功能模块的形式实现并作为独立的产品销售或使用时，也可以存储在一个计算机可读取存储介质中。基于这样的理解，本申请实施例的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机、服务器、或者网络设备等)执行本申请各个实施例所述方法的全部或部分。而前述的存储介质包括：移动存储设备、ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。

需要说明的是：本申请实施例所记载的技术方案之间，在不冲突的情况下，可以任意组合。

以上所述，仅为本申请的具体实施方式，但本申请的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本申请揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本申请的保护范围之内。因此，本申请的保护范围应以所述权利要求的保护范围为准。