掌桥专利:专业的专利平台
掌桥专利
首页

图像处理方法、装置、电子设备及存储介质

文献发布时间:2023-06-19 19:18:24


图像处理方法、装置、电子设备及存储介质

技术领域

本发明涉及图像处理技术领域,尤其涉及一种图像处理方法、装置、电子设备及存储介质。

背景技术

目前,由于芯片内部电路的复杂性,使得在对芯片内部电路进行分析时,需要基于电子显微镜等器件采集高精度的芯片图像进行分析,但是在图像采集的过程中,可能存在很多外在因素(如环境因素)的影响,导致采集的图像中存在噪声,不足以符合芯片内部电路分析要求。

为了解决以上这种情况,现有技术中通过会采用对芯片进行重新拍摄的方式,采集无噪声的高精度图像以进行芯片内部电路分析,但是再次进行芯片整体的拍摄也是存在图像拍摄质量差的可能性,进而也会导致内部电路分析效果差的问题。

发明内容

本发明提供了一种图像处理方法、装置、电子设备及存储介质,以实现自动化采集补图图像,提高图像采集的便捷性,使得最终得到的目标对象图像是高质量的,进而达到提高目标对象内部电路分析准确性的技术效果。

根据本发明的一方面,提供了一种图像处理方法,该方法包括:

获取与预先拍摄的包括目标对象的待使用概貌图;其中,所述待使用概貌图中包括至少两个待触发点位;

确定所述至少两个待触发点位在第一坐标系下的待使用位置;其中,所述第一坐标系与电镜平台相对应,所述目标对象放置于所述电镜平台上;

基于各所述待使用位置、所述待使用概貌图的图像属性、以及预先确定的与所述目标对象相对应的至少一个图像补全信息,确定所述至少一个图像补全信息在所述第一坐标系下的待采集位置;

控制目标电镜移动至各所述待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;

基于各所述待使用补图图像以及待补全图像,确定目标补全图像;其中,所述待补全图像与所述目标对象或与所述目标对象相一致的已采样对象相对应。

根据本发明的另一方面,提供了一种图像处理装置,该装置包括:

待使用概貌图获取模块,用于获取与预先拍摄的包括目标对象的待使用概貌图;其中,所述待使用概貌图中包括至少两个待触发点位;

待使用位置确定模块,用于确定所述至少两个待触发点位在第一坐标系下的待使用位置;其中,所述第一坐标系与电镜平台相对应,所述目标对象放置于所述电镜平台上;

待采集位置确定模块,用于基于各所述待使用位置、所述待使用概貌图的图像属性、以及预先确定的与所述目标对象相对应的至少一个图像补全信息,确定所述至少一个图像补全信息在所述第一坐标系下的待采集位置;

待使用补图图像确定模块,用于控制目标电镜移动至各所述待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;

目标补全图像确定模块,用于基于各所述待使用补图图像以及待补全图像,确定目标补全图像;其中,所述待补全图像与所述目标对象或与所述目标对象相一致的已采样对象相对应。

根据本发明的另一方面,提供了一种电子设备,所述电子设备包括:

至少一个处理器;以及

与所述至少一个处理器通信连接的存储器;其中,

所述存储器存储有可被所述至少一个处理器执行的计算机程序,所述计算机程序被所述至少一个处理器执行,以使所述至少一个处理器能够执行本发明任一实施例所述的图像处理方法。

根据本发明的另一方面,提供了一种计算机可读存储介质,所述计算机可读存储介质存储有计算机指令,所述计算机指令用于使处理器执行时实现本发明任一实施例所述的图像处理方法。

本发明实施例的技术方案,通过获取包括目标对象的待使用概貌图;确定待使用概貌图中至少两个待触发点位在第一坐标系下的待使用位置;基于各待使用位置、待使用概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置;控制目标电镜移动至各待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;基于各待使用补图图像以及待补全图像,确定目标补全图像,解决了现有技术中重复对芯片进行图像采集,导致图像采集效率低、质量差的问题,实现了通过对目标对象的待使用概貌图中点位进行标记,确定触发点位在第一坐标系下的待使用位置,进而基于多个待使用位置、概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定每个图像补全信息在第一坐标系下对应的待采集位置,自动控制电镜到待采集位置处采集图像,实现补图图像采集的自动化,得到待使用补图图像,并将待使用补图图像补至待补全图像中,得到目标补全图像,提高图像采集的便捷性和有效性,使得最终得到的目标对象图像是高质量的,进而达到提高目标对象内部电路分析准确性的技术效果。

应当理解,本部分所描述的内容并非旨在标识本发明的实施例的关键或重要特征,也不用于限制本发明的范围。本发明的其它特征将通过以下的说明书而变得容易理解。

附图说明

为了更清楚地说明本发明实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是根据本发明实施例一提供的一种图像处理方法的流程图;

图2是根据本发明实施例二所提供的操作页面示例图;

图3是根据本发明实施例三提供的一种图像处理装置的结构示意图;

图4是实现本发明实施例的图像处理方法的电子设备的结构示意图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案,下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分的实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都应当属于本发明保护的范围。

需要说明的是,本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或单元的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或单元,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

实施例一

图1是根据本发明实施例一提供的一种图像处理方法的流程图,本实施例可适用于补图的情况,该方法可以由图像处理装置来执行,该图像处理装置可以采用硬件和/或软件的形式实现,该图像处理装置可配置于计算设备中。如图1所示,该方法包括:

S110、获取与预先拍摄的包括目标对象的待使用概貌图。

需要说明的是,在实际应用中,在采集了关于某个物体的高精度图像之后,可能存在高精度图像中的某些区域是不清楚的情况,此时可以在与该物体相一致的物体(如相同产品)上找到需要补全高精度图像中不清楚区域的位置进行图像采集,以将采集的图像补至不清楚区域上。目标对象可以是与需要被补全的图像中的物体相一致的物体,如可以为芯片、主板、集成电路等。待使用概貌图可以用于反映目标对象大致的状态,如可以为正面图或全貌图。待使用概貌图可以是基于摄像装置对目标对象进行拍摄得到的包含目标对象的图像,可以将拍摄得到的待使用概貌图存储在某个缓存位置的,以被调用。待使用概貌图中包括至少两个待触发点位。待触发点位可以为需要被触发的点位,如可以为左上角、右下角、右上角、中间位置等等。

具体的,可以通过接口从存储待使用概貌图的缓存位置处调取出包括目标对象的待使用概貌图。

为了提高补图的自动化和便捷性,获取与预先拍摄的包括目标对象的待使用概貌图的实现方式可以是:当检测到触发加载图像控件时,显示路径编辑框;在接收到在路径编辑框中输入的路径信息时,显示与路径信息相对应的概貌图列表;将在概貌图列表中触发选择的历史概貌图作为待使用概貌图并显示。

其中,加载图像控件可以为用于加载图像的按钮,路径编辑框可以为用于键盘输入和编辑文本的矩形窗口,用户可通过该窗口编辑各种文本、数字或者口令。概貌图列表中包括至少一个与目标对象对应的历史概貌图,每个历史概貌图可以有规律的区分开展示,使得页面内容更清晰。

在本实施例中,可以当用户点击了系统页面上的加载图像控件时,认为触发了加载图像控件;也可以是在用户利用键盘输入“加载图像”对应的快捷键(如快捷键I)时,认为系统检测到了触发加载图像控件。此时可以直接显示概貌图列表,也可以显示路径编辑框,用户可以在磁盘中查找概貌图,在用户点击了磁盘中某个文件时,该文件对应的路径信息可以显示在路径编辑框中,显示与该路径信息相对应的概貌图列表,还可以是在显示路径编辑框之后,用户可以在路径编辑框中输入概貌图列表相对应的路径信息,在触发路径确认控件时,显示与该路径信息相对应的概貌图列表。用户可以通过点击概貌图列表中的历史概貌图,将点击选择出的历史概貌图作为待使用概貌图并加载到系统中,之后,还可以将待使用概貌图显示在系统页面中,以使在显示的待使用概貌图上确定待触发点位。

S120、确定至少两个待触发点位在第一坐标系下的待使用位置。

其中,第一坐标系与电镜平台相对应,目标对象放置于电镜平台上。电镜平台可以是扫描电镜,如电子显微镜,用于采集目标对象的高精度图像。

在本实施例中,可以通过对待使用概貌图中目标对象的轮廓进行识别,识别出某些位置(如左上角、右下角等位置),可以将这些位置作为待触发点位,进一步的,可以确定出在待使用概貌图中的待触发点位在放置于电镜平台中目标对象上的哪个位置,可以将该位置作为待触发点位在第一坐标系下的待使用位置,以使后续基于待使用位置确定目标对象的尺寸,进而确定补图位置。

为了提高对目标对象尺寸确定的准确性,以及保证后续确定补图位置的准确性,可以通过用户基于显示的待使用概貌图进行点位的选取。具体来说,在确定至少两个待触发点位在第一坐标系下的待使用位置之前,还包括:当检测到触发位置标记控件时,基于用户对待使用概貌图的触发操作,确定出位于待使用概貌图中的至少两个待触发点位,并将待触发点位进行标注显示。

其中,位置标记控件可以为用于启动执行标记位置功能的按钮。

在本实施例中,用户可以通过点击系统页面的位置标记控件,或者还可以利用键盘输入快捷键,触发位置标记控件,此时允许用户在待使用概貌图上进行位置点标记,用户可以通过点击待使用概貌图上的位置,选择待触发点位,相应的从待使用概貌图中选择出至少两个待触发点位。还可以将选择的待触发点位在待使用概貌图中进行区别显示。如,可以将该点位高亮显示,更改颜色显示,或图标显示等。

在本实施例中,为了更好地从待使用概貌图中选择出待触发点位,还可以根据实际情况使用鼠标滚轮缩放图片,支持2倍、4倍、0.5倍、0.25倍、0.125倍几种缩放倍率,还可以点击“移动图像”按钮,使用鼠标点击或拖动待使用概貌图,可移动图像的位置,还可以点击“跳至原点”按钮,自动将移动过的图像重新移动回初始加载状态。可以通过将待使用概貌图缩放至一定大小或移动至一定位置后,在显示的待使用概貌图中选择待触发点位。

需要说明的是,在将待使用概貌图导入系统之后,此时待使用概貌图中目标对象的各部位位置是处于系统坐标系下的,可以通过将待触发点位在系统坐标系下的位置信息进行位置转换,得到待触发点位在第一坐标系下的待使用位置。可选的,确定至少两个待触发点位在第一坐标系下的待使用位置的实现方式可以为:对于至少两个待触发点位,基于预先确定的坐标转换矩阵对当前待触发点位在待使用概貌图中的位置信息进行处理,得到待触发点位在第一坐标系下的待使用位置。

其中,坐标转换矩阵可以为系统坐标系与第一坐标系之间的旋转平移矩阵。确定每个待触发点位在第一坐标系下的待使用位置的方式均相同,可以以其中任一待触发点位作为当前待触发点位进行说明。

在本实施例中,可以通过利用坐标转换矩阵对当前待触发点位在待使用概貌图中的位置信息进行平移旋转处理,得到待触发点位在第一坐标系下的待使用位置。例如,待触发点位为待使用概貌图的左上角及右下角位置,经坐标转换矩阵处理,两个待触发点位在电镜平台上的坐标分别为A(xa,ya)、B(xb,yb)。

S130、基于各待使用位置、待使用概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置。

其中,图像属性可以为图像的分辨率。图像补全信息可以为目标对象中需要被补全的位置信息,如目标对象的中心点,左上位置,右下位置等等。

在本实施例中,可以通过解析待使用概貌图,得到待使用概貌图的分辨率作为图像属性。还可以调取与目标对象相对应的至少一个图像补全信息,如,可以通过点击系统页面的补全位置加载按钮,加载预先编辑好的需要补图位置的坐标,作为图像补全信息,可以将加载的图像补全信息显示在系统页面。如果图像补全信息的数量为多个,可以选择其中的某个图像补全信息,再结合各待使用位置和图像属性,确定该图像补全信息在第一坐标系下的待采集位置,以基于该待采集位置进行补图的采集;还可以是在加载多个图像补全信息之后,基于加载顺序依次确定每个图像补全信息在第一坐标系下的待采集位置,以使电镜平台可以依次采集各待采集位置对应的目标对象的高精度图像,提高补图采集的便捷性。

在本实施例中,基于各待使用位置、待使用概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置的实现方式可以是:基于各待使用位置和图像属性,确定待使用概貌图的像素尺寸;基于各待使用位置、像素尺寸和至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置。

其中,像素尺寸是指像素大小,包含横向尺寸(宽)和纵向尺寸(高)。

在实际应用中,可以将各待使用位置和图像属性作为计算像素尺寸的函数的入参,解算出待使用概貌图的像素尺寸。可选的,图像属性可以为分辨率,分辨率是指显示的像素个数,包括水平像素数为和垂直像素数,例如,分辨率160×128是指水平像素数为160个,垂直像素数128个。基于各待使用位置和图像属性,确定目标对象的像素尺寸的实现方式可以为:基于各待使用位置,确定目标对象的尺寸信息;基于分辨率和尺寸信息,确定像素尺寸。具体的,待使用位置可以分别为图像左上角和右下角的位置,可以将两个待使用位置的横坐标相减,得到横向距离,将两个待使用位置的纵坐标相减,得到纵向距离,可以将横向距离作为目标对象的宽,将纵向距离作为目标对象的高,基于目标对象的高和宽,得到目标对象的尺寸。进一步的,可以将目标对象的高与分辨率中的垂直像素数作商,得到商值作为待使用概貌图纵向的像素尺寸,可以将目标对象的宽与分辨率中的水平像素数作商,得到商值作为待使用概貌图横向的像素尺寸,可以基于待使用概貌图的横向的像素尺寸和纵向的像素尺寸确定待使用概貌图的像素尺寸。示例性的,假设目标对象为芯片A,各待使用位置的坐标分别为A(xa,ya)、B(xb,yb),可以计算出芯片A的尺寸为:横向尺寸

进一步的,在确定待使用概貌图的像素尺寸之后,可以通过像素尺寸、待使用位置,以及至少一个图像补全信息,解算出每个图像补全信息在第一坐标系下的待采集位置。具体来说,基于各待使用位置、像素尺寸和至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置的实现方式可以是:对于至少一个图像补全信息,基于像素尺寸和当前图像补全信息,确定与当前图像补全信息对应的中间值;从各待使用位置中确定出待处理位置,并基于待处理位置和中间值,确定当前图像补全信息在第一坐标系下的待采集位置。

需要说明的是,图像补全信息中包括横向补全坐标和纵向补全坐标。确定每个图像补全信息在第一坐标系下的待采集位置的方式均相同,可以以其中任一图像补全信息作为当前图像补全信息进行说明。

在本实施例中,可以将横向补全坐标和像素尺寸中的横向像素尺寸进行乘积处理,得到的乘积值作为中间值,将纵向补全坐标和像素尺寸中的纵向像素尺寸进行乘积处理,也将得到的乘积值作为中间值。可以将各待使用位置中左上角位置的位置信息作为待处理位置。进一步的,可以将基于横向补全坐标和横向像素尺寸确定的中间值与待处理位置中的横向补全坐标进行相加,得到的和值作为当前图像补全信息在第一坐标系下的横向坐标,将基于纵向补全坐标和纵向像素尺寸确定的中间值与待处理位置中的纵向补全坐标进行相加,得到的和值作为当前图像补全信息在第一坐标系下的纵向坐标,可以基于当前图像补全信息在第一坐标系下的横向坐标和纵向坐标,确定待采集位置,此时待采集位置是相对于电镜平台下的位置信息,以使控制电镜平台的电子显微镜移动至该待采集位置进行图像采集。

示例性的,假设像素尺寸为(px,py),目标对象需要补图的位置坐标(即图像补全信息)为(cx,cy),待使用位置为A(xa,ya),根据补图位置坐标、待使用位置及像素尺寸,可计算出电镜平台上芯片位置坐标(即待采集位置),芯片位置坐标为(xa+cx*px,ya+cy*py)。

S140、控制目标电镜移动至各待采集位置,以得到在相应待采集位置下所对应的待使用补图图像。

其中,目标电镜可以是电子显微镜。

具体的,在确定各待采集位置之后,可以依次控制目标电镜移动至各待采集位置,并在移动至当前待采集位置时进行拍摄,得到在相应待采集位置下所对应的待使用补图图像,此时待使用补图图像中的部位信息是与图像补全信息相匹配的。示例性的,可根据待采集位置操作电镜平台定位到预补图位置,控制电镜平台到指定位置并自动抓取图像,实现补图的全自动化。

S150、基于各待使用补图图像以及待补全图像,确定目标补全图像。

其中,待补全图像与目标对象或与目标对象相一致的已采样对象相对应。需要说明的是,在实际补图场景中,可能存在对某个产品采完高精度图像之后,该产品(即已采样对象)可能应用到后续工序中,但是又需要对高精度图像中产品的某些位置进行图像补全,此时可以使用与已采样对象相一致的产品作为目标对象对其进行部位采样,以补全至已采样对象的高精度图像(即待补全图像)中。

在本实施例中,可以将各待使用补图图像填补至待补全图像中,得到补全后的图像作为目标补全图像。例如,可以根据待使用补图图像对应的图像补全信息,将待使用补图图像准确的补全至待补全图像中与图像补全信息相匹配的区域。

本实施例的技术方案,通过获取包括目标对象的待使用概貌图;确定待使用概貌图中至少两个待触发点位在第一坐标系下的待使用位置;基于各待使用位置、待使用概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置;控制目标电镜移动至各待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;基于各待使用补图图像以及待补全图像,确定目标补全图像,解决了现有技术中重复对芯片进行图像采集,导致图像采集效率低、质量差的问题,实现了通过对目标对象的待使用概貌图中点位进行标记,确定触发点位在第一坐标系下的待使用位置,进而基于多个待使用位置、概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定每个图像补全信息在第一坐标系下对应的待采集位置,自动控制电镜到待采集位置处采集图像,实现补图图像采集的自动化,得到待使用补图图像,并将待使用补图图像补至待补全图像中,得到目标补全图像,提高图像采集的便捷性和有效性,使得最终得到的目标对象图像是高质量的,进而达到提高目标对象内部电路分析准确性的技术效果。

实施例二

作为上述实施例的一可选实施例,为了使本领域技术人员进一步清楚本发明实施例的技术方案,给出具体的应用场景实例。具体的,可以参见下述具体内容。

示例性的,可以拍摄芯片(即目标对象)的概貌图(即待使用概貌图),获取概貌图的分辨率ix*iy。然后将需要补图的芯片放入扫描电镜中,找到概貌图左上角及右下角的待触发点位对应的在电镜平台中芯片上的位置(即待使用位置),分别记录芯片在电镜平台上的待使用位置,记为A(xa,ya)、B(xb,yb)。根据A、B坐标值,可以计算出芯片的尺寸为:横向尺寸

为了进一步提高补图的自动化和便捷性,还可以通过在系统页面中点击页面上的菜单“高级”控件,使下拉出菜单“高级”控件下的多个功能进行展示,如补图功能和区域拍照。可以通过点击补图功能对应控件,或者输入打开补图功能对应的快捷键,打开补图功能的操作页面,操作页面如图2所示。可以通过触发操作页面中加载图像控件选择概貌图,将选择的概貌图展示在“待使用概貌图展示栏”,还可根据实际情况通过点击“缩放图像”控件启动缩放功能,并使用鼠标滚轮缩放展示栏中概貌图,支持2倍、4倍、0.5倍、0.25倍、0.125倍等多种缩放倍率。还可以点击“移动图像”控件启动移动功能,并使用鼠标点击、拖动移动展示栏中概貌图位置。还可以点击“跳至原点”控件,自动将移动过的概貌图重新移动回窗口左上角的初始位置。在将需要补拍的芯片放入电子显微镜中调整好位置后,可以点击“位置标记控件(包括标记起始点和标记结束点)”,并点击概貌图中的点位,标记点位,找到标记点位在电子显微镜成像下的位置。不同的编辑点可以分别以不同颜色的标记显示在概貌图中。进一步的,可以点击加载位置控件加载事先标记好的需要补图位置的坐标(即图像补全信息),并将多个图像补全信息展示在“图像补全信息展示栏”,点击展示栏中的坐标,会在概貌图上显示该坐标位置并标注显示(如以红圈十字作为提示),画面会自动以该位置居中显示,同时移动电子显微镜平台到该位置,自动抓取图像。

本实施例的技术方案,通过获取包括目标对象的待使用概貌图;确定待使用概貌图中至少两个待触发点位在第一坐标系下的待使用位置;基于各待使用位置、待使用概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置;控制目标电镜移动至各待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;基于各待使用补图图像以及待补全图像,确定目标补全图像,解决了现有技术中重复对芯片进行图像采集,导致图像采集效率低、质量差的问题,实现了通过对目标对象的待使用概貌图中点位进行标记,确定触发点位在第一坐标系下的待使用位置,进而基于多个待使用位置、概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定每个图像补全信息在第一坐标系下对应的待采集位置,自动控制电镜到待采集位置处采集图像,实现补图图像采集的自动化,得到待使用补图图像,并将待使用补图图像补至待补全图像中,得到目标补全图像,提高图像采集的便捷性和有效性,使得最终得到的目标对象图像是高质量的,进而达到提高目标对象内部电路分析准确性的技术效果。

实施例三

图3是根据本发明实施例三提供的一种图像处理装置的结构示意图。如图3所示,该装置包括:待使用概貌图获取模块310、待使用位置确定模块320、待采集位置确定模块330、待使用补图图像确定模块340和目标补全图像确定模块350。

其中,待使用概貌图获取模块310,用于获取与预先拍摄的包括目标对象的待使用概貌图;其中,所述待使用概貌图中包括至少两个待触发点位;待使用位置确定模块320,用于确定所述至少两个待触发点位在第一坐标系下的待使用位置;其中,所述第一坐标系与电镜平台相对应,所述目标对象放置于所述电镜平台上;待采集位置确定模块330,用于基于各所述待使用位置、所述待使用概貌图的图像属性、以及预先确定的与所述目标对象相对应的至少一个图像补全信息,确定所述至少一个图像补全信息在所述第一坐标系下的待采集位置;待使用补图图像确定模块340,用于控制目标电镜移动至各所述待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;目标补全图像确定模块350,用于基于各所述待使用补图图像以及待补全图像,确定目标补全图像;其中,所述待补全图像与所述目标对象或与所述目标对象相一致的已采样对象相对应。

本实施例的技术方案,通过获取包括目标对象的待使用概貌图;确定待使用概貌图中至少两个待触发点位在第一坐标系下的待使用位置;基于各待使用位置、待使用概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定至少一个图像补全信息在第一坐标系下的待采集位置;控制目标电镜移动至各待采集位置,以得到在相应待采集位置下所对应的待使用补图图像;基于各待使用补图图像以及待补全图像,确定目标补全图像,解决了现有技术中重复对芯片进行图像采集,导致图像采集效率低、质量差的问题,实现了通过对目标对象的待使用概貌图中点位进行标记,确定触发点位在第一坐标系下的待使用位置,进而基于多个待使用位置、概貌图的图像属性、以及预先确定的与目标对象相对应的至少一个图像补全信息,确定每个图像补全信息在第一坐标系下对应的待采集位置,自动控制电镜到待采集位置处采集图像,实现补图图像采集的自动化,得到待使用补图图像,并将待使用补图图像补至待补全图像中,得到目标补全图像,提高图像采集的便捷性和有效性,使得最终得到的目标对象图像是高质量的,进而达到提高目标对象内部电路分析准确性的技术效果。

在上述装置的基础上,可选的,所述待使用概貌图获取模块310,包括路径编辑框显示单元、概貌图列表显示单元、和待使用概貌图确定单元。

路径编辑框显示单元,用于当检测到触发加载图像控件时,显示路径编辑框;

概貌图列表显示单元,用于在接收到在所述路径编辑框中输入的路径信息时,显示与所述路径信息相对应的概貌图列表;其中,所述概貌图列表中包括至少一个与所述目标对象对应的历史概貌图;

待使用概貌图确定单元,用于将在所述概貌图列表中触发选择的历史概貌图作为所述待使用概貌图并显示。

在上述装置的基础上,可选的,所述装置还包括待触发点位确定模块。

待触发点位确定模块,用于当检测到触发位置标记控件时,基于用户对所述待使用概貌图的触发操作,确定出位于所述待使用概貌图中的至少两个待触发点位,并将所述待触发点位进行标注显示。

在上述装置的基础上,可选的,所述待使用位置确定模块320,具体用于对于所述至少两个待触发点位,基于预先确定的坐标转换矩阵对当前待触发点位在所述待使用概貌图中的位置信息进行处理,得到所述待触发点位在第一坐标系下的待使用位置。

在上述装置的基础上,可选的,待采集位置确定模块330包括:像素尺寸确定单元和待采集位置确定单元。

像素尺寸确定单元,用于基于各所述待使用位置和所述图像属性,确定所待使用概貌图的像素尺寸;

待采集位置确定单元,用于基于各所述待使用位置、所述像素尺寸和所述至少一个图像补全信息,确定所述至少一个图像补全信息在所述第一坐标系下的待采集位置。

在上述装置的基础上,可选的,所述图像属性包含分辨率,像素尺寸确定单元包括:尺寸信息确定子单元和像素尺寸确定子单元。

尺寸信息确定子单元,用于基于各所述待使用位置,确定所述目标对象的尺寸信息;

像素尺寸确定子单元,用于基于所述分辨率和所述尺寸信息,确定所述像素尺寸。

在上述装置的基础上,可选的,像素尺寸确定单元包括:中间值确定子单元和待采集位置确定子单元。

中间值确定子单元,用于对于所述至少一个图像补全信息,基于所述像素尺寸和当前图像补全信息,确定与所述当前图像补全信息对应的中间值;

待采集位置确定子单元,用于从各所述待使用位置中确定出待处理位置,并基于所述待处理位置和所述中间值,确定所述当前图像补全信息在所述第一坐标系下的待采集位置。

本发明实施例所提供的图像处理装置可执行本发明任意实施例所提供的图像处理方法,具备执行方法相应的功能模块和有益效果。

实施例四

图4是实现本发明实施例的图像处理方法的电子设备的结构示意图。电子设备旨在表示各种形式的数字计算机,诸如,膝上型计算机、台式计算机、工作台、个人数字助理、服务器、刀片式服务器、大型计算机、和其它适合的计算机。电子设备还可以表示各种形式的移动装置,诸如,个人数字处理、蜂窝电话、智能电话、可穿戴设备(如头盔、眼镜、手表等)和其它类似的计算装置。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例,并且不意在限制本文中描述的和/或者要求的本发明的实现。

如图4所示,电子设备10包括至少一个处理器11,以及与至少一个处理器11通信连接的存储器,如只读存储器(ROM)12、随机访问存储器(RAM)13等,其中,存储器存储有可被至少一个处理器执行的计算机程序,处理器11可以根据存储在只读存储器(ROM)12中的计算机程序或者从存储单元18加载到随机访问存储器(RAM)13中的计算机程序,来执行各种适当的动作和处理。在RAM 13中,还可存储电子设备10操作所需的各种程序和数据。处理器11、ROM 12以及RAM 13通过总线14彼此相连。输入/输出(I/O)接口15也连接至总线14。

电子设备10中的多个部件连接至I/O接口15,包括:输入单元16,例如键盘、鼠标等;输出单元17,例如各种类型的显示器、扬声器等;存储单元18,例如磁盘、光盘等;以及通信单元19,例如网卡、调制解调器、无线通信收发机等。通信单元19允许电子设备10通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据。

处理器11可以是各种具有处理和计算能力的通用和/或专用处理组件。处理器11的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的处理器、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。处理器11执行上文所描述的各个方法和处理,例如图像处理方法。

在一些实施例中,图像处理方法可被实现为计算机程序,其被有形地包含于计算机可读存储介质,例如存储单元18。在一些实施例中,计算机程序的部分或者全部可以经由ROM 12和/或通信单元19而被载入和/或安装到电子设备10上。当计算机程序加载到RAM 13并由处理器11执行时,可以执行上文描述的图像处理方法的一个或多个步骤。备选地,在其他实施例中,处理器11可以通过其他任何适当的方式(例如,借助于固件)而被配置为执行图像处理方法。

本文中以上描述的系统和技术的各种实施方式可以在数字电子电路系统、集成电路系统、场可编程门阵列(FPGA)、专用集成电路(ASIC)、专用标准产品(ASSP)、芯片上系统的系统(SOC)、负载可编程逻辑设备(CPLD)、计算机硬件、固件、软件、和/或它们的组合中实现。这些各种实施方式可以包括:实施在一个或者多个计算机程序中,该一个或者多个计算机程序可在包括至少一个可编程处理器的可编程系统上执行和/或解释,该可编程处理器可以是专用或者通用可编程处理器,可以从存储系统、至少一个输入装置、和至少一个输出装置接收数据和指令,并且将数据和指令传输至该存储系统、该至少一个输入装置、和该至少一个输出装置。

用于实施本发明的方法的计算机程序可以采用一个或多个编程语言的任何组合来编写。这些计算机程序可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,使得计算机程序当由处理器执行时使流程图和/或框图中所规定的功能/操作被实施。计算机程序可以完全在机器上执行、部分地在机器上执行,作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。

在本发明的上下文中,计算机可读存储介质可以是有形的介质,其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的计算机程序。计算机可读存储介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备,或者上述内容的任何合适组合。备选地,计算机可读存储介质可以是机器可读信号介质。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。

为了提供与用户的交互,可以在电子设备上实施此处描述的系统和技术,该电子设备具有:用于向用户显示信息的显示装置(例如,CRT(阴极射线管)或者LCD(液晶显示器)监视器);以及键盘和指向装置(例如,鼠标或者轨迹球),用户可以通过该键盘和该指向装置来将输入提供给电子设备。其它种类的装置还可以用于提供与用户的交互;例如,提供给用户的反馈可以是任何形式的传感反馈(例如,视觉反馈、听觉反馈、或者触觉反馈);并且可以用任何形式(包括声输入、语音输入或者、触觉输入)来接收来自用户的输入。

可以将此处描述的系统和技术实施在包括后台部件的计算系统(例如,作为数据服务器)、或者包括中间件部件的计算系统(例如,应用服务器)、或者包括前端部件的计算系统(例如,具有图形用户界面或者网络浏览器的用户计算机,用户可以通过该图形用户界面或者该网络浏览器来与此处描述的系统和技术的实施方式交互)、或者包括这种后台部件、中间件部件、或者前端部件的任何组合的计算系统中。可以通过任何形式或者介质的数字数据通信(例如,通信网络)来将系统的部件相互连接。通信网络的示例包括:局域网(LAN)、广域网(WAN)、区块链网络和互联网。

计算系统可以包括客户端和服务器。客户端和服务器一般远离彼此并且通常通过通信网络进行交互。通过在相应的计算机上运行并且彼此具有客户端-服务器关系的计算机程序来产生客户端和服务器的关系。服务器可以是云服务器,又称为云计算服务器或云主机,是云计算服务体系中的一项主机产品,以解决了传统物理主机与VPS服务中,存在的管理难度大,业务扩展性弱的缺陷。

应该理解,可以使用上面所示的各种形式的流程,重新排序、增加或删除步骤。例如,本发明中记载的各步骤可以并行地执行也可以顺序地执行也可以不同的次序执行,只要能够实现本发明的技术方案所期望的结果,本文在此不进行限制。

上述具体实施方式,并不构成对本发明保护范围的限制。本领域技术人员应该明白的是,根据设计要求和其他因素,可以进行各种修改、组合、子组合和替代。任何在本发明的精神和原则之内所作的修改、等同替换和改进等,均应包含在本发明保护范围之内。

相关技术
  • 夜景图像处理方法、装置、电子设备及存储介质
  • 人脸图像的处理方法及装置、电子设备和存储介质
  • 图像处理方法和装置、电子设备、计算机可读存储介质
  • 图像处理方法、装置、电子设备及计算机可读存储介质
  • 图像处理方法、装置、存储介质及电子设备
  • 图像处理方法、图像处理装置、电子设备和存储介质
  • 图像处理方法、图像处理装置、电子设备和可读存储介质
技术分类

06120115862245