掌桥专利:专业的专利平台
掌桥专利
首页

影像质量评估方法、装置、电子设备及存储介质

文献发布时间:2023-06-19 10:38:35


影像质量评估方法、装置、电子设备及存储介质

技术领域

本发明涉及影像质量评估技术领域,尤其涉及一种影像质量评估方法、装置、电子设备及存储介质。

背景技术

随着技术的发展,机器成像的方式已成为疾病检查的主要手段。机器成像可包括CT影像以及核磁共振影像等,影像质量好坏将直接影响医生的诊断结果。为此,对影像质量进行评估至关重要。

目前,影像质量评估方法通常是通过人工评估的方式实现,这种评估方式主观性太强,导致不同人的评估结果存在差异,不利于客观的评价影像质量。

发明内容

本发明提供一种影像质量评估方法、装置、电子设备及存储介质,用以解决现有技术中存在的缺陷。

本发明提供一种影像质量评估方法,包括:

获取待评估影像;

将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;

其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;

所述质量评估模型基于携带有质量标签的影像样本训练得到。

根据本发明提供的一种影像质量评估方法,所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,具体包括:

将所述待评估影像输入至所述质量评估模型的完整性维度评估层,得到所述完整性维度评估层输出的完整性维度的评估结果;

将所述待评估影像输入至所述质量评估模型的内容维度评估层,得到所述内容维度评估层输出的内容维度的评估结果;

将所述完整性维度的评估结果以及所述内容维度的评估结果输入至所述质量评估模型的融合层,得到所述融合层输出的所述质量评估结果。

根据本发明提供的一种影像质量评估方法,所述将所述待评估影像输入至所述质量评估模型的完整性维度评估层,得到所述完整性维度评估层输出的完整性维度的评估结果,具体包括:

将所述待评估影像输入至所述完整性维度评估层,由所述完整性维度评估层从完整性维度下的不同完整性子维度对所述待评估影像进行评估,并对不同完整性子维度的评估结果进行加权求和,得到并输出所述完整性维度的评估结果;

其中,所述完整性子维度至少包含如下两项子维度中的任一项:

影像是否缺损或丢失;

影像中切片层数是否完整。

根据本发明提供的一种影像质量评估方法,所述将所述待评估影像输入至所述质量评估模型的内容维度评估层,得到所述内容维度评估层输出的内容维度的评估结果,具体包括:

将所述待评估影像输入至所述内容维度评估层,由所述内容维度评估层从内容维度下的不同内容子维度对所述待评估影像进行评估,并对不同内容子维度的评估结果进行加权求和,得到并输出所述内容维度的评估结果;

其中,所述内容子维度至少包含如下两项子维度中的任一项:

影像中是否存在目标对象;

影像是否清晰。

根据本发明提供的一种影像质量评估方法,所述待评估影像包括每一影像采集员采集得到的多个第一影像;相应地,

所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,之后还包括:

基于每一影像采集员对应的所有第一影像的质量评估结果,确定所有影像采集员对应的整体质量评估期望以及所有影像采集员中目标影像采集员对应的目标质量评估期望;

基于所述整体质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的初步采集质量评估结果。

根据本发明提供的一种影像质量评估方法,所述待评估影像包括所述目标影像采集员采集得到的分属于多种影像类型的第二影像;相应地,

所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,之后还包括:

基于每种影像类型的第二影像的质量评估结果,确定所述目标影像采集员对应的类型无关性质量评估期望;

基于所述类型无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的类型无关性采集质量评估结果。

根据本发明提供的一种影像质量评估方法,所述待评估影像包括所述目标影像采集员采集得到的分属于多种被试者群体的第三影像;相应地,

所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,之后还包括:

基于每种被试者群体的第三影像的质量评估结果,确定所述目标影像采集员对应的被试者群体无关性质量评估期望;

基于所述被试者群体无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的被试者群体无关性采集质量评估结果。

根据本发明提供的一种影像质量评估方法,所述基于所述被试者群体无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的被试者群体无关性采集质量评估结果,之后还包括:

基于所述目标影像采集员对应的初步采集质量评估结果、类型无关性采集质量评估结果以及被试者群体无关性采集质量评估结果,确定所述目标影像采集员对应的综合采集质量评估结果。

本发明还提供一种影像质量评估装置,包括:影像获取模块和质量评估模块。其中,

影像获取模块用于获取待评估影像;

质量评估模块用于将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;

其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;

所述质量评估模型基于携带有质量标签的影像样本训练得到。

本发明还提供一种电子设备,包括存储器、处理器及存储在所述存储器上并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现如上述任一种所述影像质量评估方法的步骤。

本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现如上述任一种所述影像质量评估方法的步骤。

本发明提供的影像质量评估方法、装置、电子设备及存储介质,首先获取待评估影像,然后通过质量评估模型实现对待评估影像的质量评估,可以使得到待评估影像的质量评估结果更准确。而且,在质量评估过程中,不需要引入人为操作,可以避免质量评估结果受到人为因素的影像,可以使质量评估结果更客观。

附图说明

为了更清楚地说明本发明或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1是本发明提供的影像质量评估方法的流程示意图;

图2是本发明提供的影像质量评估装置的流程示意图;

图3是本发明提供的电子设备的结构示意图。

具体实施方式

为使本发明的目的、技术方案和优点更加清楚,下面将结合本发明中的附图,对本发明中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

由于目前的影像质量评估方法通常是通过人工评估的方式实现,这种评估方式主观性太强,导致不同人的评估结果存在差异,不利于客观的评价影像质量。为此,本发明实施例中提供了一种影像质量评估方法,以解决现有技术中存在的技术问题。

图1为本发明实施例中提供的一种影像质量评估方法的流程示意图,如图1所示,该方法包括:

S1,获取待评估影像;

S2,将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;

其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;

所述质量评估模型基于携带有质量标签的影像样本训练得到。

具体地,本发明实施例中提供的影像质量评估方法,其执行主体为服务器,既可以是本地服务器,也可以是云端服务器,本地服务器可以是计算机、平板电脑或者智能手机等,本发明实施例中对此不作具体限定。

首先执行步骤S1,获取到待评估影像,待评估影像是指需要对其质量进行评估的影像。待评估影像可以脑影像,也可以是其他部位的影像。既可以是CT影像,也可以是核磁共振影像,待评估影像的影像类型可以包括结构像、功能像以及弥散张量成像等,结构像可以包括灰质结构像和白质结构像等,功能像是指在完成某种预先设定的任务的情况下获取的影像,预先设定的任务可以包括识字造词、几何认知等。

其次执行步骤S2,将步骤S1获取的待评估影像输入至质量评估模型,由该质量评估模型对待评估影像从完整性和内容两个维度进行评估,并基于两个维度的评估结果对待评估影像进行质量评估,得到并输出待评估影像的质量评估结果。从完整性维度进行评估是指从待评估影像是否完整的角度对待评估影像的质量进行评估,也即判断待评估影像是否完整,例如待评估影像是否缺损或丢失、待评估影像中切片层数是否完整等。这是因为每种类型的影像都需要采集一定数量的横切片,例如灰质结构像需要采集不少于1000张。

从内容维度进行评估是指从待评估影像中包含的内容的角度对待评估影像的质量进行评估,也即判断待评估影像中包含的内容是否符合预设要求,例如待评估影像中包含的内容是否包含有目标对象、待评估影像中包含的内容是否可以清晰显示等。

然后根据完整性维度的评估结果以及内容维度的评估结果,将两个评估结果相结合,从整体的角度对待评估影像的质量进行评估,得到待评估影像的质量评估结果。其中,结合的方式可以是将两个评估结果进行加权求和,也可以是求均值,还可以通过其他方式实现,本发明实施例中对此不作具体限定。待评估影像的质量以及质量评估结果均可以以质量得分的形式进行表示,质量得分的取值范围可以是[0,1],质量得分越大则表明待评估影像的质量越好。以下仅以待评估影像的质量以及质量评估结果为质量得分为例进行说明。除此之外,待评估影像的质量以及质量评估结果还可以以质量等级的形式进行表示,本发明实施例中对此不作具体限定。

本发明实施例中采用的质量评估模型,可以包含有用于从完整性维度以及内容维度表征影像的质量得分的关系模型,该关系模型可以是基于最小二乘法构建的、以影像的内容维度特征以及完整性维度特征为自变量、以影像的质量得分为因变量的关系模型。质量评估模型可以先提取待评估影像中的内容维度特征以及完整性维度特征,然后结合关系模型,确定出待评估影像的质量得分。

除此之外,质量评估模型还可以通过神经网络构建,并基于携带有质量标签的影像样本训练得到。影像样本是指用于训练质量评估模型的影像,影像样本携带有质量标签,该质量标签用于表征影像样本的质量得分,即影像样本的质量得分已知。在对质量评估模型进行训练时,可以先将影像样本输入至质量评估模型,由质量评估模型得到质量评估结果,然后计算该质量评估结果与质量标签的差值,基于该差值计算损失函数。采用不同的影像样本重复上述过程,并调整质量评估模型的模型参数,直至计算得到的损失函数收敛,训练完成。

本发明实施例中提供的影像质量评估方法,首先获取待评估影像,然后通过质量评估模型实现对待评估影像的质量评估,可以使得到待评估影像的质量评估结果更准确。而且,在质量评估过程中,不需要引入人为操作,可以避免质量评估结果受到人为因素的影像,可以使质量评估结果更客观。

在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,具体包括:

将所述待评估影像输入至所述质量评估模型的完整性维度评估层,得到所述完整性维度评估层输出的完整性维度的评估结果;

将所述待评估影像输入至所述质量评估模型的内容维度评估层,得到所述内容维度评估层输出的内容维度的评估结果;

将所述完整性维度的评估结果以及所述内容维度的评估结果输入至所述质量评估模型的融合层,得到所述融合层输出的所述质量评估结果。

具体地,本发明实施例中,在通过质量评估模型确定待评估影像的质量评估结果时,质量评估模型可以包括完整性维度评估层、内容维度评估层以及融合层。可以先将待评估影像输入至完整性维度评估层,由完整性维度评估层提取待评估影像的完整性维度特征,并根据提取的完整性维度特征进行完整性维度评估,得到完整性维度的评估结果;由内容维度评估层提取待评估影像的内容维度特征,并根据内容维度特征进行内容维度评估,得到内容维度的评估结果。然后,将完整性维度的评估结果以及内容维度的评估结果输入至融合层,通过融合层对两个评估结果进行融合,最终得到待评估影像的质量评估结果。融合层具体可以对两个评估结果进行加权求和实现融合。需要说明的是,完整性维度评估以及内容维度评估均是一种质量评估,得到的评估结果均是一种质量评估结果,但并不是质量评估模型的输出结果。质量评估模型的输出结果为融合得到的待评估影像的质量评估结果,这可以理解为一种综合质量评估结果。

例如,质量评估模型输出的待评估影像的质量评估结果为S∈[0,1],完整性维度的评估结果为S

S=λS

其中,λ∈[0,1]和μ∈[0,1]分别为S

本发明实施例中,通过质量评估模型中完整性维度评估层以及内容维度评估层分别实现完整性维度评估以及内容维度评估,再通过融合层实现两个维度评估结果的融合,有利于质量评估模型的维护,还可以使得待评估影像的质量评估结果更准确。

在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述将所述待评估影像输入至所述质量评估模型的完整性维度评估层,得到所述完整性维度评估层输出的完整性维度的评估结果,具体包括:

将所述待评估影像输入至所述完整性维度评估层,由所述完整性维度评估层从完整性维度下的不同完整性子维度对所述待评估影像进行评估,并对不同完整性子维度的评估结果进行加权求和,得到并输出所述完整性维度的评估结果;

其中,所述完整性子维度至少包含如下两项子维度中的任一项:

影像是否缺损或丢失;

影像中切片层数是否完整。

具体地,质量评估模型的完整性维度评估层,其具体实现方式是从完整性维度下的不同完整性子维度对待评估影像的质量进行评估,完整性维度下的不同完整性子维度可以包括待评估影像是否缺损或丢失、待评估影像中切片层数是否完整等,完整性维度评估层可以提取每个完整性子维度相关的完整性子维度特征,并根据提取的完整性子维度特征进行每个完整性子维度评估,得到每个完整性子维度的评估结果。对所有完整性子维度的评估结果进行加权求和,得到完整性维度的评估结果。

例如,完整性维度下共有k个完整性子维度,第i个完整性子维度的评估结果为

本发明实施例中,完整性维度评估层通过不同完整性子维度对待评估影像的质量进行评估,并对所有完整性子维度的评估结果进行加权求和得到完整性维度的评估结果,实现对待评估影像在完整性维度下的质量的精确性评估,使得待评估影像的质量评估结果更准确。

在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述将所述待评估影像输入至所述质量评估模型的内容维度评估层,得到所述内容维度评估层输出的内容维度的评估结果,具体包括:

将所述待评估影像输入至所述内容维度评估层,由所述内容维度评估层从内容维度下的不同内容子维度对所述待评估影像进行评估,并对不同内容子维度的评估结果进行加权求和,得到并输出所述内容维度的评估结果;

其中,所述内容子维度至少包含如下两项子维度中的任一项:

影像中是否存在目标对象;

影像是否清晰。

具体地,质量评估模型的内容维度评估层,其具体实现方式是从内容维度下的不同内容子维度对待评估影像的质量进行评估,内容维度下的不同内容子维度可以包括待评估影像中是否存在目标对象、待评估影像是否清晰等,内容维度评估层可以提取每个内容子维度相关的内容子维度特征,并根据提取的内容子维度特征进行每个内容子维度评估,得到每个内容子维度的评估结果。对所有内容子维度的评估结果进行加权求和,得到内容维度的评估结果。

例如,内容维度下共有L个内容子维度,第l个内容子维度的评估结果为

本发明实施例中,内容维度评估层通过不同内容子维度对待评估影像的质量进行评估,并对所有内容子维度的评估结果进行加权求和得到内容维度的评估结果,实现对待评估影像在内容维度下的质量的精确性评估,使得待评估影像的质量评估结果更准确。

目前脑影像分析技术已经成为脑智研究的一种最为广泛而重要的方式,尤其是对儿童青少年的脑智研究。要有效的将脑影像与脑智的发育情况建立联系,儿童青少年去完成预先设定的任务(如识字造词、几何认知等),在任务进行过程中采集脑影像。采集的多类型脑影像包括:1)结构像:该类脑影像中能非常清楚地区别大脑的灰白质,对比度比较明显,该类数据反映的是脑结构信息,无时间信息,通常包括T1、T2像等。2)功能像:该类数据可反映大脑活动的动态信息,时间分辨率可达到毫秒级别;通常选择只扫描局部脑组织,从而可以在不损失时间分辨率的同时,提高空间分辨率。基于血氧水平依赖(Blood OxygenLevel-dependent,BOLD)的功能像主要用来研究脑皮层的功能,3)弥散张量成像(Diffusion Tensor Imaging,DTI)反映的是脑白质静态的结构特征,通过施加不同方向的梯度场来采样水分子在各个方向的弥散情况,最后估计出每个体素的结构指标(如,各项异性盒弥散系数)。

因此,儿童青少年脑智研究的脑影像采集是一个十分复杂的过程,而且相对于成年人来说配合度更低,这些都对影像采集员的水平提出了极大的挑战。影像采集员的水平成为制约儿童青少年脑智研究的一个重要因素。其中,本发明实施例中所述的影像采集员的水平是指影像采集员的影像采集水平。

因此,构建一套科学有效的量化计算方法对影像采集员的水平进行评估,及时选取高水平的影像采集员,保证影像的采集质量,对儿童青少年脑智研究十分重要。由于儿童青少年脑智研究的影像采集种类丰富,过程十分复杂,采集对象的自律性相对较差,因此影响所采集质量的因素是多方面的。要对影像采集员的水平进行客观有效的评估,需要剔除其他非操作水平所导致的干扰因素。

目前绝大多数的人员能力评估方法都是基于主观判断、设备操作能力测试等传统方法,具有主观性,不准确,缺乏量化客观的评估。

1)工作分析法:明确所从事的影像采集员应该具备哪些素质,通过定性的方法筛选并明确评价指标,然后对采集员的操作能力进行评价;

2)实际操作法:直接让采集员对影像扫描设备等进行实际操作,现场观察采集员的操作能力,直接进行能力评价;优点:评价结果真实可信,评价要素有针对性;

3)问卷调查法:运用内容明确,表达正确的问卷量表,让采集员根据个人的知识和经验,自行选择答案,然后根据问卷结果对其进行能力评价。

现有的技术方案已经取得了一定的研究成果,且在实际中也得到一定的应用尝试。但这些技术方案存在一些缺点:

1)主观性过强。不管是上述哪种方法,都是人为主观的对采集员的理论知识或实际操作能力进行评价,容易受评价员的知识经验能力等个人因素的影响。

2)耗时、耗人力。特别是实际操作法,不仅需要大量的人力、时间对采集员的能力进行评价,还需要采集员在设备上进行实操,这对于评价少量的采集员还可行,一旦需要评价大量的采集员,该方法将很难应用于实际。

3)准确性低。问卷调查法,需要运用内容明确、表达正确的问卷调查表,问卷一般用于量化人员的理论知识与经验,若用于量化采集员的实际操作知识与经验将尤其困难,因此,这类的传统方法准确性偏低。

4)可定性难量化。筛选评价指标时,传统方法都是人为地筛选评价指标,人为地实施评测,因此评价结果具有描述性,容易受评价员的知识经验能力等个人因素的影响,因此只可定性无法量化。

基于此,在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述待评估影像包括每一影像采集员采集得到的多个第一影像;相应地,

所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,之后还包括:

基于每一影像采集员对应的所有第一影像的质量评估结果,确定所有采集员对应的整体质量评估期望以及所有影像采集员中目标影像采集员对应的目标质量评估期望;

基于所述整体质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的初步采集质量评估结果。

具体地,待评估影像可以是不同影像采集员采集得到的第一影像,每个影像采集员可以采集得到多个第一影像。每个影像采集员采集得到的多个第一影像可以是相同影像类型也可以是不同影像类型。

因此,在将待评估影像输入至质量评估模型之后,可以由质量评估模型输出每一影像采集员对应的所有第一影像的质量评估结果,即每一影像采集员采集得到的所有第一影像的质量评估结果。进一步地,根据每一影像采集员对应的所有第一影像的质量评估结果,可以确定所有影像采集员对应的整体质量评估期望,即所有影像采集员采集得到的所有第一影像的质量评估结果的均值。例如,整体质量评估期望可以表示为:

E(Φ)=E(E(Φ

其中,E(Φ

E(Φ

其中,S

根据每一影像采集员对应的所有第一影像的质量评估结果,还可以确定出所有影像采集员中目标影像采集员对应的目标质量评估期望。目标影像采集员可以是所有影像采集员中的任一影像采集员。以第j个影像采集员作为目标影像采集员,则E(Φ

最后,根据整体质量评估期望以及目标质量评估期望,可以确定出目标影像采集员对应的初步采集质量评估结果。由于影像采集员采集得到的影像质量可以在一定程度上直接反映影像采集员的水平,因此可以从影像质量出发对影像采集员的水平进行初步评估。即可以通过初步采集质量评估结果表征目标影像采集员的初评水平,也即将初步采集质量评估结果作为评价目标影像采集员水平的初始指标。该初步采集质量评估结果可以是以得分形式表示。本发明实施例中可以直接将目标质量评估期望与整体质量评估期望之差作为初步采集质量评估结果。即有:

其中,

本发明实施例中,通过质量评估模型输出的质量评估结果,确定所有采集员对应的整体质量评估期望以及所有影像采集员中目标影像采集员对应的目标质量评估期望,并可进一步确定目标影像采集员对应的初步采集质量评估结果,用以对目标影像采集员的水平进行初步评价。通过初步采集质量评估结果对目标影像采集员水平进行评价,评价过程中减少人力参与,可以使对目标影像采集员水平的评价更客观,不仅保证了评价的科学性,也大大提升了影像质量评估方法的实际应用价值。

由于影响影像采集员采集的影像质量的因素是多方面的,因此在通过采集的影像质量的好坏评价影像采集员的水平高低的基础上,还可以对影像采集员所采集的影像质量进行相关因素的分解,从中剔除影像采集员以外的其他干扰因素。本发明实施例中考虑的其他干扰因素包括影像类型以及被试者群体,以下进行具体说明。

由于脑智研究通常需要采集不同影像类型的脑影像,比如需要采集灰质结构像、白质结构像,以及各种类型的功能像,去完成某种预先设定的任务(比如,识字造词、几何认知等)的过程中进行脑影像的采集。很明显,不同影像类型的脑影像采集的难度差异比较大,因此采集质量也会有明显差异。因此,采集的影像类型也是影响脑影像采集质量的一个关键因素,需要从采集的影像类型的角度进行因素分析,以便为后续剔除其因素影响,对目标影像采集员进行客观的水平评估提供基础。

基于此,在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述待评估影像包括所述目标影像采集员采集得到的分属于多种影像类型的第二影像;相应地,

所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,之后还包括:

基于每种影像类型的第二影像的质量评估结果,确定所述目标影像采集员对应的类型无关性质量评估期望;

基于所述类型无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的类型无关性采集质量评估结果。

具体地,待评估影像可以是目标影像采集员采集得到的分属于多种影像类型的第二影像,目标影像采集员采集得到的分属于每种影像类型的第二影像的数量可以是多个。

目标影像采集员采集得到的第二影像的影像类型可以划分为:

其中,

因此,在将待评估影像输入至质量评估模型之后,可以由质量评估模型输出目标影像采集员采集得到的每种影像类型的所有第二影像的质量评估结果。进一步地,根据目标影像采集员对应的每种影像类型的所有第二影像的质量评估结果,可以确定目标影像采集员对应的每种影像类型的所有第二影像的质量评估期望,即有:

其中,E(Ω

更进一步地,根据目标影像采集员对应的每种影像类型的所有第二影像的质量评估期望,可以确定目标影像采集员对应的类型无关性质量评估期望,即目标影像采集员对应的所有影像类型的所有第二影像的质量评估结果的均值。即有:

其中,E

由于不同影像类型的影像质量差异,体现了影像类型对影像采集的影响,进一步影响目标影像采集员水平的评估,因此在对目标影像采集员水平评估时,需要剔除影像类型的影响作用。即根据目标质量评估期望,并结合类型无关性质量评估期望,确定目标影像采集员对应的类型无关性采集质量评估结果。可以通过类型无关性采集质量评估结果表征影像类型无关性下目标影像采集员的水平,也即将类型无关性采集质量评估结果作为评价影像类型无关性下目标影像采集员水平的指标。该类型无关性采集质量评估结果可以是以得分形式表示。本发明实施例中可以直接将目标质量评估期望与类型无关性质量评估期望之差作为类型无关性采集质量评估结果。即有:

其中,

本发明实施例中,通过质量评估模型输出的质量评估结果,确定目标影像采集员对应的类型无关性质量评估期望,并可结合目标质量评估期望进一步确定目标影像采集员对应的类型无关性采集质量评估结果,用以评价影像类型无关性下目标影像采集员的水平。通过类型无关性采集质量评估结果对目标影像采集员水平进行评价,评价过程中减少了影像类型对目标影像采集员水平的影响,可以使对目标影像采集员水平的评价更客观,不仅保证了评价的科学性,也大大提升了影像质量评估方法的实际应用价值。

由于目标影像采集员采集的影像质量还与所采集的被试者群体相关,目标影像采集员对应的初步采集质量评估结果较差,可能是由于所采集的对象配合度低等原因;反过来目标影像采集员对应的初步采集质量评估结果较好也有可能是所采集的对象刚好是比较配合的群体。因此,还需要剔除被试者群体这一影响因素,做被试者群体无关性评估。

基于此,在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述待评估影像包括所述目标影像采集员采集得到的分属于多种被试者群体的第三影像;相应地,

所述将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果,之后还包括:

基于每种被试者群体的第三影像的质量评估结果,确定所述目标影像采集员对应的被试者群体无关性质量评估期望;

基于所述被试者群体无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的被试者群体无关性质量评估结果。

具体地,由于影像的采集需要被试者(即影像采集对象)的积极配合,显然不同的被试群体对影像采集的质量影响巨大。例如,年龄偏小的儿童青少年配合度可能较低,男孩相比女孩配合度也可能偏低等。因此,首先根据被试者年龄、性别、性格等多方面因素综合考虑进行被试者群体划分。即有:

其中,

因此,在将待评估影像输入至质量评估模型之后,可以由质量评估模型输出目标影像采集员采集得到的分属于多种被试者群体的第三影像的质量评估结果。进一步地,根据目标影像采集员对应的每种被试者群体的所有第三影像的质量评估结果,可以确定目标影像采集员对应的每种被试者群体的所有第三影像的质量评估期望,即有:

其中,E(Ω

更进一步地,根据目标影像采集员对应的每种被试者群体的所有第三影像的质量评估期望,可以确定目标影像采集员对应的被试者群体无关性质量评估期望,即目标影像采集员对应的所有被试者群体的所有第三影像的质量评估结果的均值。即有:

其中,E

由于不同被试者群体的影像质量差异,体现了被试者群体对影像采集的影响,进一步影响目标影像采集员水平的评估,因此在对目标影像采集员水平评估时,需要剔除被试者群体的影响作用。即根据目标质量评估期望,并结合被试者群体无关性质量评估期望,确定目标影像采集员对应的被试者群体无关性采集质量评估结果。可以通过被试者群体无关性采集质量评估结果表征被试者群体无关性下目标影像采集员的水平,也即将被试者群体无关性采集质量评估结果作为评价被试者群体无关性下目标影像采集员水平的指标。该被试者群体无关性采集质量评估结果可以是以得分形式表示。本发明实施例中可以直接将目标质量评估期望与被试者群体无关性质量评估期望之差作为被试者群体无关性采集质量评估结果。即有:

其中,

本发明实施例中,通过质量评估模型输出的质量评估结果,确定目标影像采集员对应的被试者群体无关性质量评估期望,并可结合目标质量评估期望进一步确定目标影像采集员对应的被试者群体无关性质量评估结果,用以评价被试者群体无关性下目标影像采集员的水平。通过被试者群体无关性采集质量评估结果对目标影像采集员水平进行评价,评价过程中减少了被试者群体对目标影像采集员水平的影响,可以使对目标影像采集员水平的评价更客观,不仅保证了评价的科学性,也大大提升了影像质量评估方法的实际应用价值。

在上述实施例的基础上,本发明实施例中提供的影像质量评估方法,所述基于所述被试者群体无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的被试者群体无关性采集质量评估结果,之后还包括:

基于所述目标影像采集员对应的初步采集质量评估结果、类型无关性采集质量评估结果以及被试者群体无关性采集质量评估结果,确定所述目标影像采集员对应的综合采集质量评估结果。

具体地,本发明实施例中,为了综合对目标影像采集员的水平进行更加鲁棒的评估,可以将目标影像采集员对应的初步采集质量评估结果、类型无关性采集质量评估结果以及被试者群体无关性采集质量评估结果进行综合考虑,确定出目标影像采集员对应的综合采集质量评估结果。可以先按初步采集质量评估结果、类型无关性采集质量评估结果以及被试者群体无关性采集质量评估结果分别对目标影像采集员的水平进行评级,例如由于

表1

然后根据按初步采集质量评估结果、类型无关性采集质量评估结果以及被试者群体无关性采集质量评估结果对目标影像采集员的水平的评级结果,确定出目标影像采集员对应的综合采集质量评估结果。即可以确定目标影像采集员在三个评分角度上的水平等级均值作为目标影像采集员对应的综合采集质量评估结果。例如,若

1+0+(-1)=0

即表示该目标影像采集员的综合采集质量评估结果为一般水平。

本发明提供的影像质量评估方法,可以用于对目标影像采集员的水平进行评价,与现有的影像采集员的水平评估方法相比,技术思路有很大不同。本发明实施例中针对实际应用场景,剔除了目标影像采集员自身因素以外的其他的干扰因素,解决了客观量化目标影像采集员操作能力的问题,形成了一套科学、规范地目标影像采集员水平评估指标和评价体系。

如图2所示,在上述实施例的基础上,本发明实施例中提供了一种影像质量评估装置,包括:影像获取模块21和质量评估模块22。

影像获取模块21用于获取待评估影像;

质量评估模块22用于将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;

其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;

所述质量评估模型基于携带有质量标签的影像样本训练得到。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述质量评估模块,具体包括:

完整性维度评估子模块,用于将所述待评估影像输入至所述质量评估模型的完整性维度评估层,得到所述完整性维度评估层输出的完整性维度的评估结果;

内容维度评估子模块,用于将所述待评估影像输入至所述质量评估模型的内容维度评估层,得到所述内容维度评估层输出的内容维度的评估结果;

综合评估子模块,用于将所述完整性维度的评估结果以及所述内容维度的评估结果输入至所述质量评估模型的融合层,得到所述融合层输出的所述质量评估结果。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述完整性维度评估子模块,具体用于:

将所述待评估影像输入至所述完整性维度评估层,由所述完整性维度评估层从完整性维度下的不同完整性子维度对所述待评估影像进行评估,并对不同完整性子维度的评估结果进行加权求和,得到并输出所述完整性维度的评估结果;

其中,所述完整性子维度至少包含如下两项子维度中的任一项:

影像是否缺损或丢失;

影像中切片层数是否完整。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述内容维度评估子模块,具体用于:

将所述待评估影像输入至所述内容维度评估层,由所述内容维度评估层从内容维度下的不同内容子维度对所述待评估影像进行评估,并对不同内容子维度的评估结果进行加权求和,得到并输出所述内容维度的评估结果;

其中,所述内容子维度至少包含如下两项子维度中的任一项:

影像中是否存在目标对象;

影像是否清晰。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述待评估影像包括每一影像采集员采集得到的多个第一影像;相应地,

所述影像质量评估装置还包括初步采集质量评估模块,用于:

基于每一影像采集员对应的所有第一影像的质量评估结果,确定所有影像采集员对应的整体质量评估期望以及所有影像采集员中目标影像采集员对应的目标质量评估期望;

基于所述整体质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的初步采集质量评估结果。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述待评估影像包括所述目标影像采集员采集得到的分属于多种影像类型的第二影像;相应地,

所述影像质量评估装置还包括类型无关性采集质量评估模块,用于:

基于每种影像类型的第二影像的质量评估结果,确定所述目标影像采集员对应的类型无关性质量评估期望;

基于所述类型无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的类型无关性采集质量评估结果。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述待评估影像包括所述目标影像采集员采集得到的分属于多种被试者群体的第三影像;相应地,

所述影像质量评估装置还包括被试者群体无关性质量评估模块,用于:

基于每种被试者群体的第三影像的质量评估结果,确定所述目标影像采集员对应的被试者群体无关性质量评估期望;

基于所述被试者群体无关性质量评估期望以及所述目标质量评估期望,确定所述目标影像采集员对应的被试者群体无关性采集质量评估结果。

在上述实施例的基础上,本发明实施例中提供的影像质量评估装置,所述影像质量评估装置还包括综合采集质量评估模块,用于:

基于所述目标影像采集员对应的初步采集质量评估结果、类型无关性采集质量评估结果以及被试者群体无关性采集质量评估结果,确定所述目标影像采集员对应的综合采集质量评估结果。

具体地,本发明实施例中提供的影像质量评估装置中各模块的作用与上述方法类实施例中各步骤的操作流程是一一对应的,实现的效果也是一致的,具体参见上述实施例,本发明实施例中对此不再赘述。

图3示例了一种电子设备的实体结构示意图,如图3所示,该电子设备可以包括:处理器(processor)310、通信接口(Communications Interface)320、存储器(memory)330和通信总线340,其中,处理器310,通信接口320,存储器330通过通信总线340完成相互间的通信。处理器310可以调用存储器330中的逻辑指令,以执行上述实施例中提供的影像质量评估方法,该方法包括:获取待评估影像;将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;所述质量评估模型基于携带有质量标签的影像样本训练得到。

此外,上述的存储器330中的逻辑指令可以通过软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本发明的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本发明各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(ROM,Read-Only Memory)、随机存取存储器(RAM,Random Access Memory)、磁碟或者光盘等各种可以存储程序代码的介质。

另一方面,本发明还提供一种计算机程序产品,所述计算机程序产品包括存储在非暂态计算机可读存储介质上的计算机程序,所述计算机程序包括程序指令,当所述程序指令被计算机执行时,计算机能够执行上述实施例中提供的影像质量评估方法,该方法包括:获取待评估影像;将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;所述质量评估模型基于携带有质量标签的影像样本训练得到。

又一方面,本发明还提供一种非暂态计算机可读存储介质,其上存储有计算机程序,该计算机程序被处理器执行时实现以执行上述实施例中提供的影像质量评估方法,该方法包括:获取待评估影像;将所述待评估影像输入至质量评估模型,得到由所述质量评估模型输出的所述待评估影像的质量评估结果;其中,所述质量评估模型用于对所述待评估影像从完整性和内容两个维度进行评估,并基于所述两个维度的评估结果对所述待评估影像进行质量评估;所述质量评估模型基于携带有质量标签的影像样本训练得到。

以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本实施例方案的目的。本领域普通技术人员在不付出创造性的劳动的情况下,即可以理解并实施。

通过以上的实施方式的描述,本领域的技术人员可以清楚地了解到各实施方式可借助软件加必需的通用硬件平台的方式来实现,当然也可以通过硬件。基于这样的理解,上述技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来,该计算机软件产品可以存储在计算机可读存储介质中,如ROM/RAM、磁碟、光盘等,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行各个实施例或者实施例的某些部分所述的方法。

最后应说明的是:以上实施例仅用以说明本发明的技术方案,而非对其限制;尽管参照前述实施例对本发明进行了详细的说明,本领域的普通技术人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本发明各实施例技术方案的精神和范围。

相关技术
  • 影像质量评估方法、装置、电子设备及存储介质
  • 眼底影像质量评估方法和系统、设备及存储介质
技术分类

06120112622310