(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202211283763.2 (22)申请日 2022.10.20 (71)申请人 重庆邮电大 学 地址 400065 重庆市南岸区南 山街道崇文 路2号 (72)发明人 韩光川　李伟生　 (74)专利代理 机构 重庆辉腾律师事务所 5 0215 专利代理师 王海军 (51)Int.Cl. G06T 7/00(2017.01) G06T 7/90(2017.01) G06V 10/74(2022.01) (54)发明名称 一种多模态医学融合图像的质量评价方法 (57)摘要 本发明属于计算机视觉领域， 具体涉及一种 多模态医学融合图像的质量评价方法， 包括获取 待评价的多模态医学图像数据集； 将多模态医学 图像在像素级别上减去第一单模医学图像得到 第一医学图像； 根据第一医学图像和第二单模医 学图像利用NSCT色彩空间变化公式计算得到第 一医学图像和第二单模医学图像在NSCT色彩空 间下的过滤色彩通道； 根据第一医学图像和第二 单模医学图像在NSCT色彩空间下的过滤色彩通 道计算第一医学图像和第二单模医学图像的色 彩相似度和 信息相似度； 根据第一医学图像和第 二单模医学图像的色彩相似度和信息相似度利 用权重和公式计算得到多模态医学图像的图像 质量分数， 对不同的多模态医学图像融合算法进 行有效性评估。 权利要求书3页 说明书5页 附图1页 CN 115482238 A 2022.12.16 CN 115482238 A 1.一种多模态医学融合图像的质量评价方法， 其特 征在于， 包括： S1： 获取待评价的多模态医学图像数据集， 所述多模态医学图像数据集包括： 由MRI医 学图像和P ET医学图像合 成的多模态医学图像、 第一单模医学图像和 第二单模医学图像； 所 述第一单模医学图像为与多模态医学图像对应的MRI医学图像； 所述第二单模医学图像为 与多模态医学图像对应的PET医学图像； S2： 将多模态医学图像在像素级别上减去第一单模医学图像得到第一医学图像； S3： 根据第一医学图像和第二单模医学图像利用NSCT色彩空间变化公式计算得到第一 医学图像和第二单模医学图像在NSCT色彩空间下的过 滤色彩通道； S4： 根据第一医学图像和第二单模医学图像在NSCT色彩空间下的过滤色彩通道计算第 一医学图像和第二单模医学图像的色彩相似度和信息相似度； S5： 根据第 一医学图像和第 二单模医学图像的色彩相似度和信 息相似度利用权重和公 式计算得到多模态医学图像的图像质量分数。 2.根据权利要求1所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 计算第一医学图像和第二单模医学图像在NSCT色彩空间下的过滤色彩通道具体包括以下 子步骤： S31： 根据第一医学图像和第二单模医学图像分别利用NSCT色彩空间变化公式计算得 到第一医学图像和第二单模医学图像在NSCT色彩空间下的色彩通道； S32： 根据第二单模医学 图像在RGB三个通道的像素值， 利用NSCT色彩空间变化公式计 算第二单模医学图像在NSCT色彩空间下色彩通道的过 滤区间； S33： 根据第二单模医学图像在NSCT色彩空间下色彩通道的过滤区间对第一医学图像 和第二单模医学图像在NSCT色彩空间下的色彩通道进行过滤得到第一医学图像和第二单 模医学图像在NSCT色彩空间下的过 滤色彩通道。 3.根据权利要求1所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 计算第二单模医学图像在NSCT色彩空间下的色彩通道的过 滤区间的具体步骤 包括： S321： 分别将第二单模医学图像RGB三个通道的像素值扩大p倍得到第二医学图像； 其 中， p∈[0.1， 0.5]； S322： 利用NSCT色彩空间变化公式计算第二医学图像在NSCT色彩空间下的色彩通道； S333： 根据第二医学图像在NSCT色彩空间下的色彩通道中的最小像素值和最大像素值 得到第二单模医学图像在NSCT色彩空间下色彩通道的过 滤区间。 4.根据权利要求1所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 计算第一医学图像和第二单模医学图像的色彩相似度和信息相似度的具体步骤 包括： S41： 利用图像熵公式计算第一医学图像和第二单模医学图像在NSCT色彩空间下的过 滤色彩通道的图像熵； S42： 根据第一医学图像和第二单模医学图像在NSCT色彩空间下的过滤色彩通道的图 像熵利用S SIM诱导方程计算得到第一医学图像和第二单模医学图像的信息相似度： S43： 根据第一医学 图像和第二单模医学图像在NSCT色彩空间下的色彩通道利用MDSI 诱导方程计算得到第一医学图像和第二单模医学图像的色彩相似图； S44： 将第一医学图像和PET医学图像的色彩相似图进行局部均值池化得到第一医学图 像和第二单模医学图像的色彩相似度。权　利　要　求　书 1/3 页 2 CN 115482238 A 25.根据权利要求4所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 第一医学图像和第二单模医学图像在NSCT色彩空间下的过 滤色彩通道的图像熵包括： 其中， Hi∈{Hi(IF′)， Hi(QF′)， Hi(IR′)， Hi(QR′)}， p*q表示色彩通道的大小， Ix， y表示色彩 通道中x， y位置处的像素值， β(.)为将色彩通道中为浮点数的像素点转化为整数的线性方 程， α(.)表示色彩通道中相同β(Ix， y)的个数， ρ(.)表示 统计非0值的数量， Hi(IF′)， Hi(QF′)， Hi(IR′)， Hi(QR′)分别表示第一医学图像和第二单模医学图像在NSCT色彩空间下 的过滤色 彩通道的图像熵， QF′， IF′表示第一医学图像在NSCT色彩空间下的两个过滤色彩通道， QR′、 IR′表示PET医学图像在NSCT色彩空间下的两个过 滤色彩通道。 6.根据权利要求4所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 第一医学图像和第二单模医学图像的信息相似度包括： 其中， Hi(IF′)， Hi(QF′)， Hi(IR′)， Hi(QR′)分别表示第一医学图像和 第二单模医学图像在 NSCT色彩空 间下的过滤色彩通道的图像熵， QF′， IF′表示第一医学图像在NSCT色彩空 间下的 两个过滤色彩通道， Hi(IF′)， Hi(QF′)， Hi(IR′)， Hi(QR′)分别表示第一医学图像和第二单模医 学图像在NSCT色彩空间下的过滤色彩通道的图像熵， QR′、 IR′表示PET医学图像在NSCT色彩 空间下的两个过滤色彩通道， C1， C2为常数， IS表示第一医学图像和第 二单模医学图像的信 息相似度。 7.根据权利要求4所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 将第一医学图像和第二单模医学图像的色彩相似图进行局部均值池化得到第一医学图像 和第二单模医学图像的色彩相似度包括： S441： 将第 一医学图像和第二单模医学图像的色彩相似图中失真部分的像素点作为中 心点， 构建 半径为d邻域像素块； S442： 将邻域像素块外的像素点赋值为0， 将邻域像素块的像素点进行均值池化得到第 一医学图像和第二单模医学图像的色彩相似度。 8.根据权利要求7所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述 第一医学图像和第二单模医学图像的色彩相似度包括： 其中， Ap， q表示为大小为p*q的色彩相似图， Aj， k表示色彩相似图中j、 k处的像素值， C为 半径为d、 中心值为0、 其余值为1的卷积核， N为色彩相似图中非零像素点的数量， CS为色彩 相似度。 9.根据权利要求1所述的一种 多模态医学融合图像的质量评价方法， 其特征在于， 所述权　利　要　求　书 2/3 页 3 CN 115482238 A 3