(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210367282.3 (22)申请日 2022.04.08 (71)申请人 荣耀终端 有限公司 地址 518040 广东省深圳市福田区香蜜湖 街道东海社区红荔西路8089号深业中 城6号楼A单元3401 (72)发明人 曹瑞　应国豪　王宇　 (74)专利代理 机构 北京同立钧成知识产权代理 有限公司 1 1205 专利代理师 余娜　臧建明 (51)Int.Cl. G06T 5/50(2006.01) G06T 7/33(2017.01) G06V 10/44(2022.01) G06V 10/74(2022.01)G06K 9/62(2022.01) (54)发明名称 图像融合方法、 装置及存 储介质 (57)摘要 一种图像融合方法、 装置及存储介质， 涉及 图像处理技术领域， 该方法包括： 获取第一路图 像和第二路图像； 其中， 所述第二路图像的清晰 度高于所述第一路图像的清晰度； 分别提取所述 第一路图像的特征和所述第二路图像的特征； 计 算所述第一路图像和所述第二路图像中各特征 之间的相似度， 得到所述第二路图像中与所述第 一路图像的特征存在相似度满足预设条件的目 标特征； 根据所述目标特征对所述第一路图像进 行特征融合。 通过计算第一摄像头拍摄的图像和 第二摄像头拍摄的图像中各特征之间的相似度， 从而在特征层面的配准对齐提升了尺度和像素 对齐的效果， 有效改善了鬼影问题， 同时使得整 体图像融合过渡得比较平 滑、 自然。 权利要求书2页 说明书16页 附图9页 CN 114782296 A 2022.07.22 CN 114782296 A 1.一种图像融合方法， 其特 征在于， 包括： 获取第一路图像和第二路图像； 其中， 所述第二路图像的清晰度高于所述第一路图像 的清晰度； 分别提取 所述第一路图像的特 征和所述第二路图像的特 征； 计算所述第 一路图像和所述第 二路图像中各特征之间的相似度， 得到所述第 二路图像 中与所述第一路图像的特 征存在相似度满足预设条件的目标 特征； 根据所述目标 特征对所述第一路图像进行 特征融合。 2.根据权利要求1所述的方法， 其特征在于， 所述计算所述第 一路图像和所述第 二路图 像中各特征之 间的相似度， 得到所述第二路图像中与所述第一路图像的特征存在相似度满 足预设条件的目标 特征， 包括： 计算所述第一路图像的特征和所述第二路图像的特征中， 各图像块patch之间的相似 度， 得到相似度索引和相似度分数； 基于所述相似度索引， 提取所述第 二路图像的特征中与 所述第一路图像的特征相似度 满足所述预设条件的特 征， 得到所述目标 特征。 3.根据权利要求2所述的方法， 其特征在于， 所述提取所述第 二路图像的特征中与 所述 第一路图像的特 征相似度满足所述预设条件的特 征， 包括： 提取所述第二路图像的特 征中与所述第一路图像的特 征相似度最大的特 征。 4.根据权利要求2或3所述的方法， 其特征在于， 所述根据所述目标特征对所述第一路 图像进行 特征融合， 包括： 将所述目标特征与 所述第一路图像的特征利用卷积进行初步融合， 得到初步融合后的 特征； 将所述初步融合后的特 征与所述相似度分数相乘， 得到相乘结果； 将所述相乘结果融合在所述第一路图像的特 征上。 5.根据权利要求4所述的方法， 其特征在于， 所述分别提取所述第 一路图像的特征和所 述第二路图像的特 征， 包括： 提取所述第 一路图像的第一层特征； 以及， 提取所述第 二路图像的N层特征， 所述N为大 于1的整数； 所述方法还 包括： 将所述第一路图像的第一层特征与所述第二路图像的第一层特征融合后得到的第一 层融合结果进行 特征提取， 得到所述第一路图像的第二层特 征； 基于所述第 一路图像的第 二层特征和所述第 二路图像的第 二层特征之间的相似度， 对 所述第一路图像的第二层特征和所述第二路图像的第二层特征进 行融合， 并将融合后的结 果提取特征后与所述第二路图像的下一层特征融合， 直到完成所述第一路图像的第N层特 征与所述第二路图像的第N层特 征的融合， 得到融合结果。 6.根据权利要求5所述的方法， 其特征在于， 所述N为3， 所述第一层特征包括图像的结 构和形状信息； 所述第二层特征包括图像的纹理和细节信息； 第三层特征包括图像的颜色 和亮度信息 。 7.根据权利要求6所述的方法， 其特征在于， 所述第一路图像的第M特征和所述第二路 图像的第M特 征被处理为互为 转置的两个矩阵。权　利　要　求　书 1/2 页 2 CN 114782296 A 28.根据权利要求7所述的方法， 其特征在于， 所述计算所述第 一路图像和所述第 二路图 像中各特征之间的相似度， 包括： 将所述互为转置的两个矩阵相乘， 得到所述第 一路图像和所述第 二路图像中各特征之 间的相似度。 9.根据权利要求8所述的方法， 其特征在于， 所述第 一路图像为电子设备的主摄相机采 集的图像， 所述第二路图像为所述电子设备的辅摄 像机采集的图像。 10.一种终端设备， 包括存储器、 处理器以及存储在所述存储器中并可在所述处理器上 运行的计算机程序， 其特征在于， 所述处理器执行所述计算机程序时， 使得所述终端设备执 行如权利要求1 ‑9任一项所述的方法。 11.一种计算机可读存储介质， 所述计算机可读存储介质存储有计算机程序， 其特征在 于， 所述计算机程序被处 理器执行时， 使得计算机执 行如权利要求1 ‑9任一项所述的方法。权　利　要　求　书 2/2 页 3 CN 114782296 A 3