(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210571742.4 (22)申请日 2022.05.24 (71)申请人 武汉工程大 学 地址 430000 湖北省武汉市东湖新 技术开 发区光谷一路20 6号 (72)发明人 刘红　洪汉玉　马雷　陈冰川　 赵凡　罗心怡　 (74)专利代理 机构 北京轻创知识产权代理有限 公司 11212 专利代理师 陈熙 (51)Int.Cl. G06V 10/764(2022.01) G06V 10/24(2022.01) G06V 10/44(2022.01) G06V 10/774(2022.01) (54)发明名称 一种图像翻译方法、 系统、 介质及设备 (57)摘要 本发明涉及深度学习图像翻译 领域， 尤其涉 及一种图像翻译方法、 系统、 介质及设备。 该方法 包括： 将预处理后的待翻译图像输入至可见光到 红外图像翻译网络中， 得到翻译结果以及图像的 边缘信息， 所述可见光到红外图像翻译网络包含 图像翻译模块以及图像边缘信息监督模块， 其 中， 所述图像翻译模块包括注意力子模块。 通过 本发明能够达到在生成器以及判别器中引入自 注意力机制来引导可见光到红外图像翻译网络 注重图像中更具判别性的区域， 通过引入边缘信 息监督模块对生成图像与 目标域真实图像边缘 的一致性做约束， 有助于解决现有方法所翻译图 像存在的边 缘模糊、 不对齐的问题的效果。 权利要求书2页 说明书11页 附图2页 CN 115115870 A 2022.09.27 CN 115115870 A 1.一种可 见光到红外图像翻译方法， 其特 征在于， 包括： 步骤1， 将待翻译图像进行 预处理， 得到预处 理后的待翻译图像； 步骤2， 将所述预处理后的待翻译图像输入至可见光到红外图像翻译网络 中， 得到翻译 结果以及图像的边缘信息， 所述可见光到红外图像翻译网络包含图像翻译模块以及图像边 缘信息监 督模块， 其中， 所述图像翻译模块包括注意力子模块。 2.根据权利要求1所述的一种可见光到红外 图像翻译方法， 其特征在于， 所述步骤1具 体包括： 对待翻译图像依次进行旋转、 缩放、 裁剪和归一化处理， 得到所述预处理后的待翻译图 像。 3.根据权利要求1所述的一种可见光到红外图像翻译方法， 其特征在于， 所述得到翻译 结果的过程具体为： 通过所述图像翻译模块中的生成器中的编码子模块对所述预处理后的待翻译图像进 行特征提取并得到相应特征谱， 其中所述编码子模块由三个下采样块以及六个残差块构 成； 通过所述生成器中的注意力子模块对所述编码子模块最后输出的特征谱进行重要性 加权， 得到注意力谱； 通过所述生成器中的解码子模块对所述注意力谱进行解码得到所述翻译结果。 4.根据权利要求1所述的一种可见光到红外图像翻译方法， 其特征在于， 所述得到边缘 信息的具体过程 为： 在所述图像翻译模块中的生成器中的编码子模块的第一下采样块后， 外接一个边缘 头， 通过所述边缘头对第一下采样块处理后得到的第一特征谱进行边缘信息预测， 通过边 缘损失函数对预测后的边 缘信息进行约束。 5.根据权利要求1所述的一种可见光到红外图像翻译方法， 其特征在于， 所述可见光到 红外图像翻译网络通过训练样本集进行训练， 通过最小化总的损失函数进行优化， 通过测 试样本集进行测试。 6.一种可 见光到红外图像翻译系统， 其特 征在于， 包括： 获取模块， 用于将待翻译图像进行 预处理， 得到预处 理后的待翻译图像； 处理模块， 用于将所述预处理后的待翻译图像输入至可见光到红外 图像翻译网络中， 得到翻译 结果以及图像的边缘信息， 所述可见光到红外图像翻译网络包含图像翻译模块以 及图像边 缘信息监 督模块， 其中， 所述图像翻译模块包括注意力子模块。 7.根据权利要求6所述的一种可见光到红外图像翻译系统， 其特征在于， 所述获取模块 具体包括： 对待翻译图像依次进行旋转、 缩放、 裁剪和归一化处理， 得到所述预处理后的待翻译图 像。 8.根据权利要求6所述的一种可见光到红外图像翻译系统， 其特征在于， 所述得到翻译 结果的过程具体为： 通过所述图像翻译模块中的生成器中的编码子模块对所述预处理后的待翻译图像进 行特征提取并得到相应特征谱， 其中所述编码子模块由三个下采样块以及六个残差块构 成；权　利　要　求　书 1/2 页 2 CN 115115870 A 2通过所述生成器中的注意力子模块对所述编码子模块最后输出的特征谱进行重要性 加权， 得到注意力谱； 通过所述生成器中的解码子模块对所述注意力谱进行解码得到所述翻译结果。 9.一种介质， 其特征在于， 所述介质中存储有指令， 当计算机读取所述指令时， 使所述 计算机执 行如权利要求1至 5中任一项所述的一种可 见光到红外图像翻译方法。 10.一种设备， 其特征在于， 包括权利要求9所述的存储介质、 执行所述存储介质内的指 令的处理器。权　利　要　求　书 2/2 页 3 CN 115115870 A 3