(19)国家知识产权局 (12)发明 专利申请 (10)申请公布号 (43)申请公布日 (21)申请 号 202210343417.2 (22)申请日 2022.03.31 (71)申请人 浙江工业大 学 地址 310014 浙江省杭州市下城区潮王路 18号 (72)发明人 郑建炜　冯宇超　蒋嘉伟　徐宏辉　 秦梦洁　陈婉君　 (74)专利代理 机构 杭州求是专利事务所有限公 司 33200 专利代理师 忻明年 (51)Int.Cl. G06V 20/10(2022.01) G06N 3/04(2006.01) G06N 3/08(2006.01) G06V 10/44(2022.01)G06V 10/26(2022.01) G06V 10/82(2022.01) (54)发明名称 一种基于线性跨时态交互的异源遥感建筑 变化检测方法 (57)摘要 本发明公开了一种基于线性跨时态交互的 异源遥感建筑变化检测方法， 包括： 获取异源遥 感图像对并分割为若干子图； 采用预训练好的 CNN或Transformer模型对各子图进行特征提取 获得对应的第一特征图； 将图像对中对应子图获 得的第一特征图执行线性交叉注意力操作获取 对应的第二特征图； 对第二特征图执行协同特征 对齐操作获取对应的第三特征图； 将图像对中对 应子图获得的第三特征图依次进行差值、 上采样 和卷积变换， 获取变化检测图。 该方法针对异源 遥感图像变化检测任务中数据 异源差异， 通过交 叉注意力进行图像间耦合互动， 并构建协同特征 对齐以保障异源 特性下特征间对齐， 有助于提高 异源遥感图像 变化检测的精度和泛化 性能。 权利要求书2页 说明书5页 附图2页 CN 114821302 A 2022.07.29 CN 114821302 A 1.一种基于线性跨时态交互的异源遥感建筑变化检测方法， 其特征在于： 所述基于线 性跨时态交 互的异源遥感建筑变化检测方法包括如下步骤： S1、 获取异源遥感图像对， 将图像对中的两图像分割为若干相同尺寸的子图； S2、 采用预训练好的CNN模型或Transformer模型对各子图进行特征提取获得对应的第 一特征图， 尺 寸记为W×H×d， 其中， W为第一特征图的宽度， H为第一特征图的高度， d为第一 特征图的通道深度； S3、 将图像对中对应子图获得的第一特征图分别记为F1和F2， 并执行线性 交叉注意力 操 作获取对应的第二特 征图Fatt‑1和Fatt‑2， 所述线性交叉注意力操作具体如下： S31、 线性展开F1和F2获取对应的向量组表示(Q1,K1,V1)和(Q2,K2,V2)， 其中， Q1为F1的查 询矩阵， K1为F1的键矩阵， V1为F1的值矩阵， Q2为F2的查询矩阵， K2为F2的键矩阵， V2为F2的值 矩阵， 尺寸均为 N×d， N＝W×H； S32、 基于交换后的查询矩阵计算F1的线性化自注意力输出Fcorss‑1和F2的线性化自注意 力输出Fcross‑2， 尺寸均为 W×H×d； S33、 对值矩阵V1和V2分别进行深度可分离卷积操作， 再分别与 交换后的查询矩阵进行 哈达玛积， 对应获得尺寸 为W×H×d的卷积相对位置编码Pcorss‑1和Pcross‑2； S34、 分别将F1和F2获得的线性化自注意力输出和卷积相对位置编码求和， 对应获得尺 寸为W×H×d的第二特 征图Fatt‑1和Fatt‑2； S4、 对Fatt‑1和Fatt‑2执行协同特征对齐操作 获取对应的第三特征图Falign‑1和Falign‑2， 所 述协同特 征对齐操作具体如下： S41、 将Fatt‑1和Fatt‑2输入空间注意力模 块获取尺寸为W ×H×2的空间注意力A， 所述空间 注意力模块包括依次连接的Co ncat层、 第一激活函数、 卷积层、 归一 化层和第二激活函数； S42、 沿通道方向将空间注意力A拆分成尺寸均为 W×H×1的A1和A2； S43、 将Fatt‑1与A1相乘、 Fatt‑2与A2相乘， 对应获得第三特 征图Falign‑1和Falign‑2； S5、 将图像对中对应子图获得的第三特征图Falign‑1和Falign‑2依次进行差值、 上采样和卷 积变换， 获取尺寸 为nW×nH×2的变化检测图， 其中， n 为上采样的倍数。 2.如权利要求1所述的基于线性跨时态交互的异源遥感建筑变化检测方法， 其特征在 于： 步骤S1中， 所述子图的尺寸 为256×256。 3.如权利要求1所述的基于线性跨时态交互的异源遥感建筑变化检测方法， 其特征在 于： 步骤S32中， 所述F1的线性化自注意力输出Fcorss‑1和F2的线性化自注意力输出Fcross‑2， 计 算公式如下： 其中， softmax( ·)为非线性映射 函数， T为 转置操作。 4.如权利要求1所述的基于线性跨时态交互的异源遥感建筑变化检测方法， 其特征在 于： 步骤S41中， 所述第一激活函数为ReLU函数， 所述第二激活函数为Sigmo id函数。 5.如权利要求1所述的基于线性跨时态交互的异源遥感建筑变化检测方法， 其特征在权　利　要　求　书 1/2 页 2 CN 114821302 A 2于： 步骤S5中， 所述上采样为 4倍插值上采样。权　利　要　求　书 2/2 页 3 CN 114821302 A 3