Page 165 - 《武汉大学学报(信息科学版)》2025年第9期
P. 165

第 50 卷第 9 期    刘梓航等:联合全局-局部特征和动态错误监督的遥感影像建筑物损伤评估方法                                   1893


                性扫描获取全局信息,其核心是 SS2D。遵循文                         得全局性特征。
                                                        sq
                                    in        mid  ),LN ( f i ) },
                献[29],将输入特征 X i ∈ { LN ( f i
                i ∈ { 4,5 } 输入两个分支,一个分支通过线性层获
                得门控特征 Z i,另一个分支通过 SS2D 获得全局
                特 征 Y i,二 者 通 过 逐 元 素 相 乘 获 得 输 出
                X i ∈ R  H i × W i × C i ,由 于 线 性 层 欠 缺 空 间 信 息 的 提
                  out
                取能力,而 SS2D 对通道信息的提取能力相对较
                弱 [30] ,因此加入了空间和通道注意力进行补充,
                主要过程为:
                                              in
                          Z i = SA ( SiLU ( Lin ( X i ) ) )  (19)
                                                     in
                 Y i = LN ( SS2D( SiLU ( DWConv( Lin ( X i ) ) ) ) )
                                                       (20)
                                                                              图 4 选择性扫描块
                               out
                             X i = CA ( Z i ⊗ Y i )    (21)               Fig.  4 Selective Scanning Block
                式中, SiLU 代表 SiLU 激活; SS2D 代表二维选择
                性扫描; CA 和 SA 分别代表完整的通道和空间注                      1.3.3 分层多尺度卷积块
                意力。                                                 分层多尺度卷积块采用分层多尺度卷积代
                    SS2D 的主要流程如图 4 所示。首先,将二维                    替原始的 3×3 卷积,通过分层卷积进一步增强卷
                特征沿纵横两个方向正反展开为 4 个不同顺序的                         积的多尺度性能,通过引入多尺度特征减小局部
                一维序列;然后,在 4 个一维序列上分别应用一维                        特征与全局特征间的差异,缓解结合时由于两种
                选择性扫描,收集不同方向上的全局上下文;最                           特征差异过大所带来的混乱,分层多尺度卷积块
                后,将扫描后的一维序列折叠回二维并相加,获                           的结构如图 5 所示。





















                                                    图 5 分层多尺度卷积块
                                          Fig.  5 Hierarchical Multi-scale Convolutional Block

                                                                                                 2
                                                                                               1
                                                                                                    3
                                                                                                      4
                    分层多尺度卷积块包含两个支路,多尺度卷                           x i 3 × 3  = ReLU ( BN ( Conv 1 × 1 ( [ z i,z i,z i,z i ] ) ) )
                积支路和 1×1 卷积支路。多尺度卷积支路负责                                                                (23)
                收 集 多 尺 度 特 征 ,侧 重 空 间 维 度 。 将 输 入 特 征          式中, Conv 3 × 3 代表膨胀率为 j 的 3×3 卷积。1×1
                                                                          d = j
                 in        mid  ),LN ( f i ) }, i ∈ { 4,5 } 沿通道维度
                                     sq
                x i ∈ { LN ( f i                                卷 积 支 路 负 责 收 集 局 部 特 征 ,侧 重 通 道 维 度 。
                                  j
                均分为 4 份,得到 { y i }, j ∈ { 1,2,3,4 },对每份特征       1×1 卷积支路的特征 x i       1 × 1  与多尺度卷积支路的
                以不同膨胀率进行卷积,并加入跨通道连接,增                           输出相加,得到最终输出特征 x i ∈ R             H i × W i × C i ,计
                                                                                             out
                强模块的跨通道和尺度交互能力,分层卷积得到                           算式为:
                         j
                的特征 { z i }, j ∈ { 1,2,3,4 } 沿通道维度叠加,然后                x i 1 × 1  = ReLU ( BN ( Conv 1 × 1 ( x i ) ) (24)
                                                                                                   in
                通 过 1×1 卷 积 进 行 通 道 整 合 ,获 得 输 出 特 征                          x i = x i 3 × 3  + x i 1 × 1  (25)
                                                                               out
                 3 × 3 。计算式分别为:
                x i                                             1.4 动态错误感知解码器
                         j       d = j  j - 1  j  j + 1
                        z i = Conv 3 × 3 ( z i  + y i + y i  )  (22)  动态错误感知解码器如图 6 所示,具有主分
   160   161   162   163   164   165   166   167   168   169   170