Page 329 - 《软件学报》2024年第4期

孙福明 等: 跨模态交互融合与全局感知的 RGB-D 显著性目标检测 1907

RGB Depth ATSA CDNet AILNet CoNet DCF DSA2F EBFSP HAINet RD3D SSF TriTransNet Ours GT
图 5 本文算法与前沿 RGB-D 显著性模型的定性比较

表 2 跨模态交互融合模块的消融实验结果

DUT NLPR NJU2K
Variant Candidate
S↑ F β ↑ E ξ ↑ MAE↓ S↑ F β ↑ E ξ ↑ MAE↓ S↑ F β ↑ E ξ ↑ MAE↓
(a) Baseline 0.898 0.889 0.927 0.044 0.903 0.864 0.941 0.031 0.896 0.888 0.915 0.045
(b) (a)+CM 0.907 0.896 0.940 0.040 0.879 0.828 0.924 0.037 0.872 0.855 0.889 0.059
(c) (a)+CBAM 0.930 0.925 0.954 0.030 0.921 0.891 0.948 0.027 0.924 0.912 0.917 0.032
(d) (a)+CIF 0.937 0.933 0.960 0.026 0.935 0.905 0.965 0.019 0.923 0.913 0.922 0.032

表 3 全局感知特征增强模块的消融实验结果

DUT NLPR NJU2K
Variant Candidate
S↑ F β ↑ E ξ ↑ MAE↓ S↑ F β ↑ E ξ ↑ MAE↓ S↑ F β ↑ E ξ ↑ MAE↓
(a) Baseline 0.894 0.888 0.934 0.046 0.872 0.828 0.925 0.037 0.868 0.859 0.902 0.060
(b) (a)+TE 0.922 0.924 0.950 0.034 0.919 0.891 0.956 0.025 0.889 0.884 0.913 0.054
(c) (a)+TE+UFM 0.937 0.933 0.960 0.026 0.935 0.905 0.965 0.019 0.923 0.913 0.922 0.032

表 4 多级融合解码器的消融实验结果

DUT NLPR NJU2K
Variant Candidate
S↑ F β ↑ E ξ ↑ MAE↓ S↑ F β ↑ E ξ ↑ MAE↓ S↑ F β ↑ E ξ ↑ MAE↓
(a) Baseline 0.933 0.923 0.955 0.030 0.925 0.891 0.956 0.023 0.922 0.911 0.917 0.031
(b) (a)+MFD' 0.931 0.928 0.953 0.030 0.925 0.898 0.960 0.024 0.921 0.911 0.918 0.032
(c) (a)+MFD 0.937 0.933 0.960 0.026 0.935 0.905 0.965 0.019 0.923 0.913 0.922 0.032