遥感图像具有地物覆盖范围广、地物信息复杂、人工标注费时等特点，将深度神经 络应用于遥感图像处理后，能够节省人力资源并提高并行处理效率，是推动遥感图像自动化处理平台发展的重要基石。目前，基于深度学习的遥感图像场景分类中存在如下问题：一是 络过度关注全局特征而忽略局部特征；二是单向层次化特征提取方式导致浅层特征图缺乏语义信息而深层特征图存在空间信息缺失。
为此， 河海大学计算机与信息学院王鑫博士与英国莱斯特大学（University of Leicester）Huiyu Zhou教授团队共同开展基于增强特征金字塔 络和深度语义嵌入的遥感图像场景分类研究，在遥感图像场景分类精度和可靠性等方面取得突破性进展，研究结果为后续遥感图像的准确解译提供重要参考依据。
该方法的主要工作包括，通过增强特征金字塔模块对深层特征图丰富的语义信息进行传播，以弥补浅层特征图该信息的缺失；通过跨尺度信息融合模块保持不同特征图共性的同时也利用各自优势特征以增强特征；通过双支路深层特征融合模块的不同感受野提取多尺度上下文信息，引导 络兼顾全局特征和局部特征。
结果证明，所提出的算法在多个大规模公开数据集上的分类表现均远好于基准方法，与业内前沿方法相比具有明显优势。
图1.基于增强特征金字塔 络和深度语义嵌入的遥感图像场景分类框架
高分遥感图像场景分类 络整体框架（图1）主要由：增强特征金字塔模块（Enhanced Feature Pyramid Network，EFPN）（图2）、深度语义嵌入模块（Deep Semantic Embedding， DSE）（图3）、双支路深层特征融合模块（Two-branch Deep Feature Fusion，TDFF）（图4）以及场景分类器模块（Scene Classifier）构成。跟现有先进深度神经 络场景分类模型相比，提出的 络分类精度明显提升，且在保持分类高精度的同时即使在不同训练比例下仍能保持良好的泛化性。
图2. 增强特征金字塔模块（EFPN）
图3. 深度语义嵌入模块（DSE）
图4. 双支路深层特征融合模块（TDFF）
图5. 提出方法在AID数据集上的分类混淆矩阵
为探明不同模块在分类性能上起到的作用，进行了全面的消融实验，图6显示的是不同方案在UCM数据集每一个类别上的分类精度，可以看出，无论在哪个训练条件下，缺少EFPN的 络性能降低最显著，缺失CIF和TDFF的 络在部分类别上性能略微下降，而三者集合的方法取得优秀性能，这表明提出的方法每个模块都是有必要且有作用的。
图6. 消融实验所用模型结构在各类别上的准确率
研究工作由中国中央高校基本科研业务费项目、江苏省六大人才高峰项目、江苏政府留学奖学金、英国皇家学会牛顿高级学者基金、欧盟地平线2020计划项目等提供经费支持。相关成果以“Enhanced Feature Pyramid Network with Deep Semantic Embedding for Remote Sensing Scene Classification”为题于2021年9月发表于《IEEE Transactions on Geoscience and Remote Sensing》。
论文DOI：10.1109/TGRS.2020.3044655
链接：
https://ieeexplore.ieee.org/document/9314283
初审：张艳玲
复审：宋启凡
终审：金 君
往期推荐
资讯
○ 南方数码 | 助学、助教、助研，三项协议开启校企合作新篇章
○ 杨元喜院士：北斗为何是国之重器？重磅！2022年国家自然科学基金申 时间定了！
○ 纳贤丨武汉大学测绘遥感信息工程国家重点实验室多源支持感知与认知团队招聘博士后
○ 招聘 | 中国科学院东北地理与农业生态研究所农业遥感学科组招聘启事
会议
○ 第七届普适定位、室内导航与基于位置服务（UPINLBS 2022）国际会议（一号通知）
○ 高俊院士、王家耀院士等6位著名科学家获“2020-2021年度中国地理学会科学技术奖——终身成就奖”
○ 关于第24届国际摄影测量与遥感大会预通知
○ 第一届深度学习与地球科学专题研讨会
《测绘学 》
○《测绘学 》8篇论文入选“领跑者5000——中国精品科技期刊顶尖学术论文（F5000）”
○ 智能驾驶环境感知 | 方莉娜：融合点云和多视图的车载激光点云路侧多目标识别
○ 智能驾驶环境感知 | 李雅丽：车辆轨迹与遥感影像多层次融合的道路交叉口识别
○ 智能驾驶环境感知 | 孙喜亮：面向高精度城市测绘的激光紧耦合SLAM方法
《测绘通 》
○ 如何识别城市交通中的频繁路径
○ 面向上海城市数字化转型的新型测绘
○ 图像全站仪及图像测量发展与展望
○《测绘通 》2021年第11期目录
《北京测绘》
○《北京测绘》2021年第10期摘要推荐
○《北京测绘》2021年第9期摘要推荐
○《北京测绘》2021年第8期摘要推荐（下）
○《北京测绘》2021年第8期摘要推荐（上）
《测绘科学技术学 》
○ 摘要 |《测绘科学技术学 》2021年第2期摘要推荐
○ 摘要 |《测绘科学技术学 》2021年第4期摘要推荐
○ 摘要 |《测绘科学技术学 》2021年第5期摘要推荐
○ 摘要 |《测绘科学技术学 》2021年第6期摘要推荐
《地球信息科学学 》
○ 《地球信息科学学 》2021年第12期佳文推介
○ 《地球信息科学学 》2021年第11期佳文推介
○ 佳文推介 | 大数据城市通勤交通模型的构建与模拟应用
○ 专刊征稿：社会感知与地理大数据挖掘（征稿中）
《测绘工程》
○ 摘要 |《测绘工程》2021年第5期摘要推荐
○ 摘要 |《测绘工程》2021年第4期摘要推荐
○ 摘要 |《测绘工程》2021年第6期摘要推荐
○ 测绘教学 | 后疫情时代“线上+线下”混合教学模式创新——以测绘类课程视角
《中国空间科学技术》
○《中国空间科学技术》2021年第6期摘要
○《中国空间科学技术》2021年第5期摘要推荐
○ 摘要 |《中国空间科学技术》2021年第3期摘要推荐
○ 火卫二地形地貌探测综述
《卫星应用》
○《卫星应用》2021年第10期摘要
○ 摘要 |《卫星应用》2021年第9期摘要推荐
○ 摘要 |《卫星应用》2021年第8期摘要推荐
○ 综述 | 北斗系统应用趋势分析
《Journal of Geodesy and Geoinformation Science》
○《测绘学 （英文版）》（JGGS）LiDAR专刊发布
○《测绘学 （英文版）》（JGGS）第一次编委会会议顺利召开
○《测绘学 （英文版）》专刊征稿 | 地图学与地球空间信息教育：理论与实践
○ 2022年第二十九届国际地理信息学大会暨CPGIS成立30周年年会（一号通知）
《Satellite Navigation》
○ [综述]| 高扬教授：GNSS智能手机定位：进展、挑战、机遇和未来展望| SANA佳文速递
○ 熊超教授：地磁暴期间夜间低纬电离层和赤道等离子体不规则体| SANA佳文速递
○ 徐元博士：面向有色测量噪声下UWB/INS组合行人导航的分布式卡尔曼滤波| SANA佳文速递
○ 杨飞博士：GNSS天顶对流层精化模型的构建与分析| SANA佳文速递
○ 牛小骥教授：用半解析法分析GNSS/INS在铁路轨道测量中的相对精度| SANA佳文速递
《自然资源遥感》
○ 《自然资源遥感》入驻“智绘科服”融媒体平台！
○ 《自然资源遥感》征稿：“海岸带空间资源及生态健康遥感监测”专栏
○ 摘要 |《自然资源遥感》2021年第3期摘要推荐
《Journal of Geovisualization and Spatial Analysis》
○《Journal of Geovisualization and Spatial Analysis》入驻“智绘科服”融媒体平台！
○ JGSA国际期刊2021年第5卷第2期论文摘要
○ 高被引论文推荐 | Journal of Geovisualization and Spatial Analysis
声明：本站部分文章内容及图片转载于互联 、内容不代表本站观点，如有内容涉及侵权，请您立即联系本站处理，非常感谢！