武大本科生一作发ISPRS!

文摘   2024-12-25 06:59   湖北  
近日,武汉大学遥感信息工程学院孙万捷、陈震中团队20级本科生王策论文“Semantic Guided Large Scale Factor Remote Sensing Image Super-resolution with Generative Diffusion Prior” (作者:王策,孙万捷)被摄影测量与遥感领域国际顶级期刊ISPRS Journal of Photogrammetry and Remote Sensing (SCI一区TOP,影响因子:10.6)录用。

高分辨率遥感影像在气象预测、农业监测、地理目标检测、土地覆盖制图等领域中扮演着至关重要的角色。高倍率遥感影像超分辨率重建(如32倍放大)是遥感影像应用的核心技术之一。相比低倍率超分辨率(如2倍或4倍),高倍率遥感影像重建任务需要应对更多的细节丢失和严重的模糊效应。然而,现有方法难以在高倍率放大的需求下生成纹理清晰且语义准确的高分辨率遥感影像。

图1 SGDM模型架构示意图


该项研究工作创新性地提出一种面向真实遥感影像的高倍率遥感影像超分辨率重建模型SGDM,针对性地解决遥感影像高倍率超分辨率重建中存在的纹理模糊和地物结构错误等问题。我们的研究工作从“风格-内容”解耦的角度出发,将跨传感器的低分辨率遥感影像和高分辨率遥感影像分别分解到共享的内容域和各自的风格域。在内容方面,通过矢量地图提供地物结构及语义信息,指导模型生成语义准确且细节丰富的影像。在风格方面,通过目标传感器的风格信息统计建模,生成具有指定或风格多样的高分辨率影像。同时,利用预训练的Stable Diffusion生成模型作为先验,有效生成具有逼真纹理的高分辨率影像。我们还提出了一个包含矢量图的跨模态高倍率遥感图像超分辨率重建数据集(CMSRD)。在CMSRD上的大量实验结果表明,SGDM在真实场景下的遥感影像超分辨率重建具有优异的性能。在多个下游解译任务中,SGDM超分辨率重建影像的可用性也得到了充分的验证。

图2 32倍SGDM遥感影像超分辨率重建的可视化结果


该研究展示了生成式扩散模型在高倍率遥感影像超分辨率重建领域的潜力,为解决传统方法中语义模糊与风格失配等问题提供了新思路。

该工作由孙万捷副研究员(通讯作者)指导我院本科生王策(第一作者)完成。该研究成果得到了国家自然科学基金青年项目(62201403)和湖北省自然科学基金面上项目(2024AFB549)的支持。项目已经开源:

https://github.com/wwangcece/SGDM。


遥感地理视界
致力于分享遥感科学、地理科学、深度学习相关的最新前沿的顶刊文章。分享数据建模/软件操作/论文绘图等相关知识。文章和科研学术推广欢迎来稿,联系方式:eco_rs_gis@163.com或VX: ECO_RS_GIS 感谢您的关注!
 最新文章