您的当前位置:首页 > 休闲 > 港中文(深圳)是如何让卫星重新"看清"地面的? 正文
时间:2026-07-17 13:37:53 来源:网络整理 编辑:休闲
这项由香港中文大学深圳)理工学院、上海人工智能实验室与西南交通大学地球科学与工程学院联合开展的前沿研究,已于2026年7月2日以预印本形式发布在arXiv平台论文编号:arXiv:2607.02471

这项由香港中文大学(深圳)理工学院、港中上海人工智能实验室与西南交通大学地球科学与工程学院联合开展的文深前沿研究,已于2026年7月2日以预印本形式发布在arXiv平台(论文编号:arXiv:2607.02471)。圳何感兴趣的让卫研究者可通过该编号获取完整原文。
卫星每天环绕地球飞行十余圈,星重新利用光学相机捕捉地表动态——从城市扩张到森林变迁,清地再到农田生长。港中然而,文深遥感领域长期面临一个棘手挑战:云层覆盖。圳何全球约60%-70%的让卫地表在任意时刻被云层遮蔽,导致卫星图像中大量区域仅呈现白茫茫的星重新云海,地面信息(森林、清地建筑、港中水体)完全不可见。文深
为此,圳何研究人员提出了“云去除”(Cloud Removal, CR)技术,旨在通过算法“擦除”云层,还原地面真实面貌。这并非简单的图像修图,而是在信息缺失情况下进行高难度的推断。
港中文(深圳)等机构的研究团队发现,现有去云算法存在一个被忽视的隐患:虽然修复后的图像在视觉上令人满意,但在后续机器分析任务(如建筑物识别、土地分类)中表现不佳。即“人眼觉得好,机器觉得错”。针对这一矛盾,团队提出了名为GACR(Geo-Anchored Cloud Removal,地理锚定云去除)的新框架,确保去云图像不仅“好看”,更“好用”。
要理解GACR的价值,需明确云对遥感数据的破坏性影响。
卫星图像是城市规划、生态监测和灾害评估的数据基石,这些应用高度依赖计算机自动识别地物类型。当云层出现时:
* 薄云:地面信息部分保留,算法尚有参考依据。
* 厚云:地面信息彻底封锁,算法需在近乎无线索的情况下“脑补”地面形态。
现有去云算法主要分为两类,均存在局限:
更根本的问题在于评价指标的错位。传统方法优化PSNR(峰值信噪比)和SSIM(结构相似性),关注像素级差异,却忽略地物类型的保留。这导致高PSNR图像在语义分割任务中准确率可能低于低PSNR图像。
核心矛盾:如何实现去云图像在视觉高保真与语义忠实性之间的统一?
研究团队提出了一套互补的解决方案,可将去云过程比喻为地图修复师的工作:
传统扩散模型从纯随机噪声开始反向推理,如同扔掉破损地图从零重画,丢失了原有残缺但珍贵的信息。
OAR-Flow的创新:
* 锚定起点:不以纯噪声为起点,而是以含云观测图像为锚点,通过更短、更有方向的轨迹抵达清晰图像。
* 自适应调节:
* 薄云区:以含云观测为主导,进行“保守修复”,顺着可见线条描摹。
* 厚云区:注入更多随机扰动,提供“大胆创造”的自由度以填补空白。
技术原理:
定义时间插值公式,中间状态由清晰图像、含云图像和高斯噪声加权构成。神经网络预测“速度场”,由清晰目标引导、含云观测锚定和随机噪声探索三者协同。
效果:相比对比方法EMRDM,OAR-Flow使收敛速度提升约3倍,达到相同图像质量所需的训练步数减少至三分之一。
OAR-Flow保证了图像“像”,GCPA则确保地物类型“对”。
核心机制:
* 引入预训练的视觉基础模型(VFM),如DINOv3,提取深层语义特征(如建筑、植被的特征向量)。
* 构建地理情境完整性损失(GCI Loss),计算去云结果与真实无云图像在VFM特征空间中的余弦相似度,强制两者在语义层面保持一致。
关键设计:
用于GCPA的VFM与下游评测使用的编码器完全独立,确保评测公平性,避免“训练与测试同源”导致的偏差。
权重平衡:
总损失函数为OAR-Flow速度匹配损失与GCPA语义损失的加权和。消融实验表明,权重系数λ=0.5时,图像质量与下游任务精度达到最佳平衡。
GACR选用HDiT(Hourglass Diffusion Transformer)作为骨干网络,相比潜扩散模型,HDiT直接在像素空间重建,更适合需要精确像素级恢复的去云任务。
研究团队构建了目前去云领域规模最大、覆盖最广的评测体系:
涵盖四类任务,使用冻结参数的DINOv3作为视觉编码器:
* 土地覆盖分类(CLS):2个子任务
* 建筑提取(BLD):2个子任务
* 语义分割(SEG):4个子任务
* 高度估计(HE):4个子任务
评测逻辑:先用清晰图像训练下游网络,再将各方法去云结果直接输入固定网络,通过精度变化衡量去云质量,排除训练变量干扰。
涵盖CNN(MPRNet)、Transformer(Restormer, AST)、Mamba(MambaIR)、动态滤波(DFCFormer)及扩散模型(EMRDM)等主流方法。
GACR在六个数据集上全面超越基线:
* CUHKCR-EXT-CS:GACR-SAT/1 PSNR达24.354 dB,优于最强基线EMRDM。
* 厚云场景(Vaihingen-CR-thick):GACR-SAT/1 PSNR达34.048 dB,比EMRDM(28.979 dB)提升约5.1 dB,验证了观测锚定在信息缺失时的巨大价值。
* SSIM指标:多个数据集达到0.990-0.991的极高水平。
对比上/下界:GACR表现接近“清晰图像上界”,甚至在某些指标上超越“含云图像直接训练”的下界方法,证明高质量去云对下游任务的关键价值。
任务敏感性差异:
* 分类任务:对云干扰相对不敏感,因全局语义表示具有鲁棒性。
* 分割/高度估计:需逐像素准确,云遮挡导致显著精度损失,去云价值在此类密集预测任务中体现最明显。
去云技术虽属遥感专业领域,但直接影响日常生活:
* 灾害评估:洪灾面积评估与救援规划。
* 粮食安全:秋粮产量预测依赖农田监测。
* 环境监测:城市热岛、碳汇测算及非法采矿监测。
GACR将去云从“视觉修复”重新定位为“面向理解的修复”,其利用视觉基础模型约束生成过程的思路,可推广至图像恢复、压缩伪影消除等广泛领域。
资源获取:
* 论文:arXiv:2607.02471
* 代码:GitHub已公开,仓库名为GACR。
Q1:去云技术对普通人有何意义?
A:虽然普通人不直接操作卫星,但去云是遥感分析的前提。全球60%-70%地表常被云覆盖,去云技术保障了洪灾评估、粮食预测、城市规划等关键应用的准确性,间接服务于公共安全与资源管理。
Q2:GACR与普通去云算法的核心区别?
A:普通算法仅追求像素级视觉指标(PSNR/SSIM),易产生“语义漂移”。GACR引入语义层面约束,通过DINOv3提供的地理情境先验,强制修复图像在深层语义特征上与真实无云图像对齐,确保“机器读得对”。
Q3:OAR-Flow为何能加速收敛?
A:传统扩散模型从纯噪声出发,轨迹长且方向不确定。OAR-Flow以含云观测图像为锚点,缩短了推理轨迹,使训练更新方向更明确。实验显示,单独使用OAR-Flow收敛速度提升3倍,结合GCPA后提升至5倍。
云端商旅:鲨鲨船长的治愈系空艇贸易冒险2026-07-17 13:21
具身智能论坛聚焦物理AI闭环,南方基金旗下司南投顾关注机器人产业链机会2026-07-17 12:58
消息称英特尔多数Nova Lake处理器生产转回自家18A工艺晶圆厂2026-07-17 12:56
塔图姆:布朗被交易的感觉很奇怪,但欢迎新队友的到来2026-07-17 12:42
菲方南海领土扩张主张不产生任何国际法效力(国际论坛)2026-07-17 11:32
又不收霍尔木兹海峡“过路费”了!特朗普宣布用新协议取代收费2026-07-17 11:32
她也不续约了!还将成立个人公司独立2026-07-17 11:26
多国人士反对有关国家翻炒非法“裁决”挑衅生事2026-07-17 11:25
人大附、十二中双名校落地在即,园博园这个“尖子生”红盘藏不住了!2026-07-17 11:05
小鹏第二代VLA完成欧洲本地化测试2026-07-17 10:53
卫报:图赫尔被斯卡洛尼“完爆”;英格兰队本性难移罪有应得2026-07-17 13:34
吴绮莉公开成龙拒认吴卓林原因:因为我不想做亲子鉴定,决定分开了,不管我有没有孩子,那跟成龙还有啥关系2026-07-17 13:09
000030,第二季度新增订单总额预计超86亿元!5股获机构逆市大幅净买入2026-07-17 12:30
在北京夏日追一场晚霞2026-07-17 12:18
多家NFC果汁生产车间被曝没有水果2026-07-17 11:45
精测电子:拟购买上海精测半导体41.17%股权,股票复牌2026-07-17 11:42
直播间熄火后,明星在生活区“活”了?2026-07-17 11:39
“会思考的身体”成为产业新引擎2026-07-17 11:35
西班牙2-0战胜法国,时隔16年再进世界杯决赛!亚马尔造点成全场比赛转折点,赛前他就放出狠话:再说一遍,我们不怕法国2026-07-17 11:34
具身智能论坛聚焦物理AI闭环,南方基金旗下司南投顾关注机器人产业链机会2026-07-17 10:56