微型SAR多采用调频连续波(FMCW)体制,发射功率低,图像斑点噪声更强;平台航高与姿态的非平稳变化导致主辅图像相干性易损失;机载嵌入式平台的算力、存储与功耗严格受限,无法支撑高复杂度算法的实时运行。传统星载、大型机载SAR的配准算法无法直接适配上述特性,亟需针对性的技术优化与创新。基于此,本文系统开展
无人机载微型SAR图像配准技术的研究与梳理,为该领域的技术发展与工程应用提供支撑。
1. 无人机载微型SAR的成像特性
当前主流的无人机载微型SAR多采用FMCW体制,相比传统脉冲SAR,其具备体积小、重量轻、功耗低、结构简单的核心优势,工作波段多集中在X、Ku、Ka波段,距离向与方位向分辨率可达分米级至米级。受无人机平台与载荷特性限制,其成像具有以下显著特征,直接决定了配准技术的核心需求:
(1)复杂几何畸变显著:无人机飞行质量受外界环境影响极大,航迹易偏离理想直线轨迹,俯仰、横滚、偏航姿态角快速波动,导致回波信号存在严重的相位误差,成像结果同时出现全局平移、旋转、缩放等刚性畸变,以及局部非线性形变;同时伴随叠掩、透视收缩、阴影等SAR固有几何畸变,畸变程度与空间不均匀性远高于星载与大型机载SAR。
(2)成像相干性易损失:无人机航高、航速、侧视角的非平稳变化,导致主辅图像间的空间基线不稳定,空间去相干效应显著;多时相成像的时间去相干、植被区域的体散射去相干,进一步降低了图像相干性,直接导致传统基于相位的配准方法性能急剧下降。
(3)信噪比与算力双重约束:微型SAR发射功率低,接收回波信噪比较大型SAR更低,图像乘性斑点噪声更为显著,给特征提取与匹配带来严重干扰;同时中小型无人机的载重、供电能力有限,搭载的嵌入式处理平台算力远低于地面工作站,无法支撑高复杂度配准算法的实时机载运行。
2. SAR图像配准的基础理论
SAR图像配准的核心是求解参考图像(主图像)与待配准图像(辅图像)之间的最优空间变换模型,实现两幅图像同名像素的空间对齐。完整的配准流程包含四个核心模块:
(1)特征空间:用于表征图像同名特征的信息集合,包括像素灰度、复相位、点特征、线特征、区域特征等,是配准算法的核心基础;
(2)相似性度量:用于评价主辅图像特征匹配程度的量化指标,常用指标包括复相干系数、归一化互相关、欧氏距离、互信息、结构相似性等;
(3)空间变换模型:用于描述主辅图像之间几何形变的数学模型,包括刚性变换(平移、旋转)、仿射变换(缩放、剪切)、非线性变换(薄板样条函数、高阶多项式变换)等;
(4)搜索策略:用于求解最优变换参数的迭代优化方法,常用方法包括金字塔多分辨率搜索、梯度下降法、随机抽样一致算法、模拟退火算法等。
根据配准原理的差异,当前无人机载微型SAR图像配准方法可分为三大类:基于相干性的配准方法、基于特征的配准方法、基于深度学习的配准方法,三类方法构成了该领域的核心技术体系。
1. 基于相干性的配准方法
基于相干性的配准方法是SAR干涉测量(InSAR)的核心配准方案,其核心原理是利用SAR复图像的相位信息,通过最大化主辅图像间的复相干系数求解最优空间变换参数,可实现亚像素级的配准精度。
复相干系数是表征主辅图像相干性的核心指标,其定义为:
γ = |E{s1 · s2*}| / sqrt(E{|s1|^2} · E{|s2|^2})
其中,s1、s2 分别为主辅图像对应像素的复数值,*表示共轭运算,E{·}表示数学期望。相干系数γ的取值范围为 [0, 1],γ越接近 1,表明主辅图像相干性越好,配准精度越高。
经典的基于相干性的配准采用粗配准+精配准的两步法架构:
(1)粗配准阶段:利用无人机搭载的INS/GNSS组合导航数据,结合SAR距离-多普勒成像几何模型,对主辅图像进行地理编码,将其映射到同一地理坐标系,完成全局平移、旋转、缩放的初始校正,将配准误差控制在数个像素以内,为精配准提供可靠初始值;
(2)精配准阶段:在粗配准基础上对主辅图像进行分块处理,通过频域相关法、子孔径相关法或二维复相关搜索,计算每个图像块的相干系数峰值位置,求解亚像素级偏移量,最终通过拟合得到全局或局部最优变换参数。
针对无人机载微型SAR的特性,该类方法的优化方向主要包括:采用自适应分块策略,对高相干区域赋予更高权重,抑制低相干区域的误差干扰;采用多分辨率金字塔配准架构,从低分辨率到高分辨率逐步细化,提升算法收敛性。
该方法的优势在于高相干场景下可实现0.1-0.3像素的亚像素级精度,计算效率高,适配InSAR地形测绘等应用;但局限性显著,对图像相干性要求极高,在无人机平台基线不稳定、多时相成像、植被覆盖等低相干场景下,相干系数峰值模糊,易出现误匹配,甚至完全失效。
2. 基于特征的配准方法
基于特征的配准方法不依赖SAR图像的相位相干性,通过提取主辅图像中具有旋转、缩放、仿射不变性的显著特征,完成同名特征匹配与变换参数求解,对低相干、大视角差异场景具有更强的鲁棒性,是当前无人机载微型SAR工程化应用的主流方案。
该类方法的核心流程分为四个步骤:
(1)图像预处理:针对SAR图像的乘性斑点噪声,采用Lee滤波、非局部均值滤波、Gamma-MAP滤波等方法进行去噪处理,在保留边缘与显著特征的前提下,抑制噪声对特征提取的干扰;
(2)特征提取:是该类方法的核心环节,针对SAR图像特性,研究人员对光学经典特征算子进行了针对性改进,形成了两大主流方向:
1)SAR-SIFT算子:当前应用最广泛的SAR专用特征算子,针对乘性斑点噪声,采用比率梯度算子代替传统SIFT的差分梯度算子,消除了乘性噪声对梯度计算的影响,同时保留了尺度、旋转不变性,对SAR图像强散射点、边缘特征具有优异的提取效果;
2)轻量化特征算子:针对机载算力约束,基于ORB、BRISK等二值化特征算子进行SAR适配改进,通过比率梯度计算、仿射不变性优化,在保持匹配鲁棒性的前提下,将计算量降低一个数量级,可实现准实时配准处理;
(3)特征匹配:通过计算特征描述子之间的欧氏距离、汉明距离等相似性度量,采用最近邻/次近邻比值法完成初始粗匹配,得到同名特征点对集合;
(4)误匹配剔除与变换模型求解:采用随机抽样一致(RANSAC)算法、PROSAC算法结合几何约束剔除误匹配点对;针对无人机载SAR的非线性畸变,采用“全局仿射变换+局部非线性变换”的分层策略,通过全局变换校正大尺度几何畸变,通过薄板样条函数、高阶多项式变换校正局部非线性形变,最终完成图像精准配准。
该方法的优势是不依赖相位相干性,对多时相、大视角、低相干场景的鲁棒性远优于相干性方法;局限性在于,在弱纹理、特征稀疏的荒漠、水面等区域,特征提取效果差,易出现匹配失效,同时传统SAR-SIFT算子计算量较大,难以在机载平台实现实时处理。
3. 基于深度学习的配准方法
近年来,深度学习技术凭借强大的特征自动提取能力与端到端优化特性,成为该领域的研究热点,有效解决了传统方法在强噪声、低相干、特征稀疏场景下的鲁棒性不足问题,同时可通过网络轻量化适配机载算力约束。当前主流技术路线分为三类:
(1)基于深度特征匹配的配准方法
该方法采用卷积神经网络(CNN)替代传统手工特征算子,通过孪生网络(Siamese Network)架构,共享权重的两个分支分别提取主辅图像的深度特征,生成高维鲁棒特征描述子,随后通过特征匹配与变换参数求解完成配准。针对SAR图像特性,通常在网络中加入注意力机制,聚焦建筑、角反射器等强散射显著特征,抑制斑点噪声与弱纹理区域的干扰;通过对比学习预训练,提升特征对视角变化、相干性损失的不变性。该方法的特征匹配鲁棒性远优于传统手工算子,在低相干、特征稀疏场景下仍可保持高匹配正确率。
(2)端到端无监督配准网络
该方法无需显式特征匹配步骤,直接通过神经网络输出主辅图像之间的全局或局部形变场,实现端到端配准。典型代表是基于U-Net架构的VoxelMorph网络SAR改进版,采用无监督学习方式,以主辅图像的归一化互信息、结构相似性作为损失函数,直接优化形变场生成效果。针对无人机载SAR的非线性畸变,该方法可自适应生成局部形变场,校正复杂局部畸变,配准精度与鲁棒性显著优于传统方法;通过MobileNet、ShuffleNet等轻量化骨干网络替换传统卷积层,可大幅降低网络参数量与计算量,适配机载嵌入式平台的实时处理需求。
(3)多模态融合配准方法
无人机平台通常同时搭载微型SAR与光学相机、LiDAR等多源载荷,多模态图像配准是提升遥感解译精度的核心环节。基于深度学习的多模态配准方法,通过跨模态对比学习、生成式对抗网络(GAN),学习SAR与光学/LiDAR图像之间的模态不变特征,消除不同成像机制带来的灰度、纹理差异,实现跨模态图像精准配准,为无人机多源遥感数据融合应用提供支撑。
该类方法的核心瓶颈在于标注数据集的缺乏,当前研究多采用半监督、自监督学习方法,通过SAR成像仿真数据预训练网络,再用少量真实数据微调,有效缓解了标注数据不足的问题。
三、核心挑战与针对性优化策略
1. 核心技术挑战
无人机载微型SAR的平台与成像特性,使其图像配准技术面临四大核心挑战,显著区别于星载与大型机载SAR配准:
(1)复杂几何畸变的高精度校正难题:无人机平台的非平稳运动导致图像同时存在全局刚性畸变与局部非线性畸变,叠掩、透视收缩等畸变的空间分布不均匀,传统单一变换模型难以实现全场景高精度校正;
(2)强噪声与低相干场景的鲁棒性难题:微型SAR低发射功率导致的强斑点噪声、平台不稳定导致的空间去相干、多时相成像导致的时间去相干,使得传统方法的特征提取与匹配精度急剧下降,在弱纹理区域易出现匹配失效;
(3)机载算力约束下的实时处理难题:中小型无人机的机载嵌入式算力、存储与功耗严格受限,传统高精度配准算法计算复杂度高,无法实现机载实时处理,难以满足应急救援、战场侦察等场景的实时性需求;
(4)大视角差异成像的配准失效难题:无人机作业中常出现大角度侧视、航迹交叉、航高大幅变化等情况,导致主辅图像视角差异极大,同名特征的几何形态差异显著,传统方法的特征不变性难以适配,匹配正确率大幅下降。
2. 针对性优化策略
针对上述挑战,当前国内外研究形成了四大核心优化策略,有效提升了配准的精度、鲁棒性与实时性:
(1)成像-配准一体化误差补偿策略:将INS/GNSS组合导航数据与SAR成像运动补偿、图像配准深度融合,在成像阶段通过高精度运动补偿校正大部分平台运动误差,降低图像先天几何畸变,减少配准环节的误差传递;同时基于SAR距离-多普勒成像模型,建立主辅图像的先验几何映射关系,为配准提供高精度初始值,大幅提升配准的收敛速度与精度。
(2)多约束融合的鲁棒配准策略:针对强噪声与低相干场景,采用“强散射点全局约束+高相干区域局部精配准”的混合架构,以建筑角点、角反射器等强散射点作为全局几何约束,保证配准的整体一致性;以高相干区域的复相干系数作为局部精配准依据,实现亚像素级精度;结合多尺度金字塔配准策略,从低分辨率到高分辨率逐步细化,抑制斑点噪声干扰。
(3)算法-硬件协同的轻量化实时处理策略:在算法层面,采用二值化轻量化特征算子、模型剪枝与量化的轻量化深度学习网络,将配准算法的计算量与参数量降低90%以上;在硬件层面,采用FPGA、边缘GPU等异构计算平台,对核心计算模块进行硬件加速,当前主流方案已可实现1024×1024分辨率SAR图像的毫秒级配准,满足机载实时处理需求。
(4)成像几何约束的大视角配准策略:针对大视角差异场景,先基于SAR距离-多普勒方程,结合主辅图像的轨道、姿态参数,将两幅图像映射到同一斜距平面或地距平面,完成初始几何畸变校正,大幅缩小视角差异;随后采用具有仿射不变性的特征算子,提取对视角、缩放不敏感的显著特征,完成匹配与配准,有效解决大视角下的配准失效问题。
四、实验验证与性能分析
为验证不同配准方法的性能,本文采用某型旋翼无人机搭载的Ku波段FMCW微型SAR系统实测数据开展实验。该系统核心参数为:Ku波段工作,信号带宽300MHz,距离向/方位向分辨率0.5m,航高500m,侧视角30°。实验选取两组实测数据:数据集1为平稳航迹下的同轨主辅图像,相干性良好;数据集2为强风扰条件下的异轨多时相图像,存在显著几何畸变与低相干植被区域。
实验选取4种主流算法进行对比:①传统复相干系数配准法;②SAR-SIFT+RANSAC算法;③轻量化孪生网络配准法;④端到端无监督配准网络。评价指标包括配准精度(均方根误差RMSE,单位:像素)、特征匹配正确率、单帧图像配准运行时间,实验结果如下:
在数据集1(高相干平稳场景)中,4种算法均实现了亚像素级配准精度。其中传统复相干系数法精度最高,RMSE达0.21像素,运行时间仅12ms,适配高相干InSAR应用场景;SAR-SIFT算法与两种深度学习方法的RMSE分别为0.32像素、0.28像素、0.25像素,匹配正确率均在95%以上。
在数据集2(强风扰低相干场景)中,传统复相干系数法性能急剧下降,RMSE达2.37像素,匹配正确率仅62%,在植被区域出现明显配准偏差;SAR-SIFT+RANSAC算法鲁棒性显著提升,RMSE为0.56像素,匹配正确率达87%,但运行时间达186ms,难以满足实时需求;轻量化孪生网络配准法RMSE为0.42像素,匹配正确率达93%,运行时间仅47ms;端到端无监督配准网络对局部非线性畸变的校正效果最优,RMSE低至0.35像素,运行时间为68ms。
实验结果表明:传统相干性方法仅适用于高相干平稳场景;基于特征的SAR-SIFT算法适配低相干场景,但计算量较大;轻量化深度学习方法在配准精度、鲁棒性与实时性之间实现了最优平衡,是未来机载实时配准的核心发展方向。
五、典型应用场景
无人机载微型SAR图像配准技术的突破,推动了其在多个领域的规模化工程化应用,典型场景包括:
1. 应急测绘与灾害救援:在地震、洪水、山体滑坡等自然灾害发生后,微型SAR可突破云雾、阴雨天气限制,快速获取灾区影像;通过灾前与灾后图像的精准配准,可快速完成变化检测,识别建筑倒塌、道路损毁、堰塞湖等灾情信息,为应急救援提供高精度地理空间数据支撑。
2. 战场侦察与态势感知:中小型无人机具备隐蔽性强、机动灵活的优势,搭载微型SAR可实现战场前沿全天时全天候侦察;通过多时相图像的精准配准,可实现军事目标部署变化、动目标轨迹的精准检测,为战场态势感知提供核心情报支撑。
3. 农业与生态环境监测:通过多时相图像配准,可反演土壤湿度、作物长势、植被覆盖度等参数,实现农作物生长状态动态监测;同时可用于湿地生态变化、荒漠化进程、森林火灾损毁等生态环境的长期监测。
4. 城市测绘与精细化管理:通过InSAR高精度配准,可生成城市区域高精度数字高程模型与数字表面模型,实现城市三维建模;同时可用于城市违建监测、地面沉降监测等精细化管理场景。
无人机载微型SAR图像配准技术是支撑其遥感应用的核心基础技术,针对无人机平台的独特挑战,当前已形成了基于相干性、基于特征、基于深度学习的三大核心技术体系,各方法在精度、鲁棒性、实时性方面各有优劣,可适配不同的应用场景。
MiniSAR聚焦于微型合成孔径雷达(SAR)制造研发,为用户提供定制化机载SAR、轻型MiniSAR、无人机载MiniSAR、SAR数据采集服务、SAR飞行服务等。如您有相关业务需求,欢迎联系!