本发明涉及图像处理领域，公开了一种基于特征点微调的多源遥感图像匹配方法及装置。包括：(1)特征点提取和粗匹配，得到初始匹配特征点对、仿射变换参数和矫正待配图；(2)对参考图像和矫正待配图中的每对特征点的局部区域进行扩展相位相关，微调待匹配图像的特征点坐标；(3)重新计算仿射变换参数和矫正待配图；(4)计算参考图像和矫正待配图的相位相关系数。重复过程(2)‑(4),直到相位相关系数连续3次递减。本发明利用了基于特征点的匹配方法对灰度差异和尺度差异鲁棒的特点，以及扩展相位相关法的匹配精度高的特点，提出特征点粗匹配后利用扩展相位相关进行特征点微调的匹配方法，能够提升多源遥感图像匹配的精度和鲁棒性。