本发明公开了一种基于轮廓匹配的深度扩散方法，包括如下步骤：输入多帧图像，提取多帧图像中每一帧图像的轮廓以得到每一帧图像的轮廓序列；根据每一帧图像轮廓序列计算每一帧图像的轮廓序列中每个轮廓的轮廓特征值；将当前帧图像的每个轮廓特征值与当前帧的前一帧图像的轮廓序列中每个轮廓的轮廓特征值进行比对以获取当前帧图像的每个轮廓的在前一帧图像中的相似轮廓；将前一帧图像中的相似轮廓所包围区域的深度值赋值给当前帧的对应轮廓所包围区域生成当前帧图像的深度图。本发明还公开了一种基于轮廓匹配的深度扩散装置。本发明可以得到的非关键帧深度图边缘清楚、深度层次明确、平滑性能好且时域稳定性高。