-
公开(公告)号:CN118842919B
公开(公告)日:2024-11-22
申请号:CN202411323294.1
申请日:2024-09-23
IPC: H04N19/587 , H04N23/95 , H04N19/172 , G06N3/0464
Abstract: 本发明公开了一种利用事件相机数据进行动态帧插补方法,该方法包含以下步骤:S1.使用FPGA同步事件相机和RGB相机数据;S2.对采集得到的事件流数据执行动态积分,以生成连续的事件积分图像序列;S3.对连续的事件帧预测出光流,利用估计的光流对关键帧进行扭曲变形,生成新帧;S4.使用合成方法直接从边界关键帧和事件序列中融合信息,预测新帧;S5.将合成插值结果、变形插值结果及光流估计结果输入至注意力网络,以优化并确定最终新帧,随后将新帧与原始帧融合,形成平滑连续的视频流;本发明有效解决了传统插帧技术在处理复杂动态场景时帧数固定和计算资源浪费的问题。
-
公开(公告)号:CN118842919A
公开(公告)日:2024-10-25
申请号:CN202411323294.1
申请日:2024-09-23
IPC: H04N19/587 , H04N23/95 , H04N19/172 , G06N3/0464
Abstract: 本发明公开了一种利用事件相机数据进行动态帧插补方法,该方法包含以下步骤:S1.使用FPGA同步事件相机和RGB相机数据;S2.对采集得到的事件流数据执行动态积分,以生成连续的事件积分图像序列;S3.对连续的事件帧预测出光流,利用估计的光流对关键帧进行扭曲变形,生成新帧;S4.使用合成方法直接从边界关键帧和事件序列中融合信息,预测新帧;S5.将合成插值结果、变形插值结果及光流估计结果输入至注意力网络,以优化并确定最终新帧,随后将新帧与原始帧融合,形成平滑连续的视频流;本发明有效解决了传统插帧技术在处理复杂动态场景时帧数固定和计算资源浪费的问题。
-