Patent search ap:("中国科学院上海微系统与信息技术研究所") AND inv:"张亚峰" Page 1

1.

发明公开
一种基于背景过渡的长视频生成方法审中-实审

公开(公告)号：CN117354443A

公开(公告)日：2024-01-05

申请号：CN202311127718.2

申请日：2023-09-04

Applicant: 中国科学院上海微系统与信息技术研究所

Inventor： 王超懿 , 宋尧哲 , 张亚峰 , 裴俊 , 夏利杰 , 刘建坡

IPC: H04N5/265 , H04N5/272 , H04N5/262

Abstract: 本发明涉及一种基于背景过渡的长视频生成方法，包括以下步骤：将文本提示和动作帧作为输入生成嵌入特征，并通过去噪扩散概率模型生成m帧图像帧；对所述m帧图像帧进行背景扩散处理，得到所述m帧图像帧的前景和背景；将所述去噪扩散概率模型第k步生成的m帧图像帧与所述m帧图像帧的前景和背景进行融合，得到新的第k步的图像帧；基于新的第k步的图像帧通过所述去噪扩散概率模型生成新的m帧图像帧；基于新的m帧图像帧通过Gen‑L‑Video短视频扩散模型生成长视频。本发明使得生成的长视频的背景能够平滑过渡，具有连续性。

Patent Agency Ranking