公开(公告)号：CN117635771A

公开(公告)日：2024-03-01

申请号：CN202311690794.4

申请日：2023-12-11

Applicant: 浙江工业大学

Inventor： 殷敏 ,  梁浩然 ,  谢亮 ,  赵邢 ,  梁荣华

IPC: G06T11/60 ,  G06N3/0455 ,  G06N3/0464 ,  G06N3/0895

Abstract: 一种基于半监督对比学习的场景文本编辑方法和装置，其方法包括：准备训练数据，包含样式文本图像Is和标准内容文本图像Ic以及合成图像相应的标签；对样式文本图像Is中的文本进行擦除，得到无文本的背景图Ob以及Is对应的掩码图Masks；对样式文本图像ls和标准内容文本图像Ic进行预变换，即对Is进行背景过滤和样式增强得到I′s，并对Ic的文本方向进行调整，使其和Is的文本方向一致得到I′c；对I′s中的文本进行编辑，使其具有I′c的文本内容，并与背景特征融合得到初步的目标文本图像与其对应的掩码图Maskt；训练时，再结合对比学习策略对所得结果进行优化；在推理过程中，将与Maskt以及Ob执行一种笔划级别的修改，得到最终编辑完成的目标文本图像Ot。