公开(公告)号：CN110211196A

公开(公告)日：2019-09-06

申请号：CN201910452735.0

申请日：2019-05-28

申请人： 山东大学

发明人： 刘东岳 ,  宋雪萌 ,  郑娜 ,  陈召峥 ,  聂礼强 ,  关惟俐

IPC分类号： G06T11/00 ,  G06K9/62 ,  G06N3/04

摘要： 本公开提供了一种基于姿势引导的虚拟试穿方法及装置。其中，一种基于姿势引导的虚拟试穿方法，包括提取并利用目标人体的姿势关键点信息的特征和原人体体型的特征，预测目标人体的体型；利用第一卷积神经网络提取服装的特征信息，利用第二卷积神经网络提取预测的目标人体的体型与目标人体的姿势关键点的级联特征信息，计算出服装与目标人体匹配的分数，基于该分数得到形变后的服装；将形变后的服装特征信息及原始人体体型与目标人体姿势关键点的级联特征信息输入至基于注意力机制的双向生成对抗网络，最终输出试穿合成人像，所述试穿合成人像与原始人像可保持相同的数据分布。

公开(公告)号：CN110211196B

公开(公告)日：2021-06-15

申请号：CN201910452735.0

申请日：2019-05-28

申请人： 山东大学

发明人： 刘东岳 ,  宋雪萌 ,  郑娜 ,  陈召峥 ,  聂礼强 ,  关惟俐

IPC分类号： G06T11/00 ,  G06K9/62 ,  G06N3/04

摘要： 本公开提供了一种基于姿势引导的虚拟试穿方法及装置。其中，一种基于姿势引导的虚拟试穿方法，包括提取并利用目标人体的姿势关键点信息的特征和原人体体型的特征，预测目标人体的体型；利用第一卷积神经网络提取服装的特征信息，利用第二卷积神经网络提取预测的目标人体的体型与目标人体的姿势关键点的级联特征信息，计算出服装与目标人体匹配的分数，基于该分数得到形变后的服装；将形变后的服装特征信息及原始人体体型与目标人体姿势关键点的级联特征信息输入至基于注意力机制的双向生成对抗网络，最终输出试穿合成人像，所述试穿合成人像与原始人像可保持相同的数据分布。