公开(公告)号：CN116150473A

公开(公告)日：2023-05-23

申请号：CN202211305278.0

申请日：2022-10-24

申请人： 云南中烟工业有限责任公司

发明人： 周家贤 ,  蒲雪松 ,  郭梁 ,  刘志 ,  梁筱雨 ,  马宗泽 ,  王家寿 ,  曾建新 ,  李中华 ,  唐峻 ,  李欣明 ,  杨传真 ,  李淳 ,  赵桂艳 ,  甘志雄 ,  苏杨

IPC分类号： G06F16/9535 ,  G06F16/9536 ,  G06N3/0464 ,  G06N3/048 ,  G06N3/08

摘要： 本发明公开了一种新零售模式下基于多模态数据的消费者标签预测方法，其包括：通过感官模态特征提取器对多感官模态信息进行特征提取，得到伪标签序列，多感官模态信息至少包括嗅觉模态信息和感觉模态信息；通过基于卷积神经网络的跨模态原型网络生成用于表示用户与卷烟间的交叉关系的用户‑卷烟交叉特征；将消费者伪标签和用户‑卷烟交叉特征输入基于Transformer翻译模型的多模态协调器，得到消费者预测标签。本发明提供的新零售模式下基于多模态数据的消费者标签预测方法，将多模态中难以利用的嗅觉与感觉的模态信息与消费者信息进行协调学习，实现了模块化特定转换之间的功能层信息共享和对齐，使得消费者标签维度信息得以提升。