公开(公告)号：CN112308746A

公开(公告)日：2021-02-02

申请号：CN202011042357.8

申请日：2020-09-28

申请人： 北京邮电大学

发明人： 梁美玉 ,  于婉莹 ,  杜军平 ,  陈徵 ,  黄勇康 ,  王笑笑

IPC分类号： G06Q50/20 ,  G06K9/00 ,  G06K9/62 ,  G06N3/04 ,  G06N3/08

摘要： 本说明书一个或多个实施例提供一种教学状态评估方法、装置及电子设备，通过多尺度卷积残差神经网络确定检测对象，在行为识别方面，通过深度可分离卷积神经网络提取检测对象行为特征，通过逻辑回归算法确定检测对象当前行为；在表情识别方面，通过深度可分离卷积神经网络确定检测对象表情特征，通过注意力机制优化检测对象表情特征，通过softmax分类器确定检测对象当前表情。本公开通过上述机制，提高了识别速度且提高了识别率。

公开(公告)号：CN113239237B

公开(公告)日：2021-11-30

申请号：CN202110787827.1

申请日：2021-07-13

申请人： 北京邮电大学

发明人： 梁美玉 ,  王笑笑 ,  杜军平

IPC分类号： G06F16/783 ,  G06F40/30 ,  G06N3/04 ,  G06N3/08

摘要： 本说明书一个或多个实施例提供一种跨媒体大数据搜索方法及装置，包括：分别提取图像数据的图像语义特征和文本数据的文本语义特征；计算图像语义特征和文本语义特征之间的相似度，根据相似度分别确定图像注意力特征和文本注意力特征；以图像注意力特征为输入，经过图像表示网络输出图像上下文特征向量；以文本注意力特征为输入，经过文本表示网络输出文本上下文特征向量；根据图像上下文特征向量和文本上下文特征向量，利用对抗学习确定统一语义表示；基于统一语义表示进行搜索。本说明书的搜索方法能够获得精确的搜索结果。

公开(公告)号：CN113239237A

公开(公告)日：2021-08-10

申请号：CN202110787827.1

申请日：2021-07-13

申请人： 北京邮电大学

发明人： 梁美玉 ,  王笑笑 ,  杜军平

IPC分类号： G06F16/783 ,  G06F40/30 ,  G06N3/04 ,  G06N3/08

摘要： 本说明书一个或多个实施例提供一种跨媒体大数据搜索方法及装置，包括：分别提取图像数据的图像语义特征和文本数据的文本语义特征；计算图像语义特征和文本语义特征之间的相似度，根据相似度分别确定图像注意力特征和文本注意力特征；以图像注意力特征为输入，经过图像表示网络输出图像上下文特征向量；以文本注意力特征为输入，经过文本表示网络输出文本上下文特征向量；根据图像上下文特征向量和文本上下文特征向量，利用对抗学习确定统一语义表示；基于统一语义表示进行搜索。本说明书的搜索方法能够获得精确的搜索结果。