公开(公告)号：CN119884827A

公开(公告)日：2025-04-25

申请号：CN202411992425.5

申请日：2024-12-31

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 张治国 ,  张驰 ,  宋贞羲

IPC: G06F18/24 ,  G06F18/10 ,  G06F18/213 ,  G06F18/2131 ,  G06N3/0455 ,  G06N3/092 ,  G06N3/047 ,  G06N3/048 ,  G06N3/049 ,  G06N3/0464 ,  G06F18/23 ,  G06N3/084 ,  G06N3/0895 ,  G06F16/353 ,  G06F40/284

Abstract: 本发明公开一种阅读诱发脑电的强化学习情感分析方法及装置，涉及自然语言理解和认知神经科学技术领域。方法包括：基于阅读眼动信息获取与文本分词对应的诱发脑电片段；以完整语义句子为单位输入脑电片段至脑电分词器、量化器与编码器，通过自监督重建范式预训练上述模块；利用量化器离散的脑电向量激活智能体，筛选关键脑电向量集合，基于该集合推断情感分类；构造强化脑电向量集合类、多样性、表征性的奖励函数，优化智能体的选择策略。采用本发明，可以为自然阅读脑机接口的情感识别提供一种新范式。

公开(公告)号：CN119884345A

公开(公告)日：2025-04-25

申请号：CN202411992429.3

申请日：2024-12-31

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院)

Inventor： 张驰 ,  宋贞羲 ,  张治国

IPC: G06F16/334 ,  G06N3/0455 ,  G06N3/0895 ,  G06F18/213 ,  G06F18/24

Abstract: 本发明公开一种基于语义对齐与句子检索的脑电文本解码方法及装置，涉及自然语言理解和认知神经科学技术领域。方法包括：将脑电信号训练数据输入初始的脑电信号编码模型，将文本真值输入BERT模型，进而计算对比学习损失函数；将预测脑电信号编码特征输入初始的分类器，计算分类损失函数；结合对比学习损失函数与分类损失函数，对初始的脑电信号编码模型和初始的分类器进行训练；将待生成脑电信号输入到训练好的脑电信号编码模型，将编码特征输入分类器，将单词预测概率输入波束搜索模块，得到关键词集合，根据AhoCorasick算法在语料库中检索出与关键词集合相似度最高的文本语句。采用本发明，可以实现高效、准确的脑电文本生成。

公开(公告)号：CN119048964A

公开(公告)日：2024-11-29

申请号：CN202411268855.2

申请日：2024-09-11

Applicant: 哈尔滨工业大学(深圳)(哈尔滨工业大学深圳科技创新研究院) ,  人民日报智慧媒体有限责任公司

Inventor： 俞俊 ,  张艺骞 ,  刘晓鹏 ,  刘卜瑜 ,  张驰 ,  包俊 ,  黄强

IPC: G06V20/40 ,  G06V10/774

Abstract: 本发明属于计算机视觉与机器学习技术领域，本发明公开了一种基于视频语义结构化解析的监督数据生成方法，包括如下步骤：初始化，构造标注集、未标注集，训练视频文稿生成模型，准备一个大型视觉‑语言模型，确定主动学习选择阶段数和每个阶段选择的预算；对未标注集中的视频进行采样得到帧，通过大型视觉‑语言模型生成图像描述，同时用视频文稿生成模型生成文稿；参考SPICE，将文本形式的图像描述和文稿转换为场景图；通过对样本进行内部和外部度量，计算未标注的视频的可学习性得分，该方法遵循基于池的主动学习流程，有效地利用了可学习性、多样性和不确定性对最有价值的视频进行监督数据标注。