一种铜制或木制乐器的多模态转谱方法及系统

    公开(公告)号:CN113257210A

    公开(公告)日:2021-08-13

    申请号:CN202110613485.1

    申请日:2021-06-02

    Abstract: 本发明公开了一种铜制或木制乐器的多模态转谱方法及系统,包括:采集演奏现场演奏的现场图像信息、音频信息与气流强度信息;根据所述现场图像信息与所述气流强度信息并利用深度学习策略获得当前演奏的音高数据,以及利用RESNET网络提取所述音频信息的音高数据;将两部分音高数据通过集成学习策略进行多模态融合,自动优化其协同度,输出MIDI文件,实现多模态转谱。本发明可以克服视觉转谱与听觉转谱各自的不足,同时又结合它们的优点,在降低计算量的同时,提升了转谱的准确率与效率。

    一种铜制或木制乐器的多模态转谱方法及系统

    公开(公告)号:CN113257210B

    公开(公告)日:2023-10-24

    申请号:CN202110613485.1

    申请日:2021-06-02

    Abstract: 本发明公开了一种铜制或木制乐器的多模态转谱方法及系统,包括:采集演奏现场演奏的现场图像信息、音频信息与气流强度信息;根据所述现场图像信息与所述气流强度信息并利用深度学习策略获得当前演奏的音高数据,以及利用RESNET网络提取所述音频信息的音高数据;将两部分音高数据通过集成学习策略进行多模态融合,自动优化其协同度,输出MIDI文件,实现多模态转谱。本发明可以克服视觉转谱与听觉转谱各自的不足,同时又结合它们的优点,在降低计算量的同时,提升了转谱的准确率与效率。

    一种基于答案引导的视觉常识推理去偏方法及系统

    公开(公告)号:CN119398174A

    公开(公告)日:2025-02-07

    申请号:CN202411533851.2

    申请日:2024-10-31

    Abstract: 本发明公开了一种基于答案引导的视觉常识推理去偏方法及系统,涉及视觉常识推理技术领域,包括以下步骤:获取图片与原始文本,将图片与原始文本进行配对,得到负样本,提取负样本内图片和问题以及答案文本;将图片和问题输入至预先建立的图片编码器内,输出得到图片编码特征,将答案文本输入至预先建立的文本编码器内,输出得到文本编码特征,将图片编码特征和文本编码特征通过单模态特征处理以及模态间特征融合,得到多模态特征;接收视觉常识推理数据集,抽取视觉常识推理数据集内的正确候选答案,生成去偏特征样本集,提取去偏特征样本集内特征,作为答案特征;将多模态特征与答案特征经过注意力机制,计算得到融合特征,基于融合特征计算得出候选答案的概率,将候选答案的概率最高的候选答案作为预测答案。

    一种具有击弦锤检测功能的钢琴教辅装置

    公开(公告)号:CN215117926U

    公开(公告)日:2021-12-10

    申请号:CN202121232369.7

    申请日:2021-06-03

    Abstract: 本实用新型公开了一种具有击弦锤检测功能的钢琴教辅装置,包括夹具,所述夹具包括顶板、设置在所述顶板底部的固定夹,以及;导线,所述夹具通过所述导线进行连接;以及,检测装置,所述检测装置设置在通过导线与所述夹具进行连接;利用固定夹和防滑纹的设计,将设备与击弦锤紧紧地固定住,结构新颖结实,既不影响演奏效果又很好地通过加速度检测了演奏的快慢和强弱;通过对击弦锤即按键加速度的分析,可以有效地检测弹奏的是钢琴中的哪一个键和演奏的速度、强弱,一举多得。

    一种钢琴踏板压踩力度监测系统

    公开(公告)号:CN215262187U

    公开(公告)日:2021-12-21

    申请号:CN202121219647.5

    申请日:2021-06-02

    Abstract: 本实用新型公开了一种钢琴踏板压踩力度监测系统,其包括弹奏组件,所述弹奏组件包括钢琴,所述钢琴配备有鞋套,所述钢琴上设置有踏板盒,所述踏板盒上安装有三个踏板;以及,监测组件,所述监测组件包括压力传感器,所述压力传感器设置在所述鞋套底部;本实用新型可以监测弹奏者对钢琴踏板踩压的力度,对于初学者具有很好的学习效果,可以把控弹奏时的音效,而且对三个踏板实行不同的电子标号实时在显示器上显示,方便演奏者在演奏时查看自己踩压的是哪一个踏板,减少失误的次数。

Patent Agency Ranking