-
公开(公告)号:CN110008373B
公开(公告)日:2021-02-26
申请号:CN201910192306.4
申请日:2019-03-14
Applicant: 浙江大学
IPC: G06F16/683
Abstract: 本发明公开了一种基于消息传递网络的音乐图结构信息提取与生成模型的构建方法,包括:(1)将音乐表达成音乐无向图;(2)在获得音乐无向图后,对音乐无向图进行编码,即采用节点特征提取更新函数提取音乐无向图中节点的隐藏特征;(3)将获得的隐藏特征输入至解码器中,经解码输出预测的音乐无向图;(4)计算预测的音乐无向图与步骤(2)中的音乐无向图的交叉熵损失函数值,利用交叉熵损失函数值更新解码器参数和节点特征提取更新函数的权重参数,以实现对解码器和编码器的训练,训练好的编码器即为音乐图结构信息提取模型,训练好的解码器即为音乐图结构信息生成模型。还公开了一种生成的音乐图结构信息生成模型作为音乐生成器的应用。
-
公开(公告)号:CN109992677B
公开(公告)日:2021-07-20
申请号:CN201910192297.9
申请日:2019-03-14
Applicant: 浙江大学
IPC: G06F16/432 , G06F16/435
Abstract: 本发明公开了一种基于Valence‑Arousal情感空间的图像‑音乐匹配系统,该图像‑音乐匹配系统应用时,实现以下步骤:将电子乐谱文件渲染成Wav音频文件,并基于Wav音频文件提取电子乐谱的音频特征,将该音频特征输入至音乐V‑A值提取模型中,经计算获得电子乐谱V‑A值;提取输入图像的面部表情特征和美学特征,将面部表情特征和美学特征输入至图像V‑A值提取模型经计算,获得图像V‑A值;根据图像V‑A值对电子乐谱V‑A值进行搜索匹配,以与图像V‑A值相对最接近的至多10个电子乐谱V‑A值对应的电子乐谱作为匹配结果并输出。该图像‑音乐匹配系统实现l为不同情感种类的图像匹配相对应的情感类型的音乐。
-
公开(公告)号:CN109979488B
公开(公告)日:2021-05-14
申请号:CN201910192278.6
申请日:2019-03-14
Applicant: 浙江大学
Abstract: 本发明公开了一种基于重音分析的人声转乐谱系统,该人声转乐谱系统应用时,实现以下步骤:(1)对人声音频进行采样,获得多个样本片段,然后对每个样本片段进行频率分析;(2)对每个样本片段进行重音分析;(3)根据重音分析结果和频率分析结果,对人声音频进行音符分割;(4)获得每个音符后,根据频率变化,测定每个音符的音高;(5)在获得每个音符的音高后,基于绝对音高对乐谱进行调性分析和调整,以获得最终的乐谱。该人声转乐谱系统能够时间将输入人声信号转化为乐谱。
-
公开(公告)号:CN110008373A
公开(公告)日:2019-07-12
申请号:CN201910192306.4
申请日:2019-03-14
Applicant: 浙江大学
IPC: G06F16/683
Abstract: 本发明公开了一种基于消息传递网络的音乐图结构信息提取与生成模型的构建方法,包括:(1)将音乐表达成音乐无向图;(2)在获得音乐无向图后,对音乐无向图进行编码,即采用节点特征提取更新函数提取音乐无向图中节点的隐藏特征;(3)将获得的隐藏特征输入至解码器中,经解码输出预测的音乐无向图;(4)计算预测的音乐无向图与步骤(2)中的音乐无向图的交叉熵损失函数值,利用交叉熵损失函数值更新解码器参数和节点特征提取更新函数的权重参数,以实现对解码器和编码器的训练,训练好的编码器即为音乐图结构信息提取模型,训练好的解码器即为音乐图结构信息生成模型。还公开了一种生成的音乐图结构信息生成模型作为音乐生成器的应用。
-
公开(公告)号:CN109992677A
公开(公告)日:2019-07-09
申请号:CN201910192297.9
申请日:2019-03-14
Applicant: 浙江大学
IPC: G06F16/432 , G06F16/435
Abstract: 本发明公开了一种基于Valence‑Arousal情感空间的图像‑音乐匹配系统,该图像‑音乐匹配系统应用时,实现以下步骤:将电子乐谱文件渲染成Wav音频文件,并基于Wav音频文件提取电子乐谱的音频特征,将该音频特征输入至音乐V‑A值提取模型中,经计算获得电子乐谱V‑A值;提取输入图像的面部表情特征和美学特征,将面部表情特征和美学特征输入至图像V‑A值提取模型经计算,获得图像V‑A值;根据图像V‑A值对电子乐谱V‑A值进行搜索匹配,以与图像V‑A值相对最接近的至多10个电子乐谱V‑A值对应的电子乐谱作为匹配结果并输出。该图像‑音乐匹配系统实现l为不同情感种类的图像匹配相对应的情感类型的音乐。
-
公开(公告)号:CN109979488A
公开(公告)日:2019-07-05
申请号:CN201910192278.6
申请日:2019-03-14
Applicant: 浙江大学
Abstract: 本发明公开了一种基于重音分析的人声转乐谱系统,该人声转乐谱系统应用时,实现以下步骤:(1)对人声音频进行采样,获得多个样本片段,然后对每个样本片段进行频率分析;(2)对每个样本片段进行重音分析;(3)根据重音分析结果和频率分析结果,对人声音频进行音符分割;(4)获得每个音符后,根据频率变化,测定每个音符的音高;(5)在获得每个音符的音高后,基于绝对音高对乐谱进行调性分析和调整,以获得最终的乐谱。该人声转乐谱系统能够时间将输入人声信号转化为乐谱。
-
-
-
-
-