VR体验场景下基于智能手环的用户情绪调节方法

    公开(公告)号:CN106861012A

    公开(公告)日:2017-06-20

    申请号:CN201710095462.X

    申请日:2017-02-22

    发明人: 张晖 高财政

    IPC分类号: A61M21/00 A61B5/0205 A61B5/16

    摘要: 本发明公开了一种VR体验场景下基于智能手环的用户情绪调节方法,首先利用智能手环的精确测量用户生理信息数据的特点,将人体的生理数据经过预处理并结合VR端的播放信息和用户自身的个人基准向量模型进行分类,判断用户是否处于情绪过度状态,若情绪处于过度状态,再进行进一步分类算法,得出用户的情绪等级。并根据用户等级发送相应的处理指令,通过无线模块发送给VR设备,VR设备根据指令做出调整。本发明通过VR终端和智能手环的交互,对智能手环采集到的生理信息数据进行处理,分类从而调节VR,给用户带来舒适安全的感官享受。

    一种基于学习补偿的背景噪声去除方法

    公开(公告)号:CN109841227B

    公开(公告)日:2020-10-02

    申请号:CN201910182463.7

    申请日:2019-03-11

    IPC分类号: G10L21/0208 G10L21/0216

    摘要: 本发明公开了一种基于学习补偿的背景噪声去除方法,包括以下步骤:步骤(1):按照会议规模将会议场景背景噪声数据集分为小型会议背景噪声、中等会议背景噪声、大型会议背景噪声;步骤(2):背景噪声估计具体为:步骤(2.1):采用GMM模型学习背景噪声的特征,分别得出小型会议背景噪声、中等会议背景噪声、以及大型会议背景噪声的背景噪声分布;步骤(2.2):通过GMM识别出采集的语音信号属于何种规模的背景噪声,最后根据识别结果选择对应规模的背景噪声分布;步骤(3):根据所估计出的背景噪声分布,采用噪声学习补偿算法对采集的语音信号进行补偿,去除采集语音信号中的背景噪声。本发明具有有效去除背景噪声的优点。

    一种VR场景下音频沉浸式控制方法

    公开(公告)号:CN106954127B

    公开(公告)日:2019-10-29

    申请号:CN201710224542.0

    申请日:2017-04-07

    发明人: 张晖 高财政 刘宝

    IPC分类号: H04R3/00

    摘要: 本发明涉及一种VR场景下音频沉浸式控制方法,为用户提供沉浸式的音频享受,其中,通过在游戏场景中通过读取游戏场景里发声的声源的方位与大小,来发给VR,再由VR判断用户与周围音响的方位,从而让对应哪个音响发声,这样就能真正实现,背后物体发声,用户切身感觉到敌人就在身后,飞机在头顶飞过,用户能感受到头顶确实有声音环绕。

    VR体验场景下为用户提供环绕立体声的方法及系统

    公开(公告)号:CN106878877A

    公开(公告)日:2017-06-20

    申请号:CN201710177529.4

    申请日:2017-03-23

    发明人: 张晖 高财政

    IPC分类号: H04R5/027

    CPC分类号: H04R5/027

    摘要: 本发明公开了一种VR体验场景下为用户提供环绕立体声的方法及系统,首先通过VR发送指令判断各个音响是否开机,如果没开机,则发送开机指令。VR根据自己的GPS信息和各个音响摆放位置的GPS信息,来计算与各个音响的距离,并根据距离计算每个音响应该播放的音量数据,系统根据VR提供的输出音频,将音频数据经过音频数据分频模块,根据音响的数目进行分频,分频后的音频数据和上述计算的音量数据通过无线模块传递给音响上的MIC,由MIC控制音响播放,VR根据自己的GPS变化后的信息,继续执行上述的计算距离和播放的音量数据,并发送给MIC;在播放过程中,用户通过VR上的声音按键,来调节音响上的播放音量数据从而更加实时有效的提升用户的VR体验。

    一种基于学习补偿的背景噪声去除方法

    公开(公告)号:CN109841227A

    公开(公告)日:2019-06-04

    申请号:CN201910182463.7

    申请日:2019-03-11

    IPC分类号: G10L21/0208 G10L21/0216

    摘要: 本发明公开了一种基于学习补偿的背景噪声去除方法,包括以下步骤:步骤(1):按照会议规模将会议场景背景噪声数据集分为小型会议背景噪声、中等会议背景噪声、大型会议背景噪声;步骤(2):背景噪声估计具体为:步骤(2.1):采用GMM模型学习背景噪声的特征,分别得出小型会议背景噪声、中等会议背景噪声、以及大型会议背景噪声的背景噪声分布;步骤(2.2):通过GMM识别出采集的语音信号属于何种规模的背景噪声,最后根据识别结果选择对应规模的背景噪声分布;步骤(3):根据所估计出的背景噪声分布,采用噪声学习补偿算法对采集的语音信号进行补偿,去除采集语音信号中的背景噪声。本发明具有有效去除背景噪声的优点。

    一种基于VR的教学系统及控制方法

    公开(公告)号:CN108269442A

    公开(公告)日:2018-07-10

    申请号:CN201810035423.5

    申请日:2018-01-15

    发明人: 张晖 高财政

    IPC分类号: G09B5/10 G09B5/14

    CPC分类号: G09B5/10 G09B5/14

    摘要: 本发明涉及一种基于VR的教学系统及控制方法,首先获取各从VR设备端的开机状态,从而统计出缺席的学生人数,然后在准备期间,提前将教学视频数据传递给各个从VR设备端,系统读取主VR设备端播放视频的进度,传递给各个从VR设备端,以此来控制各个从VR设备端的视频显示进度;当对教师讲解有疑惑时,或者有事情需要向老师反映时,从VR设备端将发送反馈信息给主VR设备端,从而教师根据学生的反馈调节教学进程;使VR在基础教学中也能有很大的作用,同时解决VR教育在交互方面的缺陷,更好将VR与教育结合更完美,更加提高学生的学习兴趣和学习能力。

    一种基于机器学习的VR场景沉浸控制方法

    公开(公告)号:CN107885323A

    公开(公告)日:2018-04-06

    申请号:CN201710857662.4

    申请日:2017-09-21

    发明人: 张晖 高财政

    IPC分类号: G06F3/01 G06K9/62 G06F3/16

    摘要: 本发明涉及一种基于机器学习的VR场景沉浸控制方法,使用基于隐马尔科夫模型的用户位置学习算法,预测用户的位置,进而通过VR场景音频输出设备指向用户算法,根据用户位置,调整VR场景音频输出设备的指向,进而达到调整声源指向的目的,并通过实时调节音量算法,解决距离衰减的问题,从而实现用户在空间随机移动时,在空间内任何一个位置听到的声音效果完全相同,完美的解决了这个问题,为VR用户提供了更多的自由度。

    基于模式匹配的哭声识别方法及智能看护系统

    公开(公告)号:CN107591162A

    公开(公告)日:2018-01-16

    申请号:CN201710628135.6

    申请日:2017-07-28

    IPC分类号: G10L25/24 G10L25/51 G08B21/00

    摘要: 本发明公开了一种基于模式匹配的哭声识别方法及智能看护系统,该方法首先建立婴儿哭声数据库;其次,实时采集当前环境中的语音信息,经过预处理成语音特征向量序列,与哭声数据库进行特征匹配,并将匹配的结果进行哭声判决。若识别结果为哭声语音,则立即触发报警指令。智能看护系统一方面会向用户发送婴儿哭闹报警信号;另一方面,通过播放预先录制的具有安抚婴儿情绪功能的语音,对婴儿进行情绪安抚。本发明提出的哭声识别方法及智能看护系统能及时发现婴儿哭闹,解决部分家长的看护难题。此外,还为智能家居实现智能看护功能提供了解决方案。

    一种基于会议场景小样本条件下的声纹准确识别方法

    公开(公告)号:CN109994116B

    公开(公告)日:2021-01-19

    申请号:CN201910182461.8

    申请日:2019-03-11

    IPC分类号: G10L17/08 G10L17/04 G10L17/02

    摘要: 本发明公开了一种基于会议场景小样本条件下的声纹准确识别方法,包括以下步骤:步骤(1):对每个说话人的特征向量矩阵执行差异化特征与样本点及独立化特征矩阵操作;再建立并保存针对每个说话人的预判模型;步骤(2):将待测语音的特征向量样本点均值矩阵中经筛选剔除后保留的列向量组成特征向量矩阵,再对该特征向量矩阵依次执行差异化特征与样本点操作及独立化特征矩阵操作;分别计算识别集中每个说话人特征矩阵与待测语音对应特征矩阵的相似度,选取训练阶段适当数目的说话人作为预判的结果;再将待测语音对应特征矩阵带入到预判结果中各预判模型里计算选取概率,选取概率最高的那个预判模型作为识别结果。本发明具有识别准确率高的优点。

    基于模式匹配的哭声识别方法及智能看护系统

    公开(公告)号:CN107591162B

    公开(公告)日:2021-01-12

    申请号:CN201710628135.6

    申请日:2017-07-28

    IPC分类号: G10L25/24 G10L25/51 G08B21/00

    摘要: 本发明公开了一种基于模式匹配的哭声识别方法及智能看护系统,该方法首先建立婴儿哭声数据库;其次,实时采集当前环境中的语音信息,经过预处理成语音特征向量序列,与哭声数据库进行特征匹配,并将匹配的结果进行哭声判决。若识别结果为哭声语音,则立即触发报警指令。智能看护系统一方面会向用户发送婴儿哭闹报警信号;另一方面,通过播放预先录制的具有安抚婴儿情绪功能的语音,对婴儿进行情绪安抚。本发明提出的哭声识别方法及智能看护系统能及时发现婴儿哭闹,解决部分家长的看护难题。此外,还为智能家居实现智能看护功能提供了解决方案。