本发明公开了一种语音识别方法及装置，在对包括第一对象与第二对象之间至少两组交互的待处理语音中的每一交互语音数据进行特征提取后，利用第一声学模型对特征提取结果进行解码，得到第一识别结果，并根据第一识别结果，确定交互语音数据中的关键词；然后利用第二声学模型对关键词进行识别，得到第二识别结果；根据关键词和第二识别结果，确定待处理语音中与关键词对应的语义词，构建关键词与语义词的映射；并根据映射，对第二识别结果进行修正，输出待处理语音的识别结果。避免了在语音识别装置应用前准备大量的语音和文本数据进行模型训练，有效提高模型的通用性，并在应用过程中快速提高语音识别的精确度。