本发明涉及计算机辅助教育领域，提供一种全自动口语评测管理与评分系统，其包括依次连接的客户端、落地服务器以及网络服务器，所述考生作答结果包括朗读题的口语测评结果以及自发性口语表述题的口语测评结果中的一种，所述落地服务器还包括评分装置，该评分装置包括识别模块和评分模块，所述识别模块包括声学子模块、语言子模块以及识别子模块；所述评分模块包括特征提取子模块和评分子模块。本发明还提供一种全自动口语评测管理与评分方法。本发明的全自动口语评测管理与评分系统及其评分方法可以完全由计算机自动控制考生的准备答题时间和作答时间，无需人工干预，并且比人工计时更为准确，进一步确保了评测的公平性。