本发明公开了基于视频AI行为分析的语音告警系统及方法，包括：前端数据层接入常规摄像机、视频监控平台、高清卡口监控系统并拍摄视频数据；基础互联网服务层将拍摄的视频数据进行接入、管理、分发、存储、回放和检索；视频智能分析服务层内设有智能分析算法对视频数据进行智能化分析处理，获得的标准化数据供上层业务应用层使用；业务应用层设有语音报警模块，根据所述标准化数据执行报警指令；用户层根据不同行业用户的业务差异，制定使用报警指令的使用规则；该系统和方法综合应用了视频处理、AI分析、强化学习和人体动作模拟等多种技术，具有高效、精准的特点，能够在各种环境下对人体行为进行实时监控和分析，及时发出警报，提高安全性。