本发明涉及一种CMS协议的一致性测试方法，属于变电站电力自动化通信技术测试领域。本发明通过一个客户端来加载解析测试所需的模型文件以及创建对象空间；通过其他客户端创建用于启动多客户端线程的线程类，通过调用相应函数启动待测功能服务与多客户端建立连接；在建立起各客户端与待测功能服务的连接后通过调用启动函数使其他子客户端在基于线程类CommThread新建立的线程中运行；在新线程运行过程中根据解析模型文件、配置参数以及待测功能服务，发送相关报文进行测试。与现有技术相比，本发明解决了同时启用多个客户端占用庞大的计算机资源、硬件成本大的问题。