公开(公告)号：CN117608991A

公开(公告)日：2024-02-27

申请号：CN202311585756.2

申请日：2023-11-24

Applicant: 北京京航计算通讯研究所

Inventor： 吴俊爽 ,  陈俊英 ,  满雨菲 ,  曲天润 ,  宋志强 ,  焦春炎 ,  张磊 ,  李皓宇 ,  李春静 ,  杨艳丹 ,  彭婷婷

IPC: G06F11/34 ,  G06F11/36 ,  G06N3/094 ,  G06N3/126 ,  G06F16/35

Abstract: 本发明涉及一种智能算法平台的性能测试方法和工具，属于软件测试领域。方法包括：构建文本序列数据集，并使用改进遗传算法的对抗样本生成方法基于各文本序列生成相应对抗序列数据集；分别在基准智能算法平台和待测智能算法平台运行待训练文本分类模型，得到基准智能算法平台性能指标值和待测智能算法平台的性能测试结果；在待测智能算法平台使用在该平台训练好的文本分类模型对对抗序列数据集进行分类预测，得到对抗预测结果；基于基准智能算法平台性能指标值、待测智能算法平台的性能测试结果和对抗预测结果得到待测智能算法平台的性能评价结果。本发明方法解决了现有工具不能对平台训练得到的智能算法模型的对抗鲁棒性进行评价的问题。

公开(公告)号：CN114064486B

公开(公告)日：2023-07-18

申请号：CN202111368168.4

申请日：2021-11-18

Applicant: 北京京航计算通讯研究所

Inventor： 陈俊英 ,  刘伟 ,  王嬴超 ,  曲天润 ,  吴俊爽 ,  刘博 ,  赵菲 ,  陈朋 ,  李春静 ,  张榕 ,  彭婷婷 ,  谷妤嫔 ,  张骢 ,  高米 ,  陈建任

IPC: G06F11/36 ,  G06F8/41

Abstract: 本发明公开了一种接口自动化测试方法，属于嵌入式软件测试技术领域，能够自动生成与接口协议字段相对应的预期结果，进而实现接口自动化测试方法。方法包括：确定与接口协议字段相对应的预编译文件；所述预编译文件是使用预编译语言编译的、且包括所述接口协议字段与测试测试用例的预期结果之间的映射关系；调用所述预编译文件，通过所述预编译文件输出所述预期结果，根据所述预期结果和测试所述测试用例的测试结果的比较结果，确定所述测试用例是否通过测试，并根据所述测试用例是否通过测试，确定接口测试是否通过。

公开(公告)号：CN114064486A

公开(公告)日：2022-02-18

申请号：CN202111368168.4

申请日：2021-11-18

Applicant: 北京京航计算通讯研究所

Inventor： 陈俊英 ,  刘伟 ,  王嬴超 ,  曲天润 ,  吴俊爽 ,  刘博 ,  赵菲 ,  陈朋 ,  李春静 ,  张榕 ,  彭婷婷 ,  谷妤嫔 ,  张骢 ,  高米 ,  陈建任

IPC: G06F11/36 ,  G06F8/41

Abstract: 本发明公开了一种接口自动化测试方法，属于嵌入式软件测试技术领域，能够自动生成与接口协议字段相对应的预期结果，进而实现接口自动化测试方法。方法包括：确定与接口协议字段相对应的预编译文件；所述预编译文件是使用预编译语言编译的、且包括所述接口协议字段与测试测试用例的预期结果之间的映射关系；调用所述预编译文件，通过所述预编译文件输出所述预期结果，根据所述预期结果和测试所述测试用例的测试结果的比较结果，确定所述测试用例是否通过测试，并根据所述测试用例是否通过测试，确定接口测试是否通过。