公开(公告)号：CN119066182A

公开(公告)日：2024-12-03

申请号：CN202411569141.5

申请日：2024-11-05

Applicant: 之江实验室

Inventor： 谢兼 ,  魏淑萍 ,  张君兰 ,  肖津 ,  杨文涛 ,  魏居业 ,  段晓冉 ,  葛琦峰 ,  杨江

IPC: G06F16/332 ,  G06N5/04

Abstract: 本说明书公开了一种针对大模型多轮对话能力的测试方法以及装置。获取主题问题文本，并确定对待测模型进行测试所需的对话轮数。根据对话轮数，执行针对待测模型的多轮输入操作，其中，针对每轮对话，将该轮对话对应的输入数据输入到待测模型中，得到待测模型在该轮对话输出的回答文本，并将待测模型在该轮对话输出的回答文本以及预设的提示语句输入到预设的辅助模型中，以通过辅助模型得到下一轮对话输入到待测模型中的输入数据，当该轮对话为首轮对话时，该轮对话对应的输入数据为主题问题文本。将每轮对话对应的输入数据以及预设的评测文本输入到预设的评测模型，以得到针对待测模型的测试结果，评测文本记录有对待测模型进行评测的评测规则。

公开(公告)号：CN119066182B

公开(公告)日：2025-04-25

申请号：CN202411569141.5

申请日：2024-11-05

Applicant: 之江实验室

Inventor： 谢兼 ,  魏淑萍 ,  张君兰 ,  肖津 ,  杨文涛 ,  魏居业 ,  段晓冉 ,  葛琦峰 ,  杨江

IPC: G06F16/3329 ,  G06N5/04

Abstract: 本说明书公开了一种针对大模型多轮对话能力的测试方法以及装置。获取主题问题文本，并确定对待测模型进行测试所需的对话轮数。根据对话轮数，执行针对待测模型的多轮输入操作，其中，针对每轮对话，将该轮对话对应的输入数据输入到待测模型中，得到待测模型在该轮对话输出的回答文本，并将待测模型在该轮对话输出的回答文本以及预设的提示语句输入到预设的辅助模型中，以通过辅助模型得到下一轮对话输入到待测模型中的输入数据，当该轮对话为首轮对话时，该轮对话对应的输入数据为主题问题文本。将每轮对话对应的输入数据以及预设的评测文本输入到预设的评测模型，以得到针对待测模型的测试结果，评测文本记录有对待测模型进行评测的评测规则。

公开(公告)号：CN119621889A

公开(公告)日：2025-03-14

申请号：CN202411667925.1

申请日：2024-11-21

Applicant: 之江实验室

Inventor： 陈昕 ,  张君兰 ,  周英 ,  朱蒙蒙 ,  姜娜 ,  谢兼

IPC: G06F16/3329 ,  G06F16/353 ,  G06F40/30 ,  G06N5/022 ,  G06N5/04

Abstract: 本申请涉及一种基于大模型的垂类知识问答方法及装置，应用于信息技术领域，该方法包括：接收用户输入的提问文本；基于预先构建的大模型对提问文本进行语义识别，得到识别结果；在确定识别结果中包含预设关键字的情况下，调用与预设关键字相匹配的目标插件工具对提问文本进行任务处理，输出处理结果；在确定识别结果中不包含预设关键字的情况下，检测用户输入提问文本时对专业问答选项的操作结果，并基于操作结果确定当前问答类型，将识别结果输入至与当前问答类型相匹配的目标资源库中进行匹配，输出目标资源。通过本申请，解决了现有技术中垂类知识问答存在着不智能、不准确的技术问题。

公开(公告)号：CN116797052A

公开(公告)日：2023-09-22

申请号：CN202311078064.9

申请日：2023-08-25

Applicant: 之江实验室

Inventor： 魏居业 ,  伍明瑞 ,  邓超 ,  朱蒙蒙 ,  谢兼 ,  王书尧 ,  周英 ,  张君兰 ,  齐炎

IPC: G06Q10/0637 ,  G06Q50/20 ,  G09B19/00

Abstract: 本申请涉及一种基于编程学习的资源推荐方法、装置、系统和存储介质，其中，该基于编程学习的资源推荐方法包括：获取学习者的编程练习结果，根据所述编程练习结果确定所述学习者对各个编程知识点的掌握程度；根据各个所述编程知识点对所述学习者的编程能力的贡献度，确定各个所述编程知识点的考评权重；根据所述学习者对各个编程知识点的掌握程度和各个所述编程知识点的考评权重，生成所述学习者的编程能力画像；根据所述学习者的编程能力画像，向所述学习者推荐编程学习资源。通过本申请，提供了一种针对编程学习的个性化资源推荐方法，解决了相关技术中缺乏针对编程学习的有效的资源推荐方法的问题。