一种基于细粒度适配器的视觉问答方法和系统

    公开(公告)号:CN118607526A

    公开(公告)日:2024-09-06

    申请号:CN202410719064.0

    申请日:2024-06-05

    Applicant: 湖南大学

    Abstract: 本发明公开了一种基于细粒度适配器的视觉问答方法,其从三个方面提升视觉问答的效果,一方面利用Spacy进行命名实体识别以获取问题中的特殊信息,同时利用Ground‑Dino模型能捕获到图片中与特殊信息相关的细粒度区域;另一方面,利用图文匹配预训练大模型CLIP提取图片的多粒度语义特征,利用语言预训练大模型llama‑7B提取文本语义特征,并利用视觉语义特征提取模块将视觉域迁移到语义域,实现了视觉和语义对齐,使模型兼具视觉感知能力与语义理解能力;最后,利用基于细粒度适配器微调llama‑7B预训练语言模型所得到的多模态模型生成问题的答案,由于适配器体量小,能够轻量级而高效地迁移预训练模型中的知识到具体的视觉问答任务上。

    一种面向算力网络的弹性资源调度方法和系统

    公开(公告)号:CN117294766A

    公开(公告)日:2023-12-26

    申请号:CN202311199936.7

    申请日:2023-09-18

    Applicant: 湖南大学

    Abstract: 本发明公开了一种面向算力网络的弹性资源调度方法,包括:算力网络通过路由层获取算力网络中所有算力中心中每一个算力中心的统计信息,以及任意两个算力中心之间通信网络的信道状态,算力网络根据每个算力中心的统计信息计算该算力中心的服务供应压力程度,并根据服务供应压力程度对该算力中心进行分类,即将其划分为资源紧缺方或资源充足方;算力网络将资源紧缺方和资源充足方的统计信息、以及任意两个算力中心之间通信网络的信道状态输入预先构建的跨地域队列模型,以得到算力网络的全局跨地域队列集合。本发明能够解决现有的集中式资源调度方法存在的当计算节点故障或业务量激增时,难以及时响应需求变化并进行资源的弹性调度的技术问题。

    一种基于改进YOLOX的海上船舰目标检测方法和系统

    公开(公告)号:CN116740572A

    公开(公告)日:2023-09-12

    申请号:CN202310745572.1

    申请日:2023-06-25

    Applicant: 湖南大学

    Abstract: 本发明公开了一种基于改进YOLOX的海上船舰目标检测方法,包括:通过感知传感器获取待检测的海上船舰图像,对待检测的海上船舰图像进行数据预处理,以得到数据预处理后的海上船舰图像,对数据预处理后的海上船舰图像进行图像去雾处理,以得到图像去雾处理后的海上船舰图像,将图像去雾处理后的海上船舰图像输入预先训练好的基于改进YOLOX的海上船舰目标检测网络中,以得到最终的船舰检测结果。本发明能够解决现有两阶段目标检测算法需要大量的计算资源、检测速度慢的技术问题,以及现有单阶段目标检测算法检测目标的数量有限,如果海上图像中存在大量密集船舰目标,在提取特征时易丢失特征信息、检测精度低、易产生漏检误检的技术问题。

Patent Agency Ranking