一种面向边缘设备的多模态处理系统及方法

    公开(公告)号:CN118114727A

    公开(公告)日:2024-05-31

    申请号:CN202410524057.5

    申请日:2024-04-29

    Abstract: 本申请涉及机器学习技术领域,公开了一种面向边缘设备的多模态处理系统及方法。该系统部署在移动端设备上用于处理目标任务,包括:语音任务、多模态任务、自然语言处理任务及视觉任务;系统通过数据接口接收应用程序发送的服务请求,包括:服务类型及目标数据,其中,目标数据包括以下至少一种模态的数据:语音数据、文本数据、图像数据及传感器数据;系统包括路径控制器及多个执行单元,路径控制器根据服务请求,从多个执行单元中确定目标执行单元;目标执行单元根据服务请求处理目标数据,生成结果数据。本系统能够在移动端设备上处理多模态任务,降低移动端上AI任务的处理时延,保障用户的数据隐私。

Patent Agency Ranking