公开(公告)号：CN118732918A

公开(公告)日：2024-10-01

申请号：CN202410750743.4

申请日：2024-06-12

Applicant: 上海大学

Inventor： 刘亚男 ,  杨治国

IPC: G06F3/0487 ,  H04N9/31 ,  B25J11/00

Abstract: 本公开提供一种基于投影的人形机器人及人机交互方法，其中，基于投影的人形机机器人包括多媒体输入模块，用于采集音视频信息和/或指令信息；生成式大语言模型处理模块，生成式大语言模型处理模块与多媒体输入模块连接，用于生成多媒体反馈信息，多媒体反馈信息包括音频信息、视觉信息以及肢体指令信息；多媒体输出模块，多媒体输出模块与生成式大语言模型处理模块连接，多媒体输出模块用于输出多媒体反馈信息，多媒体输出模块包括平面投影系统，平面投影系统用于将多媒体反馈信息进行可视化展示，多媒体输出模块用于输出多媒体反馈信息。通过本公开，通过投影显示信息，实现更加灵活、高效的多媒体人机交互。

公开(公告)号：CN118660222A

公开(公告)日：2024-09-17

申请号：CN202410807197.3

申请日：2024-06-21

Applicant: 上海大学

Inventor： 刘亚男 ,  杨治国

IPC: H04N23/67

Abstract: 本公开提供一种自动对焦方法、装置、系统、介质及电子设备，其中，自动对焦方法，包括：采用感存算一体化传感器装置向液态镜头发送控制指令；根据控制指令，控制液态镜头进行极限焦距转换处理；在液态镜头处于屈光度振荡过程中，采用感存算一体化传感器装置的视觉芯片采集多个图像；在采集每一图像时，对每一图像进行并行边缘提取处理，确定每一图像的图像边缘信息；对每一图像的图像边缘信息进行对比度评估处理，确定每一图像的图像对比度值；根据多个图像的图像对比度值和多个图像对应的焦距，确定最优焦点。通过本公开，提高自动对焦的效率，实现高速地、便携地、低功耗地自动对焦。

公开(公告)号：CN118153637A

公开(公告)日：2024-06-07

申请号：CN202410273540.0

申请日：2024-03-11

Applicant: 上海大学

Inventor： 刘亚男 ,  杨治国

IPC: G06N3/0464 ,  G06N3/06 ,  G06N3/08 ,  G06N5/04

Abstract: 本发明提供一种基于细胞神经网络(Cellular Neural Network,CeNN)PPA(Pixel ProcessorArray PPA)的高速并行卷积神经网络构建方法，包括：训练卷积神经网络，产生轻量化的二值化神经网络，所述二值化神经网络包括卷积层、激活函数、池化层和全连接层；将所述二值化神经网络存储到像素处理器阵列PPA的每个处理单元PE(Processing Element,PE)中，所有处理单元PE并行运行二值化神经网络的权重存储和推理过程。其实现了卷积神经网络在通用像素处理器阵列上的部署，同时为神经网络在其他边缘设备上的部署提供了新方法和思路。