用于手术机器人的三维显示装置及三维显示控制方法

    公开(公告)号:CN115236869A

    公开(公告)日:2022-10-25

    申请号:CN202210741786.7

    申请日:2022-06-28

    IPC分类号: G02B30/25

    摘要: 本发明揭示了一种用于手术机器人的三维显示装置及三维显示控制方法,所述三维显示装置包括偏振三维显示屏、反射装置以及观察目镜;所述偏振三维显示屏用以接收来自于手术机器人的三维视频图像内容,并以偏振三维的形式进行显示;所述反射装置用以将所述偏振三维显示屏的画面内容按预先设计的角度进行镜面反射;所述观察目镜分别在左右眼位置装有偏振镜片,且偏振镜片与所述偏振三维显示屏相匹配。本发明提出的用于手术机器人的三维显示装置及三维显示控制方法,可简化手术机器人的光路设计,降低系统复杂度,降低对系统部件的加工精度、装配精度、抗震性的要求。

    基于方波拟合的光栅可视区定标方法及系统

    公开(公告)号:CN112346258B

    公开(公告)日:2022-09-13

    申请号:CN202011232350.2

    申请日:2020-11-06

    IPC分类号: G02B30/30 G06T7/44 G06T7/90

    摘要: 本发明揭示了一种基于方波拟合的光栅可视区定标方法及系统,所述系统包括初始值设置模块、光栅可视区抓取模块、最优值获取模块、方波函数拟合模块、位置参数规范化模块及可视区位置获取模块。本发明提出的基于方波拟合的光栅可视区定标方法及系统,可准确计算摄像头获取的世界坐标系位置与光栅参数映射关系。本发明可以保证光栅可视区位置定标的准确性,满足裸眼3D显示器的要求。

    人眼位置回归计算方法
    43.
    发明公开

    公开(公告)号:CN112686927A

    公开(公告)日:2021-04-20

    申请号:CN202011642099.7

    申请日:2020-12-31

    IPC分类号: G06T7/246 G06K9/00 G06F3/01

    摘要: 本发明揭示了一种人眼位置回归计算方法,包括:通过训练好的检测模型获取当前帧中人眼的位置,并将得到的人眼位置保存,直到满足n+1帧的缓存要求,开始进行人眼实际位置回归;将缓存的n+1帧中的数据取出最新的n/4帧,计算帧与帧之间的平均偏移值mBias;计算缓存的n+1帧的偏移值μi,将作为最近n帧的权重ωi;通过加权最小二乘法拟合运动方程参数,并根据测好的相机曝光到传输到系统的延时,回归加上延时后的实际人眼位置;将回归得到的人眼位置作为参数计算对应的光栅参数,实现裸眼3D显示器在人眼位置投射最佳3D效果。本发明提出的人眼位置回归计算方法,可准确计算观看者实际人眼位置,并能提供最佳观看体验。

    去除3D格式视频或图像中的反射光斑的方法

    公开(公告)号:CN112634304A

    公开(公告)日:2021-04-09

    申请号:CN202011640777.6

    申请日:2020-12-31

    IPC分类号: G06T7/13 G06T7/136 G06T5/00

    摘要: 本发明揭示了一种去除3D格式视频或图像中的反射光斑的方法,包括:步骤S1、通过图像二值化处理,设置反射光斑强度阈值范围,得到左右图反射光斑mask图;采用图像形态学中的膨胀操作方法,使局部高密度的反射光斑融合成一个整体区域,增大反射光斑区域;然后通过轮廓检测,确定反射光斑的大小和数量;步骤S2、根据左右图像视差,对左右图像中出现的反射光斑进行匹配;步骤S3、基于左右图匹配的反射光斑mask图和左右图的视差,得到对应反射光斑区域一致的左右图像的反射光斑mask图;步骤S4、对图像中的反射光斑进行去除。本发明可有效去除出现在3D格式视频或图像中的反射光斑,消除左右图像反射光斑大小、强度不一致等带来3D观看的不适。

    人眼检测方法
    45.
    发明公开
    人眼检测方法 审中-实审

    公开(公告)号:CN111160292A

    公开(公告)日:2020-05-15

    申请号:CN201911416041.8

    申请日:2019-12-31

    摘要: 本发明揭示了一种人眼检测方法,包括:输入图像及其深度图像;对深度图像按照检测距离范围进行预处理,去除非检测距离范围内背景;对预处理后的深度图进行深度直方图分割,获得目标候选区域;对候选区域用头肩模板进行匹配验证,确定人脸候选区域;人脸候选框的重叠区域进行比较,将满足设定阈值的候选框合并;判断当前帧是否为第一帧,如果为第一帧,将合并后的候选框映射到原始图像的对应区域,并分割出头部区域作为模型的输入图像,在训练好的CNN模型中做人脸框回归与landmark点回归计算,得到人眼的位置;将第一帧检测的人脸位置保留,作为下一帧的先验知识。本发明可减少误检概率,保证检测的稳定性,满足裸眼3D显示器对人眼位置检测稳定性的要求。

    裸眼3D模组
    46.
    发明公开

    公开(公告)号:CN102802004A

    公开(公告)日:2012-11-28

    申请号:CN201210290992.7

    申请日:2012-08-15

    发明人: 方勇

    IPC分类号: H04N13/00 G02B27/22

    摘要: 本发明揭示了一种裸眼3D模组,所述模组包括显示面板、光栅和视点转换电路;视点转换电路与显示面板相连接,显示面板与光栅按设定方式进行配置;视点转换电路将接收的双视点输入信号转换为多视点合成信号输出至显示面板;视点转换电路包括视差补偿单元与多视点合成单元;视差补偿单元计算双视点输入信号的视差,并进行视差补偿,输出不同视点图像;多视点合成单元根据视点矩阵对不同视点图像进行合成,输出多视点合成信号至所述显示面板。本发明提出的裸眼3D模组,可直接输入双视点信号解决内容到设备的问题,兼容通用影视信号。其次,利用本发明可实现多视点裸眼3D显示,解决多人多角度同时观看的问题,并可改进3D图像质量,提高3D观看舒适度。

    基于人眼跟踪的移动端裸眼3D视区调整方法及系统

    公开(公告)号:CN118612398A

    公开(公告)日:2024-09-06

    申请号:CN202410670980.X

    申请日:2024-05-28

    IPC分类号: H04N13/302 H04N13/383

    摘要: 本发明揭示了一种基于人眼跟踪的移动端裸眼3D视区调整方法、系统、电子设备及存储介质,视区调整系统包括光栅可视区采集模块、图像处理模块、位置参数计算与存储模块、人眼检测模块、视区调整模块;光栅可视区采集模块采集摆放在最佳观看距离纯浅色板上形成的明暗相间条纹可视区图像;图像处理模块对采集到的图像进行二值化及细化等预处理操作;位置参数计算与存储模块根据亮条纹中心线及两个相邻亮条纹中心线之间的间隔,计算所有可视区位置坐标并存储;人眼检测模块使用深度学习检测模型完成人眼目标检测,获取人眼坐标,在开始前完成基准瞳距的测量;视区调整模块根据检测到的人眼位置坐标,实时地调整移动端3D显示器的视区。本发明可准确计算移动端3D显示器贴合光栅的空间视区分布,并根据人眼位置实时调整,使观看者能够获得最佳的3D视觉效果。

    基于数据拟合的裸眼3D空间视区分布推测方法、系统、电子设备及存储介质

    公开(公告)号:CN118279386A

    公开(公告)日:2024-07-02

    申请号:CN202410109922.X

    申请日:2024-01-26

    IPC分类号: G06T7/70 G06F3/01 G06F17/11

    摘要: 本发明揭示了一种基于数据拟合的裸眼3D空间视区分布推测方法、系统、电子设备及存储介质,所述裸眼3D空间视区分布推测方法包括:获取初始柱镜光栅的视区分布数据;矫正摄像装置在深度上的测量误差对视点坐标的影响;对初始光栅视区分布数据分析拟合;将矫正后归属同一条光线传播路径上的视点坐标与距离进行拟合,获得视点坐标与距离之间的关系;将最佳光栅参数与距离进行拟合,获得最佳光栅参数与距离之间的关系;根据拟合获得的视点坐标与距离之间的关系、最佳光栅参数与距离之间的关系推算观测范围之外视点数据的空间分布推算。本发明可准确推算出任意未观测位置上的空间视区分布数据。

    基于裸眼3D的混合现实直播方法及系统

    公开(公告)号:CN114554232A

    公开(公告)日:2022-05-27

    申请号:CN202111677435.6

    申请日:2021-12-31

    摘要: 本发明揭示了一种基于裸眼3D的混合现实直播方法及系统,所述方法包括:步骤S1、主播推流端对直播现场的视频流采集;步骤S2、主播推流端将采集到的视频流和主播交互命令一起发送到直播服务器;步骤S3、直播服务器对视频流进行处理;步骤S4、观众拉流端从直播服务器获取视频流及交互命令;步骤S5、观众拉流端将视频流与根据交互命令生成的内容进行合成,并以3D格式输出;步骤S6、将3D格式内容在裸眼3D显示设备上显示。本发明提出的基于裸眼3D的混合现实直播方法及系统,可让用户无需佩戴任何辅助设备就可以体验到3D效果,提高用户观看直播时的沉浸感。

    自动调节视差的裸眼3D采集和显示系统及方法

    公开(公告)号:CN112995638A

    公开(公告)日:2021-06-18

    申请号:CN202011640988.X

    申请日:2020-12-31

    摘要: 本发明揭示了一种自动调节视差的裸眼3D采集和显示系统及方法,所述系统包括实时视频流采集模块、视差自动调节模块及裸眼3D视频显示模块;实时视频流采集模块用以采集实时视频流;视差自动调节模块用以通过对左右路图像进行立体匹配,获取图像视差图,基于观看场景计算出合适的视差范围,然后对左右路图像进行渲染得到具有合适视差的3D视频帧;裸眼3D视频显示模块用以通过分光使左侧图像投射到左眼,右侧图像投射到右眼,利用人眼和大脑的立体图像合成机制,使人感受的真实的立体效果。本发明提出的自动调节视差的裸眼3D采集和显示系统及方法,可用于实时作业的领域,提高立体信息显示的实时性和准确性。