基于数字孪生与图像转换的数据增强方法及系统

    公开(公告)号:CN114049422B

    公开(公告)日:2024-10-18

    申请号:CN202111332745.4

    申请日:2021-11-11

    Inventor: 杨旭波 胡泽宇

    Abstract: 本发明提供了一种基于数字孪生与图像转换的数据增强方法及系统,包括:步骤S1:通过路测摄像头拍摄获取视频数据,将获取的视频数据通过目标识别算法识别车辆在视频中的2D坐标、车型以及颜色数据,再经过映射函数获取车辆在虚拟世界中的坐标并进行三维重建;步骤S2:根据车辆在虚拟世界中的坐标和摄像头的坐标计算获得包围盒的屏幕坐标;步骤S3:利用粒子系统与shader构建的天气系统,并对车辆的车型与颜色进行随机替换,生成虚拟图片集;步骤S4:将虚拟数据集通过GAN网络生成内容码c与风格码s,通过组合不同的风格码实现图片转换成另外一种风格。

    基于手绘地图的3D场景重建实现方法及系统

    公开(公告)号:CN116543115A

    公开(公告)日:2023-08-04

    申请号:CN202210086092.4

    申请日:2022-01-25

    Abstract: 一种基于手绘地图的3D场景重建实现方法及系统,包括:GIS位图数据生成阶段和三维场景模型重建阶段,其中:GIS位图数据生成阶段中,先将用户输入的手绘地图转化为语义图,而后采用图像翻译网络将输入的语义图转换成街区位图,再利用StrtdemGAN网络模型将街区位图转换成地形梯度场从而获得地形的高度变化数据,最后以积分梯度的方式生成地形高度图;在三维场景模型重建阶段中,根据GIS位图数据生成GIS矢量数据,并依据各GIS矢量数据重建地形上的各类附着物模型。本发明只需要约一分钟的编辑时间,在系统的绘图模块中绘制期望生成的场景的俯视图并确认,即可得到对应到现实世界中约1千平方公里面积的高精度大场景三维模型。

    物体在虚拟场景中的坐标获取方法、系统及电子设备

    公开(公告)号:CN112905831A

    公开(公告)日:2021-06-04

    申请号:CN202110363039.X

    申请日:2021-04-02

    Abstract: 本发明提供一种物体在虚拟场景中的坐标获取方法、系统及电子设备,所述物体在虚拟场景中的坐标获取方法包括:根据图像视域进行网格化分,并根据网格化分情况计算网格属性;基于网格划分的图像,对网格顶点进行采样;识别物体像素坐标,并基于用双线性插值算法计算对应的物体的三维空间坐标;将计算得到的物体三维空间坐标存入数据库。本发明对于网格规模的选择是动态的,且精度取决于网格规模的选择,可以直接进行二维像素坐标与三维空间坐标的映射,避免了可能造成的虚拟场景和真实场景中动态物体与静态物体的相对位置不一致的问题。

    自适应的不可见结构光技术实现方法

    公开(公告)号:CN101489146B

    公开(公告)日:2010-08-18

    申请号:CN200910045011.0

    申请日:2009-01-08

    Abstract: 一种计算机投影的信息嵌入技术领域的自适应的不可见结构光技术实现方法,步骤一,调整原始图像亮度空间范围;步骤二,在步骤一所生成的伪原始图像中像素级自适应嵌入不可见结构光;步骤三,用摄像头捕捉相互补偿的图像,对该图像利用C2P对应映射方法进行像素级自适应解析不可见结构光;步骤四,用中值过滤器处理解析出来的结构光图像,去除多余的噪点。本发明获得的亮度效果更接近原图案,所以让人眼更加难以察觉,同时,本发明分别克服了图像依赖和精度不足两大难题。

    在纹理平面上进行投影显示的方法

    公开(公告)号:CN101324749B

    公开(公告)日:2010-07-28

    申请号:CN200810040911.1

    申请日:2008-07-24

    Abstract: 一种计算机影像处理技术领域的在纹理平面上进行投影显示的方法,本发明中,步骤一,建立投影仪输出亮度经过投影屏幕反射后被相机抓取的辐射模型;步骤二,测量投影仪和相机的亮度响应函数及投影仪与相机之间的颜色混合矩阵;步骤三,通过投影棋盘格图片建立投影仪和相机平面之间的几何映射;步骤四,在投影仪和相机的亮度响应函数及它们之间的颜色混合矩阵已知的情况下,投影两张灰度图片标定出投影表面反射率信息及环境光信息;步骤五,根据步骤三的几何映射和步骤四标定出的投影表面反射信息及环境光信息对投影内容进行矫正后再投影输出。本发明中矫正经过GPU加速后可以达到60fps,满足实时的需要,适合在各种实际场景中使用。

    基于单应性矩阵的结构光三维检测方法

    公开(公告)号:CN101476882A

    公开(公告)日:2009-07-08

    申请号:CN200910045010.6

    申请日:2009-01-08

    Abstract: 一种计算机视觉技术领域的基于单应性矩阵的结构光三维检测方法,本发明中,利用棋盘格图案中的特征点获取相机成像面分别与平面P1和P2对应的单应性矩阵,同时在平面P1和P2上分别测定投影仪投影面和相机成像面对应的单应性矩阵,给定投影面上某条光栅的直线方程,根据单应性矩阵获得成像面和世界坐标系下的平面,并建立成像面和世界坐标系下平面之间的关系,并通过变换关系得到每条光栅在世界坐标系下的位置,从而获取三维信息。本发明可以简便的测量世界坐标,并避免了设备相关性问题,本发明在保证精度的条件下简化了三维检测的操作。

    在纹理平面上进行投影显示的方法

    公开(公告)号:CN101324749A

    公开(公告)日:2008-12-17

    申请号:CN200810040911.1

    申请日:2008-07-24

    Abstract: 一种计算机影像处理技术领域的在纹理平面上进行投影显示的方法,本发明中,步骤一,建立投影仪输出亮度经过投影屏幕反射后被相机抓取的辐射模型;步骤二,测量投影仪和相机的亮度响应函数及投影仪与相机之间的颜色混合矩阵;步骤三,通过投影棋盘格图片建立投影仪和相机平面之间的几何映射;步骤四,在投影仪和相机的亮度响应函数及它们之间的颜色混合矩阵已知的情况下,投影两张灰度图片标定出投影表面反射率信息及环境光信息;步骤五,根据步骤三的几何映射和步骤四标定出的投影表面反射信息及环境光信息对投影内容进行矫正后再投影输出。本发明中矫正经过GPU加速后可以达到60fps,满足实时的需要,适合在各种实际场景中使用。

    基于摄像头投影仪技术的交互系统

    公开(公告)号:CN101183276A

    公开(公告)日:2008-05-21

    申请号:CN200710172158.7

    申请日:2007-12-13

    Abstract: 一种计算机技术领域的基于摄像头投影仪技术的交互系统,包括:摄像头、投影仪、计算机、交互识别模块、渲染模块。所述投影仪将渲染的画面投影到设定区域上。所述摄像头捕捉固定场景,这里固定场景指的是包含投影仪投射出来画面在内的一块区域,摄像头拍摄到这块区域后,在拍摄的图像中识别出投影画面的区域,然后再由交互识别模块进一步分析。所述交互识别模块分析出当前人的位置和动作信息之后向渲染模块发送消息。所述渲染模块对交互识别模块输入的消息做出响应,完成相应的动画生成与实时绘制。本发明用计算机视觉和图形技术实现了一种更加自然的人机交互方式,在节约成本的同时,大大提高了系统的适用范围。

    脉象采集数字手套
    9.
    发明授权

    公开(公告)号:CN1317625C

    公开(公告)日:2007-05-23

    申请号:CN200410025689.X

    申请日:2004-07-01

    Abstract: 一种脉象采集数字手套,用于中医技术领域。本发明包括:手套、触觉感应器、嵌入式计算机、监测显示屏,其连接关系为:手套的食指、中指、无名指三指套上设有触觉感应器,三个触觉感应器形成触觉感应器阵列,手套的背部设有一个带监测显示屏的嵌入式计算机,嵌入式计算机与触觉感应器由信号线连接。本发明采用触觉感应器阵列来采集触觉图像和触觉视频信号,丰富了中医脉诊技术;数字手套形式的采集仪利用人的手指进行定位和施压的灵巧性,来简化寸、关、尺三部定位,和浮、中、沉施压的操作;通过监测显示屏来帮助操作人对采集过程进行有量化控制的初始化和交互;通过移动通讯技术使得采集设备便携。

    在人体动画模拟中的人体蒙皮方法、系统、介质及设备

    公开(公告)号:CN116704095A

    公开(公告)日:2023-09-05

    申请号:CN202310560350.2

    申请日:2023-05-17

    Inventor: 杨旭波 宋嘉逸

    Abstract: 本发明提供了一种在人体动画模拟中的人体蒙皮方法、系统、介质及设备,人体网格模型蒙皮方法包括:人工制作新的或获取已有的在数个姿态下的人体网格模型作为数据集,对数据集中的样本进行采样获得姿态与空间位置到模型表面的距离的场函数,将蒙皮过程分为线性混合蒙皮和微小形变两个子过程,对线性混合蒙皮的权重矩阵进行随机初始化,用线性混合蒙皮的权重矩阵进行特定姿态下空间中任意点在标准姿态下的位置的估计,用训练后的网络及给定的所需姿态蒙皮生成全新的人体网格模型。本发明能够较为快速地大批量生成已有网格模型在新姿态下的更多网格模型,有效解决在游戏和动画生产中需要人工手动调整不同姿态下人体网格模型细节的问题。

Patent Agency Ranking