基于手写公式识别的笔式计算器系统

    公开(公告)号:CN119832575A

    公开(公告)日:2025-04-15

    申请号:CN202411788677.6

    申请日:2024-12-06

    Abstract: 本发明公开一种基于手写公式识别的笔试计算器系统,包括:图像采集与输入模块:采集用户移动端的手写图像;识别模块:识别手写图像并输出为latex表达式;交互模块:检测latex表达式中是否含有等号,若有等号则触发计算功能,反之不做计算,仅触发识别功能并将识别结果发送至前端进行显示;latex处理模块:在触发计算功能后,将latex表达式转换成为Sympy表达式;Sympy计算模块:利用Sympy库中的evalf函数对Sympy表达式进行结果计算,并将结果转换为数值形式;显示模块:用于在本地界面展示数值形式的计算结果。本发明通过移动端进行高效的手写输入交互,显著提高用户的效率和体验。

    基于三维稀疏卷积与二维卷积融合的草图识别方法及装置

    公开(公告)号:CN117115459A

    公开(公告)日:2023-11-24

    申请号:CN202310857930.8

    申请日:2023-07-13

    Abstract: 本发明公开了基于三维稀疏卷积与二维卷积融合的草图识别方法及装置,通过获取草图图像,并对草图图像进行特征提取,得到草图图像特征;同时,对草图点特征提取及体素化,通过提取草图的笔画上各点的几何信息,基于几何信息对草图点体素化,得到点的体素;然后,对草图各点的体素进行特征提取,得到草图体素特征;最后,融合草图图像特征与草图体素特征,通过分类器进行草图的分类识别。本发明充分利用了草图以及草图所有的稀疏点的特征,通过Sketch‑SparseVoxelNet去除草图大片空白区域,直接提取草图所有点的空间关系,并融合卷积神经网络提取的纹理、色彩特征,实现高精度的手绘草图智能识别,更好地辅助设计师。

    一种基于掩码与匹配的零样本草图检索方法

    公开(公告)号:CN119848283A

    公开(公告)日:2025-04-18

    申请号:CN202411815334.4

    申请日:2024-12-11

    Abstract: 本发明属于零样本草图检索技术领域,公开了一种基于掩码与匹配的零样本草图检索方法,首先,设计一种视觉‑跨语言采样器,该模块利用语义标签生成掩码,屏蔽图像中与草图目标无关的语义信息,优化跨域匹配的语义对齐效果。然后,设计了净化掩码匹配模块,包括特征重构和语义交互两部分,通过迫使图像编码器重建掩盖特征来抑制冗余语义,利用变换器解码器促进草图和图像特征之间的跨域交互,从而实现更精细的语义匹配。最后,结合三元组损失、重构损失和交互损失的训练机制,使得模型能够在净化后的语义空间中显著提升检索准确率。该方法通过掩码掩盖图像中的干扰元素并实现纯净的草图‑图像匹配,从而有效解决草图与自然图像之间的语义差异问题。

    基于图结构引导的风格化手写公式生成方法

    公开(公告)号:CN119887966A

    公开(公告)日:2025-04-25

    申请号:CN202411788682.7

    申请日:2024-12-06

    Abstract: 本发明涉及计算机视觉和模式识别技术领域,尤其涉及一种基于图结构引导的风格化手写公式生成方法,包括:步骤1、基于目标符号字典,利用python脚本自动批量生成数学公式并构造对应的latex序列;步骤2、将latex序列转换为符号图;步骤3、使用基于图卷积网络的布局预测器,根据符号图位置信息,预测每个符号的粗略布局,生成边界框;步骤4、将边界框映射到像素级的软蒙版;步骤5、使用图像解码器,根据软蒙版生成手写数学表达式图像。本发明的手写公式生成方法能够快速、高效、自动化生成大批量手写公式的可靠数据,有效解决了当前依赖人工标注与绘制采集的问题,显著降低了数据成本。

    一种基于开放词汇的场景草图语义分割系统、方法及装置

    公开(公告)号:CN119919657A

    公开(公告)日:2025-05-02

    申请号:CN202411976365.8

    申请日:2024-12-31

    Abstract: 本发明属于计算机技术领域,公开了一种基于开放词汇的场景草图语义分割系统、方法及装置,该方法包括:首先,获取手绘草图图像和文本描述;通过文本解析,得到草图类别文本提示;同时,通过草图图像编码器对整体场景草图编码,捕捉全局场景信息;然后,计算草图图像编码块与类别文本的跨模态相似度,得到类别草图分割图,通过草图图像编码器对类别草图编码,捕捉局部物体信息;最后,计算全局场景和局部物体的图像‑文本交叉损失,进行训练,得到语义分割模型。本发明能够基于手绘场景草图和文本提示得到分割的物体草图,无需数据标注和训练,有效提高了场景图像语义分割的效率和分割质量。

    一种基于图结构与时序信息融合的机械手绘草图语义分割方法

    公开(公告)号:CN119810431A

    公开(公告)日:2025-04-11

    申请号:CN202411673210.7

    申请日:2024-11-21

    Abstract: 本发明涉及计算机视觉、图像处理和草图语义分割技术领域,尤其涉及一种基于图结构与时序信息融合的机械手绘草图语义分割方法,包括如下步骤:将草图模态转化为图模态与序列模态,分别输入图结构分支与序列分支,从而充分的发掘机械草图的形状结构信息与时序信息。图结构分支采用图卷积进行节点特征与边特征的特征聚合与提取,序列分支采用图增强自注意力机制模块进行特征提取,该模块将图结构分支中的特征通过边编码与笔画编码,将其作为归纳偏置项融入序列分支的自注意力机制中,通过中心性编码加入图增强自注意力模块的序列输入处,从而充分的对机械手绘草图时序特征与图结构特征进行提取与融合,提升算法对机械手绘草图语义分割的能力。

    一种基于手绘草图的复杂场景图像生成系统及方法

    公开(公告)号:CN119887972A

    公开(公告)日:2025-04-25

    申请号:CN202411866077.7

    申请日:2024-12-18

    Applicant: 浙江大学

    Abstract: 本发明属于图像处理技术领域,公开了一种基于手绘草图的复杂场景图像生成系统及方法,包括:通过获取草图图像,并对草图图像进行特征提取,得到草图特征;同时,基于大语言模型对草图进行分析,得到草图语义文本描述,对该文本进行特征提取,得到文本特征;然后,将草图特征与文本特征对齐,得到草图中包含的物体及背景布局信息;最后,基于草图布局及形状轮廓信息,通过预设的生成模型进行图像生成,得到目标复杂场景图像。本发明能够基于简单的人类手绘草图快速、智能地得到高质量的场景图像,无需复杂的提示,有效提高了场景图像生成效率和场景图像生成质量。

Patent Agency Ranking