一种基于大数据业务的任务调度方法及系统

    公开(公告)号:CN112667375A

    公开(公告)日:2021-04-16

    申请号:CN202011523358.4

    申请日:2020-12-22

    Abstract: 一种基于大数据业务的任务调度方法及系统,包括:基于用户构建的DAG依赖图生成DAG文件,并将DAG文件上传至调度服务装置,将相关依赖文件同步至执行装置:调度服务装置从自身的进程池中选取1个调度进程,并将DAG文件分配给选取的调度进程;调度进程解析DAG文件,创建流程批次实例和流程中所有组件分别对应的任务实例,然后构建1个任务状态表,最后从DAG文件中提取需要执行的任务实例,并推送到任务消息队列中;执行装置按序执行任务消息队列中的任务实例,并根据执行结果更新任务实例在任务状态表中的状态。本发明属于信息技术领域,能在大数据业务的多任务调度中,既支持组件的即插即用,又满足多任务之间的复杂依赖需求。

    一种基于中间件提供数据服务的方法和系统

    公开(公告)号:CN103390041A

    公开(公告)日:2013-11-13

    申请号:CN201310301307.0

    申请日:2013-07-18

    Abstract: 一种基于中间件提供数据服务的方法和系统,包括:步骤一、数据服务中间件装置接收数据访问请求,查询业务和数据库映射表中业务系统相对应的主、从库所在服务器,并判断访问方式是否是数据写操作,如果是,则转向步骤二;步骤二、将数据访问请求发送给主库所在服务器,当主库所在服务器完成对主库的数据更新后,再将数据访问请求存入内存库中,同时,还包括:数据服务中间件装置定时扫描内存库,当监测到内存库中存在数据访问请求时,从内存库中提取数据访问请求,并将所述数据访问请求发送给从库所在服务器,由从库所在服务器完成对从库的数据更新。本发明属于网络通信技术领域,能向业务层屏蔽具体的数据库运行方式、并提供统一的数据服务。

    一种提取短视频主题的方法

    公开(公告)号:CN109670453B

    公开(公告)日:2023-04-07

    申请号:CN201811567121.9

    申请日:2018-12-20

    Abstract: 一种提取短视频主题的方法,包括:将短视频切分成M张视频截帧图片;采用迁移学习方式,使用卷积神经网络获取视频截帧图片的视频空间特征向量集合;按播放时序,将视频空间特征向量构成特征向量时间序列,并输入双向循环神经网络,从而输出视频空间‑时间特征序列集合H;采用注意力机制,对H中的每个视频空间‑时间特征序列进行调整,从而获得新的视频空间‑时间特征序列集合Q;将Q再展开成一个视频空间‑时间特征向量Z,对Z进行线性变换,然后采用归一化指数函数分别计算短视频归属各个主题的概率,以据此提取短视频的主题。本发明属于信息技术领域,能自动从短视频中提取主题信息,并且有效降低计算量。

    一种基于机器学习算法的未报备手机号识别方法

    公开(公告)号:CN113766056A

    公开(公告)日:2021-12-07

    申请号:CN202110987426.0

    申请日:2021-08-26

    Abstract: 一种基于机器学习算法的未报备手机号识别方法,包括:获取当前时间段内基站中所有手机号码,挑选用户已报备过的号码构成已报备号码群、非用户已报备过的号码构成待识别号码群;为每个手机号码构建交往圈号码群:获取手机号码的所有通信号码,然后计算手机号码和每个通信号码的通话特征参数,再采用K‑Means算法将所有通信号码划分成多个簇,最后计算手机号码和每个簇的亲密度指数,挑选多个簇合并生成交往圈号码群;计算待识别号码和每个已报备号码的交往圈重合度,从中挑选最大值,并判断最大值是否大于重合度阈值,如果是,则待识别号码是最大值对应的已报备号码的未报备手机号。本发明属于信息技术领域,能快速有效地识别未报备手机号。

    一种基于票据模板的图片重构方法

    公开(公告)号:CN112529989A

    公开(公告)日:2021-03-19

    申请号:CN202011512526.X

    申请日:2020-12-19

    Abstract: 一种基于票据模板的图片重构方法,包括:构建并训练一个票据文本嵌入网络,输入是票据重构参数,输出是重构票据图片,流程如下:从字典中获取票据模板上每个文本区域的填充文本,为每个文本区域生成一个以二进制表示、且尺寸一致的文本掩码图片,图片上有填充文本,且文本像素值为1、背景像素值为0,同时从票据模板中裁剪出每个文本区域的文本背景图片,将文本掩码图片和文本背景图片合成文本重构图片,最后将所有文本重构图片贴回票据模板,即重构票据图片;用户设定票据重构参数和重构数量,将票据重构参数输入训练后的票据文本嵌入网络,获得输出的重构票据图片。本发明属于信息技术领域,能基于票据模板重构大量贴合真实票据的票据图片。

    一种基于深度学习的证件照的自动审核方法

    公开(公告)号:CN110874577A

    公开(公告)日:2020-03-10

    申请号:CN201911117272.9

    申请日:2019-11-15

    Abstract: 一种基于深度学习的证件照的自动审核方法,包括:采用人脸检测算法,从证件照中检测出人脸,并得到人脸坐标列表,人脸坐标列表中包含有人脸矩形框的两组坐标和左右眼睛、鼻子、嘴角左右两侧共五组坐标;判断人脸坐标列表是否为空,如果是,则表示证件照未包含有人脸,审核结果是:证件照不合格,原因:未能检测人脸,继续下一步;如果否,则根据人脸坐标列表中人脸矩形框的两组坐标,从证件照中提取人脸图像,然后审核证件照中的人脸图像是否模糊、人像是否免冠或人像占比是否合格,再继续下一步;汇总、并输出审核结果。本发明属于信息技术领域,能利用人脸检测技术来实现对用户证件照的自动审查,从而提高证件照的审核效率、降低人力物力成本。

    一种提取短视频主题的方法

    公开(公告)号:CN109670453A

    公开(公告)日:2019-04-23

    申请号:CN201811567121.9

    申请日:2018-12-20

    Abstract: 一种提取短视频主题的方法,包括:将短视频切分成M张视频截帧图片;采用迁移学习方式,使用卷积神经网络获取视频截帧图片的视频空间特征向量集合;按播放时序,将视频空间特征向量构成特征向量时间序列,并输入双向循环神经网络,从而输出视频空间-时间特征序列集合H;采用注意力机制,对H中的每个视频空间-时间特征序列进行调整,从而获得新的视频空间-时间特征序列集合Q;将Q再展开成一个视频空间-时间特征向量Z,对Z进行线性变换,然后采用归一化指数函数分别计算短视频归属各个主题的概率,以据此提取短视频的主题。本发明属于信息技术领域,能自动从短视频中提取主题信息,并且有效降低计算量。

    一种基于自然语言处理技术的营销活动投诉风险预测方法

    公开(公告)号:CN109658148A

    公开(公告)日:2019-04-19

    申请号:CN201811534891.3

    申请日:2018-12-14

    Abstract: 一种基于自然语言处理技术的营销活动投诉风险预测方法,包括:提取历史时间内所有投诉文本和营销活动文本,计算投诉文本和营销活动文本的相似度,以识别营销活动所对应的投诉文本,计算每项营销活动的万投比;选取多个万投比大于万投比高阈值的营销活动为正样本,多个万投比低于万投比低阈值的营销活动为负样本,训练基于卷积神经网络的营销文本分类模型;将待预测营销活动的文本指标输入训练后的营销文本分类模型,并根据模型输出的营销活动属于高投诉风险类别的概率来判断待预测的营销活动是否具有高投诉风险,如果是,则发布预警通知消息。本发明属于信息技术领域,能构建投诉信息与营销活动的对应关系,并实现对营销活动风险的准确预测。

    一种无密码安全登录的远程维护系统和实现方法

    公开(公告)号:CN103475491B

    公开(公告)日:2017-01-04

    申请号:CN201310468078.1

    申请日:2013-10-10

    Abstract: 一种无密码安全登录的远程维护系统和实现方法,实现方法包括有:步骤一、中心控制服务器对用户进行身份验证,并当用户的身份验证通过后,向用户指定的业务服务器发送开启服务通知消息;步骤二、所述业务服务器的远程接入接口装置将中心控制服务器发送来的开启服务通知消息转发给无密码登录服务装置,无密码登陆服务装置开启TCP服务,并将开启TCP服务信息返回给远程接入接口装置;步骤三、远程接入接口装置根据无密码登录服务装置返回的开启TCP服务信息,和无密码登录服务装置建立TCP连接链路。本发明属于网络通信技术领域,能在远程维护中实现用户的无密码安全登录。

    一种基于中间件提供数据服务的方法和系统

    公开(公告)号:CN103390041B

    公开(公告)日:2016-05-04

    申请号:CN201310301307.0

    申请日:2013-07-18

    Abstract: 一种基于中间件提供数据服务的方法和系统,包括:步骤一、数据服务中间件装置接收数据访问请求,查询业务和数据库映射表中业务系统相对应的主、从库所在服务器,并判断访问方式是否是数据写操作,如果是,则转向步骤二;步骤二、将数据访问请求发送给主库所在服务器,当主库所在服务器完成对主库的数据更新后,再将数据访问请求存入内存库中,同时,还包括:数据服务中间件装置定时扫描内存库,当监测到内存库中存在数据访问请求时,从内存库中提取数据访问请求,并将所述数据访问请求发送给从库所在服务器,由从库所在服务器完成对从库的数据更新。本发明属于网络通信技术领域,能向业务层屏蔽具体的数据库运行方式、并提供统一的数据服务。

Patent Agency Ranking