基于Elasticsearch的数据同步方法及设备

    公开(公告)号:CN117149908A

    公开(公告)日:2023-12-01

    申请号:CN202311118654.X

    申请日:2023-08-31

    Abstract: 本申请涉及计算机数据处理技术领域,提供了一种基于Elasticsearch的数据同步方法及设备。用以解决相关技术中Elasticsearch数据库到关系型数据库进行数据同步需要开启相关功能组件,导致数据库负担较大且数据同步效率较低的问题。首先,接收来自客户端的数据同步请求,然后,通过数据分流转换器将数据同步请求转换为Elasticsearch数据库可识别的目标文件搜索请求,将目标文件搜索请求发送至Elasticsearch数据库并获取目标文件,最后,通过数据分流转换器将目标文件转换为目标数据库可识别的同步文件并将同步文件写入目标数据库。

    节点选举方法、装置、电子设备及存储介质

    公开(公告)号:CN114363154A

    公开(公告)日:2022-04-15

    申请号:CN202111681518.2

    申请日:2021-12-29

    Inventor: 康建伟 马怡安

    Abstract: 本公开提供了一种节点选举方法、装置、电子设备及存储介质,涉及计算机技术领域。该方法包括:当第一Leader节点宕机时,将分布式系统中的一Follower节点转换为候选者Candidate节点以接收选举消息,选举消息由剩余Follower节点发送至Candidate节点,选举消息包括剩余Follower节点的任期数和日志索引值;利用Candidate节点进行选举,将Candidate节点和剩余Follower节点中任期数最大的节点选举为第二Leader节点,当任期数最大的节点不唯一时,将任期数最大的节点中日志索引值最大的节点选举为第二Leader节点。本公开能够在不增加服务节点及计算复杂度的前提下,保证异常状况下服务切换前后的强一致性。

    APP安全检测方法、装置以及介质

    公开(公告)号:CN112446028A

    公开(公告)日:2021-03-05

    申请号:CN201910807445.3

    申请日:2019-08-29

    Abstract: 本公开提供了一种APP安全检测方法、装置以及存储介质,其中的方法包括:对与APP相对应的网络数据进行DPI检测,获得APP的DPI信息;对DPI信息进行聚类处理,获得用于表征非用户主动发起的网络数据的DPI子集数据;基于DPI子集数据判断APP的安全性。本公开的APP安全检测方法、装置以及存储介质,能够检测手机APP是否未经用户允许而私自上传数据,可以防止用户的个人信息的泄露而造成的物质、精神上的损失,提高终端中个人信息的安全性,提升了用户体验。

    数据预处理方法、装置和计算机可读存储介质

    公开(公告)号:CN110019012A

    公开(公告)日:2019-07-16

    申请号:CN201711245143.9

    申请日:2017-12-01

    Abstract: 本公开提出一种数据预处理方法、装置和计算机可读存储介质,涉及大数据技术领域。本公开的一种数据预处理方法包括:获取HTTP数据;获取超文本传输协议HTTP数据中的用户代理UserAgent字段信息;获取与UserAgent字段信息相关联的标识,标识的长度小于UserAgent字段信息的长度;用标识替换UserAgent字段信息以减少HTTP数据的空间占用量。通过这样的方法,能够将UserAgent字段替换为长度更短的标识,从而压缩了存储UserAgent字段信息需要的存储空间,降低了大数据存储的负担和数据存储成本。

    跳变通道控制方法以及服务器、数据传输节点和系统

    公开(公告)号:CN109327293B

    公开(公告)日:2022-03-04

    申请号:CN201710646180.4

    申请日:2017-08-01

    Abstract: 本申请提出一种跳变通道控制方法以及服务器、数据传输节点和系统,涉及互联网技术领域。本发明的一种跳变通道控制方法包括:服务器获取来自数据传输节点的当前网络状况信息;根据当前网络状态信息确定传输跳变通道的数量;将数量发送给数据传输节点以调节数据传输节点的传输跳变通道的数量。通过这样的方法,能够根据当前数据传输网络的状况实时调整跳变通道的数量,使得跳变通道的数量既能够满足传输跳变的需求,又能够尽量减少通道闲置和导致数据碎片化,使得跳变通道的数量满足当前网络状态的需求。

    欺诈网页识别方法、系统、设备及存储介质

    公开(公告)号:CN113779956A

    公开(公告)日:2021-12-10

    申请号:CN202111122312.6

    申请日:2021-09-24

    Inventor: 施丽佳 马怡安

    Abstract: 本发明提供了一种欺诈网页识别方法、系统、设备及存储介质,所述方法包括步骤:分别获取待测网页中的第一文本数据和预设对比库中每一参考网页的第二文本数据;所述预设对比库中具有至少一参考网页;分别获取第一文本数据与每一第二文本数据之间的第一相似度,以及所述第二文本数据对应的参考网页的自相关度;基于所述第一相似度和所述自相关度,分别获取所述待测网页与每一所述参考网页之间的相似率;基于所述相似率,对所述待测网页进行识别;本申请实现对于欺诈网页的检测在保证准确度的同时,具有较好的计算效率。

    流表下发方法、装置、系统及计算机可读存储介质

    公开(公告)号:CN111327486B

    公开(公告)日:2021-10-15

    申请号:CN201811538630.9

    申请日:2018-12-17

    Abstract: 本公开提供了一种流表下发方法、装置、系统及计算机可读存储介质,涉及SDN技术领域,所述方法包括:采集SDN网关的深度包检测DPI数据,所述DPI数据包括用户标识和所述用户曾经访问的目的IP地址;根据所述用户标识和所述用户曾经访问的目的IP地址,确定SDN网关与多个目的IP地址中的每一个对应的下一跳IP地址;在SDN网关开机之前,将包含每个下一跳IP地址的流表下发到SDN控制器,以便SDN控制器在SDN网关开机之后将所述流表下发到SDN网关。

    判别车辆上下匝道的方法和装置

    公开(公告)号:CN106643757B

    公开(公告)日:2019-06-25

    申请号:CN201510726840.0

    申请日:2015-10-30

    Abstract: 本发明公开一种判别车辆上下匝道的方法和装置。其中移动终端在车辆行进路径上,以预定频率检测车辆与最近匝道入口之间的距离,若距离小于预定门限,则启动加速度传感器、角速度传感器和方向传感器以进行监听,加速度传感器以预定的采样周期生成加速度值,角速度传感器以预定的采样周期生成角速度值,方向传感器以预定的采样周期生成坡度值,当车辆通过与所述最近匝道入口相关联的匝道出口时,关闭各传感器以停止监听,将记录的加速度值、角速度值和坡度值与预先存储的交通模型进行匹配,并根据匹配结果确定车辆是否上下匝道。通过利用车辆的加速度、角度偏转等特征直接、明确地判断车辆是否上下高架路,从而为动态导航提供准确信息。

    数据传输方法、系统及设备

    公开(公告)号:CN109921875A

    公开(公告)日:2019-06-21

    申请号:CN201711325970.9

    申请日:2017-12-13

    Abstract: 本发明公开了一种数据传输方法、系统及设备,涉及数据处理技术领域。其中的数据传输方法包括:发送端建立用户代理字段与长度小于第一阈值的字符串之间的映射关系;发送端将映射关系发送至接收端;发送端根据映射关系,将消息中的用户代理字段用相应的字符串代替;发送端将消息发送至接收端,以便接收端根据相应的字符串以及映射关系,确定用户代理字段。本发明能够提高数据传输效率,减少数据传输过程中消耗的带宽。

    APP安全检测方法、装置以及介质

    公开(公告)号:CN112446028B

    公开(公告)日:2024-12-06

    申请号:CN201910807445.3

    申请日:2019-08-29

    Abstract: 本公开提供了一种APP安全检测方法、装置以及存储介质,其中的方法包括:对与APP相对应的网络数据进行DPI检测,获得APP的DPI信息;对DPI信息进行聚类处理,获得用于表征非用户主动发起的网络数据的DPI子集数据;基于DPI子集数据判断APP的安全性。本公开的APP安全检测方法、装置以及存储介质,能够检测手机APP是否未经用户允许而私自上传数据,可以防止用户的个人信息的泄露而造成的物质、精神上的损失,提高终端中个人信息的安全性,提升了用户体验。

Patent Agency Ranking