-
公开(公告)号:CN106936439A
公开(公告)日:2017-07-07
申请号:CN201610831693.8
申请日:2016-09-20
Applicant: 南开大学 , 北京奇虎科技有限公司
IPC: H03M7/30
Abstract: 一种通用的基于分块排序思想的压缩预处理方法及应用。其步骤为:1.按照预设尺寸将信源分块,按信源顺序对块编号;2.将每一个信源块视作一个字符串,依照字典序对其排序,记录排序后的块编号;3.对块的编号,首先进行二进制化处理(以整数形式存储而不是字符串形式),之后使用Lz77系列算法压缩;对排序后的块集合,直接使用Lz77系列算法压缩;4.将压缩结果以二进制形式输出至文件。本发明能够通过合理的分块原则和排序手段,有效地将相同或相似数据聚类,进而更好地发挥Lz77系列通用压缩算法的去重效果,提高压缩率。同时减小了Lz77算法在滑动窗口中的寻址距离,有效地降低了压缩和解压缩的时间,提供更加快捷而高效的压缩服务。
-
公开(公告)号:CN107302546B
公开(公告)日:2021-05-21
申请号:CN201710703773.X
申请日:2017-08-16
Applicant: 北京奇虎科技有限公司
IPC: H04L29/06
Abstract: 本发明公开了一种大数据平台安全访问系统、方法、电子设备及计算机存储介质。其中系统,包括:权限认证模块,适于管理用户角色对数据资源的权限信息;数据加解密模块,适于对写入的数据进行加密;以及对读取的数据进行解密;审计模块,适于实时收集数据操作日志,并将数据操作日志与告警规则进行匹配,若数据操作日志与告警规则匹配,则对数据操作日志对应的数据操作进行实时报警;网关模块,适于利用预设规则对流入/流出网关的数据进行规则检测,对符合预设规则的数据访问进行报警或阻断,从而提升了数据的安全性,以及提高了访问大数据平台的安全性。
-
公开(公告)号:CN108241647B
公开(公告)日:2022-03-11
申请号:CN201611209032.8
申请日:2016-12-23
Applicant: 北京奇虎科技有限公司
IPC: G06F16/2455 , G06F16/22
Abstract: 本发明提供了数据处理及查询的方法和装置,该方法包括:将接收到的有效数据存储至相应时间窗口下的缓存区域中;针对任一缓存区域,创建所述缓存区域中的已存储的有效数据的数据集,并将该数据集发送至预置数据库;基于接收到的数据查询请求,从所述预置数据库和/或对应的缓存区域中的数据集中获取与所述查询请求相匹配的查询结果。本发明的技术方案使得用户能够实时获取到有效数据的查询结果,节省用户等待获取查询结果的时间,提升用户获取查询结果的体验度。
-
公开(公告)号:CN108241647A
公开(公告)日:2018-07-03
申请号:CN201611209032.8
申请日:2016-12-23
Applicant: 北京奇虎科技有限公司
IPC: G06F17/30
Abstract: 本发明提供了数据处理及查询的方法和装置,该方法包括:将接收到的有效数据存储至相应时间窗口下的缓存区域中;针对任一缓存区域,创建所述缓存区域中的已存储的有效数据的数据集,并将该数据集发送至预置数据库;基于接收到的数据查询请求,从所述预置数据库和/或对应的缓存区域中的数据集中获取与所述查询请求相匹配的查询结果。本发明的技术方案使得用户能够实时获取到有效数据的查询结果,节省用户等待获取查询结果的时间,提升用户获取查询结果的体验度。
-
公开(公告)号:CN107302546A
公开(公告)日:2017-10-27
申请号:CN201710703773.X
申请日:2017-08-16
Applicant: 北京奇虎科技有限公司
IPC: H04L29/06
CPC classification number: H04L63/101 , H04L63/1425
Abstract: 本发明公开了一种大数据平台安全访问系统、方法、电子设备及计算机存储介质。其中系统,包括:权限认证模块,适于管理用户角色对数据资源的权限信息;数据加解密模块,适于对写入的数据进行加密;以及对读取的数据进行解密;审计模块,适于实时收集数据操作日志,并将数据操作日志与告警规则进行匹配,若数据操作日志与告警规则匹配,则对数据操作日志对应的数据操作进行实时报警;网关模块,适于利用预设规则对流入/流出网关的数据进行规则检测,对符合预设规则的数据访问进行报警或阻断,从而提升了数据的安全性,以及提高了访问大数据平台的安全性。
-
-
-
-