公开(公告)号：CN112732714A

公开(公告)日：2021-04-30

申请号：CN202011619878.5

申请日：2020-12-30

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 王玉华 ,  张建兴 ,  李林森 ,  金兵兵 ,  许正一

IPC: G06F16/22 ,  G06F16/2455

Abstract: 本发明公开了一种基于Hbase的时序数据存储方法、装置及设备，该方法包括：获取数据源所产生的一条时序数据；对多个数据标签、至少一个监控指标分别进行排序得到标签排序结果、指标排序结果，并与数据名称相关联得到排序关系；按照预设时间间隔划分时间戳，并记录数据产生时间所对应的时间戳；将数据名称、识别标签和所述数据产生时间所对应的时间戳组成行键，将所述多个数据标签中除识别标签以外的数据标签按照标签排序结果组成标签列簇的列，将所述至少一个监控指标按照指标排序结果组成属性列簇的列，得到多值模型存储结构；将多值模型存储结构、排序关系存储至HBase数据库中。应用本发明能够让数据标签与行键解耦，避免冗余存储。

公开(公告)号：CN112054804A

公开(公告)日：2020-12-08

申请号：CN202010954748.0

申请日：2020-09-11

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 姜鸿康 ,  李林森 ,  张建兴 ,  金兵兵

IPC: H03M7/30

Abstract: 本申请是关于一种压缩数据、解压数据的方法及装置，属于存储领域。所述方法包括：获取M个目标数据，M为大于1的整数，所述M个目标数据是属于同一个参数的参数值；获取第一差值集合，所述第一差值集合包括M‑1个第一差值，所述第一差值集合中的第一差值为第i个目标数据与第i‑1个目标数据之间的差值，i＝2、3、……、M；对所述第一差值集合进行压缩编码得到编码数据，所述编码数据包括压缩编码方式、第一个目标数据和编码信息，所述编码信息用于描述所述第一差值集合。本申请能够减小对存储空间的消耗。

公开(公告)号：CN109992396A

公开(公告)日：2019-07-09

申请号：CN201711484762.3

申请日：2017-12-29

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 张建兴 ,  李林森 ,  朱超 ,  姜鸿康

IPC: G06F9/50

Abstract: 本申请实施例提供了一种负载控制方法、装置、电子设备及分布式文件系统，方法包括：接收数据请求；根据各个接口的并发数及各个接口的负载能力，确定可用资源率；检测可用资源率是否大于资源阈值；若否，则拒绝数据请求。应用本申请实施例提供的技术方案，降低了资源计算的复杂度，提高了资源计算的可行性。

公开(公告)号：CN113722286B

公开(公告)日：2024-08-09

申请号：CN202010456576.4

申请日：2020-05-26

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 许晓通 ,  李林森 ,  张建兴

IPC: G06F16/21 ,  G06F16/22 ,  G06F16/2458

Abstract: 本申请提供了一种时空数据压缩方法、装置、服务器及存储介质，属于计算机技术领域。所述方法包括：获取待压缩的第一时空数据；从第一时空数据中获取至少一个静态属性数据，静态属性数据用于表示数据采集目标的静态属性，静态属性数据对于数据采集目标的变化活跃度小于预设阈值；获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据，第一映射数据用于对静态属性数据进行抽象表示；将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据，得到压缩后的第二时空数据。由于静态属性数据的数据量在时空数据中所占的比例较大，将静态属性数据替换为第一映射数据，能够提高时空数据的压缩比例。

公开(公告)号：CN113779428B

公开(公告)日：2024-08-02

申请号：CN202111076751.8

申请日：2021-09-14

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 张建兴 ,  李林森 ,  姜鸿康 ,  许晓通

IPC: G06F16/9537 ,  G06F16/242 ,  G06F16/2453

Abstract: 本发明实施例提供了一种数据查询方法、装置、服务器及存储介质，所述方法包括：获取数据查询请求，其中，数据查询请求包括一维查询条件以及高维查询条件，基于一维查询条件以及高维查询条件，确定查询条件集合，根据已存储的高维数据的行标签，确定满足查询条件集合的目标高维数据，作为查询结果，其中，行标签包括一维时间标签和高维空间标签，高维空间标签用于标识该行已存储的空间数据所对应的一维数据。由于高维空间标签用于标识该行已存储的空间数据所对应的一维数据，实现将高维空间数据降维为一维数据的效果，可以根据一维数据来确定满足一维查询条件以及高维查询条件的目标高维空间数据，可以大大提高高维数据的查询效率。

公开(公告)号：CN117743403A

公开(公告)日：2024-03-22

申请号：CN202311823461.4

申请日：2023-12-27

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 姜伟浩 ,  张建兴 ,  许晓通 ,  李林森 ,  吴镁

IPC: G06F16/2455 ,  G06F16/22 ,  G06F16/29

Abstract: 本申请实施例提供了一种数据查询方法、装置、电子设备及存储介质，涉及大数据处理技术领域，方法包括：接收携带有指定查询参数的查询请求；从存储器内预先存储的至少一个第一索引信息中，查找包含指定查询参数所属查询项的索引信息，作为第二索引信息；任一第一索引信息表示：对象标识与至少一类查询项的对应关系；基于第二索引信息，确定指定查询参数对应的对象标识，作为待查询对象标识；基于预先存储的待查询对象标识对应的移动数据，得到查询结果；任一对象标识对应的移动数据包括：预先采集到的该对象标识表征的对象的位置信息。如此，无需建立新的查询项与移动数据的对应关系，无需记录多份移动数据，节约存储空间。

公开(公告)号：CN115905277A

公开(公告)日：2023-04-04

申请号：CN202111164687.9

申请日：2021-09-30

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 许正一 ,  张建兴 ,  李林森

IPC: G06F16/242 ,  G06F16/2458 ,  G06F16/27

Abstract: 本发明实施例提供了一种数据查询方法、装置、服务器及存储介质，方法包括：获取数据查询请求，并根据数据查询请求所指示的时间区间，构造多个时间条件，每个时间条件对应一个时间子区间，获取符合当前时间条件的时间子区间对应的一批时序数据，对时间子区间对应的一批时序数据按照预设处理方式进行处理，得到对应的处理结果，将处理结果与当前已存储的处理结果进行合并，在此过程中，确定下一时间条件为当前时间条件，并返回获取当前时间条件的时间子区间对应的一批时序数据的步骤，直到数据为最后一批时序数据，将当前已存储的处理结果确定为查询结果。对当前一批时序数据处理的同时拉取下一时间条件对应的一批时序数据，提升了数据查询效率。

公开(公告)号：CN113779428A

公开(公告)日：2021-12-10

申请号：CN202111076751.8

申请日：2021-09-14

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 张建兴 ,  李林森 ,  姜鸿康 ,  许晓通

IPC: G06F16/9537 ,  G06F16/242 ,  G06F16/2453

Abstract: 本发明实施例提供了一种数据查询方法、装置、服务器及存储介质，所述方法包括：获取数据查询请求，其中，数据查询请求包括一维查询条件以及高维查询条件，基于一维查询条件以及高维查询条件，确定查询条件集合，根据已存储的高维数据的行标签，确定满足查询条件集合的目标高维数据，作为查询结果，其中，行标签包括一维时间标签和高维空间标签，高维空间标签用于标识该行已存储的空间数据所对应的一维数据。由于高维空间标签用于标识该行已存储的空间数据所对应的一维数据，实现将高维空间数据降维为一维数据的效果，可以根据一维数据来确定满足一维查询条件以及高维查询条件的目标高维空间数据，可以大大提高高维数据的查询效率。

公开(公告)号：CN113761013A

公开(公告)日：2021-12-07

申请号：CN202010504704.8

申请日：2020-06-05

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 王玉华 ,  许正一 ,  张建兴 ,  金兵兵 ,  李林森

IPC: G06F16/2458 ,  G06F16/22

Abstract: 本申请公开了一种时序数据预统计方法、装置及存储介质，属于大数据处理领域。在本申请中，时序数据表包括的时序数据按照元数据和数据点的格式存储，元数据用于描述相应的数据点以及相应的数据采集端，数据点包括多个采集时间以及在每个采集时间采集的一个或多个监测数据，且用时序数据描述表来存储时序数据表中的时序数据的描述信息。也即是，本申请方案中对时序数据的存储类型进行了结构优化，每条监测记录可以包括一个数据采集端在多个采集时间采集的各个监测数据，这样，遍历一个表项可以获取更多的数据，提高预统计中的检索效率，且预统计时无需进行表关联，大大提高预统计效率。

公开(公告)号：CN113722286A

公开(公告)日：2021-11-30

申请号：CN202010456576.4

申请日：2020-05-26

Applicant: 杭州海康威视数字技术股份有限公司

Inventor： 许晓通 ,  李林森 ,  张建兴

IPC: G06F16/21 ,  G06F16/22 ,  G06F16/2458

Abstract: 本申请提供了一种时空数据压缩方法、装置、服务器及存储介质，属于计算机技术领域。所述方法包括：获取待压缩的第一时空数据；从第一时空数据中获取至少一个静态属性数据，静态属性数据用于表示数据采集目标的静态属性，静态属性数据对于数据采集目标的变化活跃度小于预设阈值；获取至少一个静态属性数据中每个静态属性数据对应的第一映射数据，第一映射数据用于对静态属性数据进行抽象表示；将第一时空数据中的每个静态属性数据替换为静态属性数据对应的第一映射数据，得到压缩后的第二时空数据。由于静态属性数据的数据量在时空数据中所占的比例较大，将静态属性数据替换为第一映射数据，能够提高时空数据的压缩比例。