多数据流的数据拼接方法、装置、电子设备和存储介质

    公开(公告)号:CN113127511A

    公开(公告)日:2021-07-16

    申请号:CN202010043160.X

    申请日:2020-01-15

    Inventor: 程怡 石然 朱小力

    Abstract: 本申请公开了一种多数据流的数据拼接方法、装置、电子设备和存储介质,涉及大数据处理技术领域。具体实现方案为:当多数据流中第一数据流的第一数据到达时,确定第一数据流是否是指定的拼接触发数据流;其中,多数据流中的部分数据流被预先指定为拼接触发数据流;在确定第一数据流是指定的拼接触发数据流时,从缓存的第二数据流的数据中查找与第一数据匹配的第二数据,以将第一数据与第二数据进行拼接。由此通过预先指定部分数据流为拼接触发数据流,只有拼接触发数据流的某一数据到来时,才会从第二数据流中查询与之匹配的数据,以完成数据拼接,由此能够有效减少数据查询次数,进而降低资源开销,同时也降低了实现数据拼接的复杂度。

    多数据流的数据拼接方法、装置、电子设备和存储介质

    公开(公告)号:CN113127511B

    公开(公告)日:2023-09-15

    申请号:CN202010043160.X

    申请日:2020-01-15

    Inventor: 程怡 石然 朱小力

    Abstract: 本申请公开了一种多数据流的数据拼接方法、装置、电子设备和存储介质,涉及大数据处理技术领域。具体实现方案为:当多数据流中第一数据流的第一数据到达时,确定第一数据流是否是指定的拼接触发数据流;其中,多数据流中的部分数据流被预先指定为拼接触发数据流;在确定第一数据流是指定的拼接触发数据流时,从缓存的第二数据流的数据中查找与第一数据匹配的第二数据,以将第一数据与第二数据进行拼接。由此通过预先指定部分数据流为拼接触发数据流,只有拼接触发数据流的某一数据到来时,才会从第二数据流中查询与之匹配的数据,以完成数据拼接,由此能够有效减少数据查询次数,进而降低资源开销,同时也降低了实现数据拼接的复杂度。

Patent Agency Ranking