数据同步方法、装置、电子设备及计算机存储介质

    公开(公告)号:CN119597842A

    公开(公告)日:2025-03-11

    申请号:CN202411658040.5

    申请日:2024-11-19

    Inventor: 蒋科 刘波涛

    Abstract: 本申请提供一种数据同步方法、装置、电子设备及计算机存储介质,通过接收数据同步任务的基础配置信息后,分别对第一数据源和第二数据源进行异常检测,若第一数据源的异常检测结果和第二数据源的异常检测结果均为正常,则针对第一数据源中每一个待同步数据表,对待同步数据表中的数据的数据类型进行转换,得到目标待同步数据表;其中,目标待同步数据表中的数据的数据类型与第二数据源中的目标数据表中的数据的数据类型一致;针对每一个目标待同步数据表,生成目标安全传输规则;利用目标安全传输规则将目标待同步数据表中的数据同步至第二数据源中的目标数据表。从而达到适应不断变化的数据源和数据格式的目的,有效提高数据同步后的数据质量。

    消息的推送方法及装置
    2.
    发明授权

    公开(公告)号:CN112822286B

    公开(公告)日:2023-04-07

    申请号:CN202110112950.3

    申请日:2021-01-27

    Abstract: 本申请提供了消息的推送方法及装置,其中,方法包括:接收消息推送请求;消息推送请求包括:模板参数与目标终端;模板参数至少包括:模板标识;从预设的模板集合中,获取模板标识指示的模板为目标模板;目标模板包括:待推送消息的预设文案与参数列表;参数列表是否包含参数名称表征预设文案中是否存在与参数名称对应的待填充内容;在模板参数与参数列表的参数名称的存在情况一致的情况下,至少依据预设文案,生成待推送消息;向目标终端推送待推送消息。依据目标模板自动生成待推送消息,并且,是依据目标模板中的预设文案生成待推送消息,从而,提高待推送消息的准确性,无需人工审核,从而提高消息的推送效率和实时性。

    消息的推送方法及装置
    3.
    发明公开

    公开(公告)号:CN112822286A

    公开(公告)日:2021-05-18

    申请号:CN202110112950.3

    申请日:2021-01-27

    Abstract: 本申请提供了消息的推送方法及装置,其中,方法包括:接收消息推送请求;消息推送请求包括:模板参数与目标终端;模板参数至少包括:模板标识;从预设的模板集合中,获取模板标识指示的模板为目标模板;目标模板包括:待推送消息的预设文案与参数列表;参数列表是否包含参数名称表征预设文案中是否存在与参数名称对应的待填充内容;在模板参数与参数列表的参数名称的存在情况一致的情况下,至少依据预设文案,生成待推送消息;向目标终端推送待推送消息。依据目标模板自动生成待推送消息,并且,是依据目标模板中的预设文案生成待推送消息,从而,提高待推送消息的准确性,无需人工审核,从而提高消息的推送效率和实时性。

    数据查询方法及装置、存储介质及电子设备

    公开(公告)号:CN112527872A

    公开(公告)日:2021-03-19

    申请号:CN202011504857.9

    申请日:2020-12-18

    Abstract: 本发明提供一种数据查询方法及装置、存储介质及电子设备,当接收到用户通过前端发送的数据查询请求时,可确定该数据查询请求对应的目标查询任务、目标任务ID以及目标工作节点,并将目标任务ID发送给前端,以触发前端按预设的查询周期对目标查询任务的执行进度进行查询。在接收到前端当前查询周期发送的进度查询请求时,获取当前目标查询任务的目标执行进度,并将该目标执行进度发送给前端,触发前端向用户显示该目标执行进度,并进入下一个查询周期,直到前端获得目标查询任务的查询结果,结束整个数据查询过程。应用本发明的方法,用户在查询过程中,可通过前端获悉查询任务的执行进度,有利于用户利用等待时间安排工作,提升了使用体验。

    数据处理方法及装置
    5.
    发明公开

    公开(公告)号:CN115827633A

    公开(公告)日:2023-03-21

    申请号:CN202211594018.X

    申请日:2022-12-13

    Abstract: 本发明提供一种数据处理方法及装置,该方法包括:确定待连接的离线数据仓和实时数据仓;判断离线数据仓与实时数据仓是否满足连接条件;当满足连接条件时,应用Presto连接离线数据仓及实时数据仓,获得Hive数据仓;在Presto中建立Hive的统一查询视图,外部程序通过Presto所提供的API来处理数据查询请求,并向客户端返回目标数据。应用本发明提供的方法,通过presto将离线数据仓和实时数据仓连接组成一个整体的Hive数据仓,可以快速查找到用户需要查询的数据。

    一种埋点数据处理方法、系统及电子设备

    公开(公告)号:CN115203022A

    公开(公告)日:2022-10-18

    申请号:CN202210716706.2

    申请日:2022-06-23

    Abstract: 本申请公开了一种埋点数据处理方法、系统及电子设备,通过直接在数据输入接口获得用户输入的不同的埋点设置信息,以便于确定埋点规则,并在运行待监测程序后,能够基于确定的埋点规则进行埋点数据的上报,实现了直接在数据输入接口输入相关的埋点规则数据从而实现对埋点规则的设置,而无需在代码层进行代码的设置,简化了用户操作,提高了用户操作效率,非专业技术人员也能够对埋点规则进行设置,提高了用户体验。

Patent Agency Ranking