金融界2024年12月18日消息,国家知识产权局信息显示,中国—东盟信息港股份有限公司申请一项名为“一种基于DolphinScheduler的实时数据集成方法”的专利,公开号CN 119127893 A,申请日期为2024年8月。

专利摘要显示,本发明公开了一种基于DolphinScheduler的实时数据集成方法,涉及数据处理领域,解决了Flink CDC上手难度高和Apache DolphinScheduler数据处理方式处理延迟高和实时性不足的技术问题。该方法为,步骤一:设置实时集成任务界面,对所述实时集成任务界面中的参数进行校验并根据所述实时集成任务界面的参数创建实时数据集成任务;步骤二:启动所述实时数据集成任务;步骤三:通过所述实时集成任务界面对实时数据集成任务进行停止,当再次启动所述实时数据集成任务时,将所述实时数据集成任务中的数据更新进数据库中。本发明实现将数据变化即时更新到数据库,减少数据延迟,提高数据处理的效率。

本文源自:金融界

作者:情报员