智能数据治理-数据自动化清洗功能设计方案

当前的基础清洗是由开发人员在平台通过配置输入输出表、依赖、数据源,再通过SQL脚本创建剔重程序将ODS表转换为DWD表,程序上线依据前置归集任务的调度周期及系统忙闲程度生成调度任务。是ODS-DWD-DWS程序链中的一环,平台也会依据这些配置信息生成数据血缘关系图。

  • 2023-10-09
  • 收藏0
  • 阅读173

方案详情

评价

评分 :
   *