覆盖主要内容

元数据同步

概述

元数据同步,他的主要任务是为不同的数据源创建同步任务,同步任务主要是采集数据源下的数据库、数据表、数据字段、等相关数据。在同步的时候,任务会选择元模型,元模型又对应着数据源类型,做一对一绑定,绑定以后元模型的,技术属性、通用数据、个性属性会同步到每张表下面。 目前元数据同步任务只接入了MySQLOracle两种,后续会接入更多数据源。

采集规则

  • 全量采集(采集数据源下的所有数据库,所有数据表,所有数据字段,所有技术属性)。
  • 采集周期(天、周、月),创建同步任务的时候,根据任务规则生成Cron表达式,周期采集数据。

同步任务列表

进入数据资产--元数据同步任务,列表展示了元数据同步信息,可根据数据源名称检索。

新增同步任务

进入数据资产--元数据同步 右上角点击新增按钮,填写表单信息、数据源类型、数据源、元模型、采集周期、采集时间等信息,点击确认添加同步任务, 第一次添加任务会默认执行一次。

手动同步

进入数据资产--元数据同步,在任务列表,选择自己要执行的任务,点击立即同步可手动触发采集任务,除了手动触发,还有JOB定时器后端触发,根据cron表达式来决定什么时候触发。

同步任务编辑

进入数据资产--元数据同步--任务列表选择要编辑的任务,点击编辑即可弹出编辑框,只有cron表达式规则可以编辑,采集周期、采集时间都属于采集规则。

删除同步任务

进入数据资产--元数据同步--任务列表,选择要删除同步任务,删除同步任务后,连带同步记录实例也会被删除掉。

同步任务实例

进入数据资产--元数据同步--任务列表,点击查看实例,进入实例列表界面,实例列表主要是记录,任务每次同步的记录

查看错误日志

进入数据资产--元数据同步--任务实例,点击查看日志,弹出错误日志信息。