有没有办法让平台自动对比两个源表数据总量差异,不用手工核对?

每次做ETL前都要手工核对两个源表的数据总量,确认对上了才敢跑下一步。有没有什么办法让平台自己帮我对比两张表的数据差异,不用人工看?

3 个赞

有的,用“比较表”组件。配两个数据库连接,一个给“引用表”一个给“比较表”,设置好关键字段(比如订单ID),还可以设例外字段(比如更新时间这种差异不关心的字段)。它会把差异记录到输出结果里,包含错误数、记录数等信息,跑完后直接预览结果就能看到差异统计。