转换能在不同引擎上跑吗?怎么切?

开会听同事说助睿ETL的转换可以换引擎执行,不一定非得用默认的那套。我在元数据里确实看到有“pipeline运行配置”,但里面“引擎类型”该怎么选、什么场景用哪个,我还拿不准。

11 个赞

对,“元数据→pipeline运行配置”就是给转换定义运行方式的,可以填名称和描述,再挑引擎类型。想做批流处理跑在 Flink 上就选对应的 Beam Flink 引擎;Flink 集群地址要提前在“Flink 集群”里配好,运行配置里才能指得到。

1 个赞