大数据量文件入库有什么优化方法?

在助睿ETL里,我想跑一个大数据量的文件入库作业,有什么比较快速的方法吗?

推荐采用多组件并行处理。

对于可按字段分区的数据,使用多个“表输入”组件同时从不同分区读取数据,减少数据读取时间。

对于写入场景,采用多个输出组件(如表输出)并行写入数据库,可将写入时间缩短。