【发布时间】:2017-05-05 14:38:33
【问题描述】:
我使用 talend 进行数据提取和插入 OTSDB。但是我需要剪切我的文件,而经典的迭代需要太多时间(40 行/秒,我有 9000 万行)。
您知道如何发送例如 50 行乘 50 行而不是每行单独发送吗?
【问题讨论】:
标签: loops iteration row talend
我使用 talend 进行数据提取和插入 OTSDB。但是我需要剪切我的文件,而经典的迭代需要太多时间(40 行/秒,我有 9000 万行)。
您知道如何发送例如 50 行乘 50 行而不是每行单独发送吗?
【问题讨论】:
标签: loops iteration row talend
可以为许多 talend 组件调整书写模式。 例如,tMysqlOutput 组件可以配置为每 X 行插入一次。
tFileOutputDelimited(例如 CSV)具有刷新缓冲区大小的设置。
仔细查看组件的高级设置。
【讨论】: