请教:datastage Transformer执行超级慢

发布于 2022-08-09 21:59:52 字数 269 浏览 13 评论 5

请教, 我刚刚接触DATASTAGE, 从一个文本文件加载数据到数据库, 全量入库, 源文件大概120字段,  源文件定长,无分隔符,目标36个字段,通过Transformer过滤转换字段, 目标库先清空了的。我执行速度超级猛,测试发现数据记录一旦超过1800,急卡住了, 在读文件就卡住了,哎呀,不知道怎么回事。
还有写入模式不能采用 LOAD,TRUNCATA的模式,所以就采用了UPINESRT,
每个字段都用了TRIM(),
有没有大侠救救呢,急
非常感激!!

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(5

国际总奸 2022-08-20 02:08:16

运行文件多了

口干舌燥 2022-08-19 18:49:12

看看运行环境

四叶草在未来唯美盛开 2022-08-19 11:45:40

通过代理键,判别insert or update.
datstage ee or se?

往昔成烟 2022-08-18 16:27:28

你这个方式加载有问题,与数据库交互太多,用Update模式本身也慢,能否把你的文本文件load到一个临时表,之后进行你规则处理
记住原则,尽可能少的与数据库交换

坐在坟头思考人生 2022-08-12 17:19:23

不熟悉DATASTAGE,帮顶

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文