Azure 数据工厂中的 SAP 增量数据加载
我正在尝试在 ADF 中实现提取器管道,其中包含多个复制数据活动(SAP ERP 表源)。为了节省一些处理时间,我想要一些增量(增量负载)。实现这一点的最佳方法是什么?
我目前正在尝试的只是在每个复制数据活动中使用“RFC 表选项”。然而,这似乎相当有限(只允许非常简单的查询)。此外,每个 SAP ERP 表都需要不同的查询。关于表字段格式,我发现了 3 种不同的情况:
- 时间戳以毫秒为单位(例如 COVP);
- YYYYMMDDHHMMSS 格式的时间戳(例如 FAGLFLEXA);
- 最后更改日期和最后更改时间,在单独的字段中(例如 CATSDB)
有人尝试过吗?你有什么建议?
谢谢!
I'm trying to implement an Extractor pipeline in ADF, with several Copy Data activities (SAP ERP Table sources). To save some processing time, I'd like to have some deltas (incremental load). What's the best way to implement this?
What I'm trying at the moment is just to use the "RFC table options" in each Copy Data activity. However, this seems to be quite limited (only very simple queries allowed). Also, each SAP ERP table requires a different query. I found 3 different situations, regarding table field formats:
- Timestamp in miliseconds (e.g. COVP);
- Timestamp in YYYYMMDDHHMMSS (e.g. FAGLFLEXA);
- Last change date and last change time, in separated fields (e.g. CATSDB)
Has anyone ever tried this? What would you advise?
Thanks!
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论