ADF - 迭代选择输出到复制活动

Question

我们有一个SP，SP执行并返回多个结果集，其中列中的更改如下：

create proc test ab
as 
select 1 as num1
select 1 as num1, 2 as num2
select 1 as num1, 2 as num2,3 as num3

屏幕截图中的以下输出应使用ADF移动到多个表。我们如何实现这一目标？

注意：SP无法更改，这是一个示例脚本。

Answer 1

如果该过程完全如您所描述的，那么新的脚本活动支持多个结果集，可以与对于每个活动或多个脚本活动，以并行浏览它们并将其加载到数据库表中。请记住脚本活动（就像查找活动）仅限于5,000行和2MB数据，因此它并不是要用于大规模数据导入，并且了解它与复制活动的根本不同，因为它将数据拉入管道中，你必须操纵。

一个简单的示例：

第一个脚本活动只是调用返回多个结果集的存储的proc。活动的输出看起来大致是这样的：

{
    "resultSetCount": 3,
    "recordsAffected": 0,
    "resultSets": [
        {
            "rowCount": 1,
            "rows": [
                {
                    "num1": 1
                }
            ]
        },
        {
            "rowCount": 1,
            "rows": [
                {
                    "num1": 1,
                    "num2": 2
                }
            ]
        },
        {
            "rowCount": 1,
            "rows": [
                {
                    "num1": 1,
                    "num2": 2,
                    "num3": 3
                }
            ]
        }
    ],
    "outputParameters": {},
...

如您所见，您的多个结果集现在正在管道中，可以操纵。结果集为0基于0，因此第一个（仅返回NUM1）为Resulteets [0]，可以参考使用以下语法：

activity('Script0').output.resultSets[0]

因此，对于每个脚本活动，我们都有略有不同的语句：

script0-调用存储的proc：

EXEC usp_multipleResultSets;

script1-加载结果集0：

@concat('INSERT INTO dbo.multipleResultSets ( num1, dateAdded ) SELECT ', activity('Script0').output.resultSets[0].rows[0].num1, ', GETDATE();' )

script2-加载结果集1：

@concat('INSERT INTO dbo.multipleResultSets ( num1, num2, dateAdded ) SELECT ', activity('Script0').output.resultSets[1].rows[0].num1, ', ', activity('Script0').output.resultSets[1].rows[0].num2, ', GETDATE();' )

script3-加载结果集2：

@concat('INSERT INTO dbo.multipleResultSets ( num1, num2, num3, dateAdded ) SELECT ', activity('Script0').output.resultSets[2].rows[0].num1, ', ', activity('Script0').output.resultSets[2].rows[0].num2, ', ', activity('Script0').output.resultSets[2].rows[0].num3, ', GETDATE();' )

脚本类型应设置为script 0的查询 script 0，但可以是> >非Query其他人。

nb脚本任务确实允许您使用Plus（+）按钮添加多个脚本，但是它们会以序列形式运行。我在这里使用三个，因为我希望SQL的三个项目并行运行。

Answer 2

ADF现在具有SQL脚本活动，该活动允许多个结果集。