SSIS 中的 UPSERT

Question

我正在编写一个在 SQL Server 2008 上运行的 SSIS 包。如何在 SSIS 中执行 UPSERT？

IF KEY NOT EXISTS
  INSERT
ELSE
  IF DATA CHANGED
    UPDATE
  ENDIF
ENDIF

Answer 1

除了基于 T-SQL 的解决方案（这甚至没有标记为 sql/tsql)，您可以将 SSIS 数据流任务与合并连接结合使用，如下所述 此处（以及 其他地方）。

关键部分是排序源的合并连接中的完全外连接（如果您只想插入/更新而不删除左外连接）。

后面跟着一个条件分割来知道接下来要做什么：插入到目标（这也是我的源），更新它（通过 SQL 命令），或者从中删除（再次通过 SQL 命令） 。

1. 插入：如果仅在源中找到 gid（左）
2. 更新 如果源和目标上都存在 gid
3. 删除：如果在源中未找到 gid，但在目标中存在（右）

Answer 2

在 sql 中创建 upsert 的另一种方法（如果您有预阶段表或阶段表）：

--Insert Portion
INSERT INTO FinalTable
( Colums )
SELECT T.TempColumns
FROM TempTable T
WHERE
(
    SELECT 'Bam'
    FROM FinalTable F
    WHERE F.Key(s) = T.Key(s)
) IS NULL

--Update Portion
UPDATE FinalTable
SET NonKeyColumn(s) = T.TempNonKeyColumn(s)
FROM TempTable T
WHERE FinalTable.Key(s) = T.Key(s)
    AND CHECKSUM(FinalTable.NonKeyColumn(s)) <> CHECKSUM(T.NonKeyColumn(s))

Answer 3

多年来一直使用的基本数据操作语言 (DML) 命令是更新、插入和删除。 它们完全符合您的预期：插入添加新记录，更新修改现有记录，删除删除记录。

UPSERT 语句修改现有记录，如果记录不存在，则插入新记录。
UPSERT 语句的功能可以通过两组新的 TSQL 运算符来实现。 这是两个新值

EXCEPT
INTERSECT

Except:-

返回 EXCEPT 操作数左侧查询中未从右侧查询返回的任何不同值

Intersect:-
返回 INTERSECT 操作数左侧和右侧的查询返回的任何不同值。

示例：- 假设我们有两个表，表 1 和表 2

Table_1 column name(Number, datatype int)
----------

1
2

3
4
5

Table_2 column name(Number, datatype int)
----------

1
2

5

SELECT * FROM TABLE_1 EXCEPT SELECT * FROM  TABLE_2 

将返回 3,4，因为它出现在 Table_1 中，而不出现在 Table_2 中，

SELECT * FROM TABLE_1 INTERSECT SELECT * FROM  TABLE_2 

将返回 1,2,5，因为它们出现在表 Table_1 和 Table_2 中。

现在，复杂连接的所有麻烦都已消除:-)

要在 SSIS 中使用此功能，您只需添加一个“执行 SQL”任务并将代码放入其中即可。

Answer 4

我通常更喜欢让 SSIS 引擎来管理增量合并。 仅插入新项目并更新更改。
如果您的目标服务器没有足够的资源来管理繁重的查询，此方法允许使用 SSIS 服务器的资源。

Answer 5

我们可以使用SSIS中缓慢变化的维度组件来进行更新插入。

使用指南。

Answer 6

我会使用“缓慢变化的维度”任务