SQLBulkCopy“插入或更新（如果存在）”的任何方法？

Question

我需要定期更新一个非常大的表，而 SQLBulkCopy 非常适合这一点，只是我有一个 2 列索引来防止重复。有没有办法使用 SQLBulkCopy 作为“插入或更新（如果存在）”？

如果没有，最有效的方法是什么？再次，我谈论的是一个包含数百万条记录的表。

谢谢

Answer 1

我发布了一个nuget包（SqlBulkTools）来解决这个问题。

下面是一个可以实现批量更新插入的代码示例。

var bulk = new BulkOperations();
var books = GetBooks();

using (TransactionScope trans = new TransactionScope())
{
    using (SqlConnection conn = new SqlConnection(ConfigurationManager
    .ConnectionStrings["SqlBulkToolsTest"].ConnectionString))
    {
        bulk.Setup<Book>()
            .ForCollection(books)
            .WithTable("Books")
            .AddAllColumns()
            .BulkInsertOrUpdate()
            .MatchTargetOn(x => x.ISBN)
            .Commit(conn);
    }

    trans.Complete();
}

对于非常大的表，可以选择添加表锁并暂时禁用非聚集索引。有关更多示例，请参阅 SqlBulkTools 文档。

Answer 2

我会将数据批量加载到临时暂存表中，然后将更新插入到最终表中。请参阅此处 进行更新插入的示例。

Answer 3

不是一步完成，而是在 SQL Server 2008 中，您可以：

• 批量加载到临时表中
• 应用 MERGE 语句来更新/插入到您的真实表中

阅读有关 < a href="http://technet.microsoft.com/en-us/library/bb510625.aspx" rel="noreferrer">MERGE 语句

Answer 4

而不是创建一个新的临时表，顺便说一句，这会消耗更多的空间和内存。

我使用 INSTEAD OF INSERT 创建了一个触发器，并在 MERGE 语句中使用。

但不要忘记在 SqlBulkCopy 中添加参数 SqlBulkCopyOptions.FireTriggers。

这是我的两分钱。

Answer 5

从@Ivan 得到了提示。对于那些可能需要的人，这就是我所做的。

create trigger yourschma.Tr_your_triger_name
    on yourschma.yourtable
    instead of INSERT
    as
    merge into yourschma.yourtable as target
    using inserted as source
    on (target.yourtableID = source.yourtableID)
    when matched then
        update
        set target.ID     = source.ID,
            target.some_column = source.some_column,
            target.Amount                       = source.Amount
    when not matched by target then
        insert (some_column, Amount)
        values (source.some_column, source.Amount);
go

Answer 6

另一种选择是不使用临时表，而是使用带有表值参数的存储过程。将数据表传递给 sp 并在那里进行合并。