批量插入时如何自动截断字符串?

发布于 2024-11-16 03:43:17 字数 186 浏览 3 评论 0原文

我想将许多行(从实体框架对象构造)插入到 SQL Server。问题是,某些字符串属性的长度超过了数据库中列的长度,这会导致异常,然后所有行将无法插入到数据库中。

所以我想知道是否有办法告诉 SqlBulkCopy 自动截断任何超长的行?当然,如果每个属性超过限制长度,我可以在将其插入数据表之前对其进行检查和子串,但这会减慢整个程序的速度。

I want to insert many rows (constructed from Entity Framework objects) to SQL Server. The problem is, some of string properties have length exceeded length of column in database, which causes an exception, and then all of rows will unable to insert into database.

So I wonder that if there is a way to tell SqlBulkCopy to automatically truncate any over-length rows? Of course, I can check and substring each property if it exceeds the limited length, before insert it in to a DataTable, but it would slow down the whole program.

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(3

℉絮湮 2024-11-23 03:43:17

始终使用暂存/加载表进行批量操作。

然后,您可以在刷新到真实表之前对数据进行处理、清理、擦洗等。这包括 LEFT、查找、重复数据删除等

因此:

  1. 加载具有宽列的暂存表
  2. 使用 INSERT realtable (..) SELECT LEFT(.. ),..来自分期

Always use a staging/load table for bulk actions.

Then you can process, clean, scrub etc the data before flushing to the real table. This includes, LEFTs, lookups, de-duplications etc

So:

  1. Load a staging table with wide columns
  2. Flush from staging to "real" table using INSERT realtable (..) SELECT LEFT(..), .. FROM Staging
白芷 2024-11-23 03:43:17

不幸的是,没有直接方法可以使用SqlBulkCopy来做到这一点。 SQL 批量插入本质上几乎是“愚蠢的”,但这就是它们如此快的原因。它们甚至没有被记录(除了捕获 SqlRowsCopied 事件),因此如果出现故障,则没有太多信息。您正在寻找的内容在某种程度上与此类的目的背道而驰,

但是有两种可能的方法:

  • 您可以尝试使用SqlBulkCopyOptions枚举(传递给SqlBulkCopy() 构造函数)并使用 SqlBulkCopyOptions.CheckConstraints (插入数据时检查约束。默认情况下,不检查约束。)。

  • 或者您可以使用 SqlBulkCopyOptions.FireTriggers 枚举(指定后,使服务器为要插入数据库的行触发插入触发器。)并处理SQL Server Insert Trigger 中出现异常。

Unfortunately there is no direct way of doing that with SqlBulkCopy. SQL Bulk Inserts are by nature almost "dumb" but that's why they are so fast. They aren't even logged (except capturing SqlRowsCopied event) so if something fails, there's not much information. What you're looking for would in a way, be counter to the purpose of this class

But there can be 2 possible ways:

  • You can try using SqlBulkCopyOptionsEnumeration (passed to SqlBulkCopy() Constructor) and use SqlBulkCopyOptions.CheckConstraints (Check constraints while data is being inserted. By default, constraints are not checked.).

  • Or you can use SqlBulkCopyOptions.FireTriggers Enumeration (When specified, cause the server to fire the insert triggers for the rows being inserted into the database.) and handle the exception in SQL Server Insert Trigger.

天涯沦落人 2024-11-23 03:43:17

在使用 SQLBulkCopy 类时尝试使用 SQLTransaction 类

Try Using SQLTransaction Class while using SQLBulkCopy Class

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文