SSIS 中的平面文件源错误输出连接

发布于 2024-10-30 20:23:28 字数 126 浏览 0 评论 0原文

我在 SSIS 中有一个平面文件源连接。我创建了一个用于错误输出的平面文件目标连接。我已经用红色箭头连接了它。问题在于,即使平面文件源中没有错误,也会创建错误输出文件。即使没有错误,“错误平面文件目标”也始终变为绿色。怎么解决呢。提前致谢

I have a flat file source connection in SSIS. I have created one flat file destination connection for error output. I have connected it with red arrow. The problem is that the error output file is created even if there is no error in the flat file source. The "Error Flat file Destination" always turns green even if no error. How to solve it . Thanks in advance

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

岁月苍老的讽刺 2024-11-06 20:23:28

也许,您已经找到了解决方案。我希望这可以帮助那些寻找解决这个问题的人。

SSIS 中没有可用的内置数据流任务设置来执行此操作。您可以在数据流任务中使用行计数转换并结合控制流上的文件系统任务来实现此目的。

以下是有关如何执行此操作的分步过程。在此示例中,我使用了一个名为 Country_State.csv 的 csv 文件,其中包含国家/地区和州作为源文件。

场景

示例包将读取该文件,然后写入名为 Destination.txt 的文本文件。在这种情况下,将创建错误文件 Error.txt,但如果没有错误,则稍后将其删除。在这里,我将文件存储在路径 c:\temp\

分步流程:

  1. 在连接管理器部分,创建三个平面文件连接,即 Source 目的地错误。请参阅屏幕截图#1
  2. Source 连接应指向 csv 文件路径 c:\temp\Country_State.csv。有关此文件的内容,请参阅屏幕截图 #2
  3. Destination 连接应指向名为 c:\temp\Destination.txt 的文本文件。
  4. Error 连接应指向名为 c:\temp\Error.txt 的文本文件。
  5. 创建一个名为 ErrorCount 的数据类型 Int32 变量。
  6. 在“控制流”选项卡上,放置一个数据流任务,然后放置一个文件系统任务
  7. 将数据流任务连接到文件系统任务。
  8. 右键单击数据流任务和文件系统任务之间的连接器。
  9. 优先约束编辑器上,将求值操作更改为表达式并将值@ErrorCount == 0粘贴到表达式文本框。
  10. 您的控制流程应如屏幕截图#3 所示。
  11. 在数据流选项卡上的数据流任务内,拖放平面文件源并将其配置为使用 Source 连接管理器。
  12. 放置平面文件目标并将其配置为使用Destination 连接管理器。
  13. 绿色输出箭头从平面文件源连接到平面文件目标。
  14. Row Count 转换放置在数据流选项卡上,并将其配置为使用变量User:ErrorCount
  15. 将平面文件源的红色输出箭头连接到行计数转换。
  16. 放置一个平面文件目标并将其配置为使用 Error 连接管理器。
  17. 使用 Error 连接将行计数的输出连接到平面文件目标。
  18. 您的数据流任务应如屏幕截图 #4 所示。
  19. 在“控制流”选项卡上,双击“文件系统任务”。
  20. 在文件系统任务编辑器中,将操作设置为删除文件,并将SourceConnection设置为错误。请参阅屏幕截图#5
  21. 执行包之前的文件夹路径 C:\temp 的内容如屏幕截图 #6 所示。
  22. 数据流选项卡执行如屏幕截图#7所示。
  23. 控制流执行如屏幕截图#8所示。
  24. 包执行后文件夹路径 C:\temp 的内容如屏幕截图 #9 所示。
  25. 为了证明这实际上有效,我将 Source 连接管理器上的第二列更改为整数(即​​使状态名称是字符串),以便数据流任务重定向到 Error输出。
  26. 场景2数据流选项卡执行如屏幕截图#10所示。
  27. 场景2 控制流执行如屏幕截图#11 所示。请注意,文件系统任务未执行,因为错误文件不为空。
  28. 场景2包执行后文件夹路径C:\temp的内容如屏幕截图#12所示。请注意,即使没有成功的行,文件 Destination.txt 仍然存在。这是因为该示例仅删除错误文件(如果该文件为空)。

类似的逻辑可用于删除空的目标文件。

希望有帮助。

屏幕截图 #1:

1

屏幕截图 #2:

2

屏幕截图 #3:

3

屏幕截图 #4:

4

屏幕截图 #5 :

5

屏幕截图#6:

6

屏幕截图 #7:

7

屏幕截图 #8:

8

屏幕截图 #9:

< img src="https://i.sstatic.net/qhjCy.png" alt="9">

屏幕截图 #10:

10

屏幕截图 #11:

11

屏幕截图#12:

12

Probably, you have already found a solution. I hope this might help someone looking for a solution to this problem.

There is no in-built data flow task setting available in SSIS to do this. You can use Row Count transformation inside Data Flow task combined with File System Task on the Control Flow to achieve this.

Here is step-by-step process on how to do this. In this example, I have used a csv file named Country_State.csv containing countries and states as the source file.

Scenario:

The sample package will read the file and then write to a text file named Destination.txt. In this scenario, the error file Error.txt will be created but later deleted if there are no errors. Here, I have the files stored in the path c:\temp\

Step by step flow:

  1. On the connection manager section, create three flat file connections namely Source, Destination and Error. Refer screenshot #1.
  2. Source connection should point to the csv file path c:\temp\Country_State.csv. Refer screenshot #2 for the contents of this file.
  3. Destination connection should point to a text file named c:\temp\Destination.txt.
  4. Error connection should point to a text file named c:\temp\Error.txt.
  5. Create a variable of data type Int32 named ErrorCount.
  6. On the Control Flow tab, place a Data Flow Task and then place a File System Task.
  7. Connect the Data Flow Task to File System Task.
  8. Right click on the connector between Data Flow Task and File System Task.
  9. On the Precedence Constraint Editor, change the Evaluation operation to Expression and paste the value @ErrorCount == 0 in the Expression textbox.
  10. Your control flow should look like as shown in screenshot #3.
  11. Inside the data flow task on the data flow tab, drag and drop a Flat File Source and configure it to use Source connection manager.
  12. Place a Flat File Destination and configure it to use Destination connection manager.
  13. Connect the green output arrow from the Flat File Source to the Flat File Destination.
  14. Place a Row Count transformation on the data flow tab and configure it to use the Variable User:ErrorCount.
  15. Connect the red output arrow from the Flat File Source to the Row Count transformation.
  16. Place a Flat File Destination and configure it to use Error connection manager.
  17. Connect the output from Row Count to the Flat File Destination using Error connection.
  18. Your data flow task should look like as shown in screenshot #4.
  19. On the Control Flow tab, double-click on the File System Task.
  20. On the File System Task Editor, set the Operation to Delete file and set the SourceConnection to Error. Refer screenshot #5.
  21. Contents of the folder path C:\temp before package execution are shown in screenshot #6.
  22. Data flow tab execution is shown in screenshot #7.
  23. Control flow execution is shown in screenshot #8.
  24. Contents of the folder path C:\temp after package execution are shown in screenshot #9.
  25. To show this actually works, I changed the second column on the Source connection manager to integer (even though state names are strings) so that the data flow task redirects to the Error output.
  26. Scenario 2 Data flow tab execution is shown in screenshot #10.
  27. Scenario 2 Control flow execution is shown in screenshot #11. Notice that the File System Task is not executed because the error file is not empty.
  28. Contents of the folder path C:\temp after Scenario 2 package execution are shown in screenshot #12. Notice that the file Destination.txt is present even though there were no successful rows. This is because the example deletes only the Error file if it is empty.

Similar logic can be used to delete a empty Destination file.

Hope that helps.

Screenshot #1:

1

Screenshot #2:

2

Screenshot #3:

3

Screenshot #4:

4

Screenshot #5:

5

Screenshot #6:

6

Screenshot #7:

7

Screenshot #8:

8

Screenshot #9:

9

Screenshot #10:

10

Screenshot #11:

11

Screenshot #12:

12

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文