从 Postgres 迁移到 SQL Server 2008

Question

我需要将数据库从 Postgres 7 迁移到 SQL Server 2008。我熟悉 SSIS 导入和导出向导，但我对如何定义数据源或定义数据提供程序感到困惑。

将 Postgres 迁移到 SQL Server 的最佳方法是什么？如何为 Postgres 定义数据源/驱动程序？

Answer 1

我在使用 SQL Server 2008 R2 中的导入向导从 PostgreSQL 导入表时遇到问题。我安装了 PostgreSQL ODBC 驱动程序，因此对于导入向导中的数据源，我选择了“.Net Framework Data Provider for Odbc”并为我的 PostgreSQL 数据库提供了 DSN 名称。向导发现表没问题，但是当我执行导入时出现错误

无法检索源数据和目标数据的列信息。

“计费”-> [dbo].[计费]：

– 找不到第-1 列。

我在 Microsoft 博客文章 此处检索数据。显然，问题在于各种 ODBC 驱动程序在报告列元数据时使用不同的属性名称。为了使导入工作，我必须编辑“ProviderDescriptors.xml”文件，该文件位于

C:\Program Files\Microsoft SQL Server\100\DTS\ProviderDescriptors\ProviderDescriptors.xml

中

<dtm:ProviderDescriptor SourceType="System.Data.Odbc.OdbcConnection">

在 ... ... 元素 我必须将属性从 ...

<dtm:ColumnSchemaAttributes
    NameColumnName = "COLUMN_NAME"
    OrdinalPositionColumnName="ORDINAL_POSITION"
    DataTypeColumnName = "TYPE_NAME"
    MaximumLengthColumnName = "COLUMN_SIZE"
    NumericPrecisionColumnName = "COLUMN_SIZE"
    NumericScaleColumnName = "DECIMAL_DIGITS"
    NullableColumnName="NULLABLE"
    NumberOfColumnRestrictions="4"
/>

... 更改为 ...

<dtm:ColumnSchemaAttributes
    NameColumnName = "COLUMN_NAME"
    OrdinalPositionColumnName="ORDINAL_POSITION"
    DataTypeColumnName = "TYPE_NAME"
    MaximumLengthColumnName = "LENGTH"
    NumericPrecisionColumnName = "PRECISION"
    NumericScaleColumnName = "SCALE"
    NullableColumnName="NULLABLE"
    NumberOfColumnRestrictions="4"
/>

也就是说，我必须调整 MaximumLengthColumnName、NumericPrecisionColumnName 和 NumericScaleColumnName code> 属性值分别为 “LENGTH”、“PRECISION” 和 “SCALE”。

进行更改后，从 PostgreSQL 到 SQL Server 的导入成功运行。

Answer 2

我祝您在尝试使用 SQL Server 导入和导出向导从 PostgreSQL 导入 SQL Server 时一切顺利。然而，我读过许多留言板帖子，其中有人无法使其正常工作。例如：

• 从 Postgresql 导入数据SQL Server 08 错误

这是我在该主题上找到的最有帮助的线程：

• 将数据从 postgreSQL 导入 SQL Server 2005

---

帮助可能试图实现类似目标的人矿。不要在 SQL Server 导入和导出向导的数据源下拉菜单中选择“PostgreSQL OLE DB Provider”，而是选择“.Net Framework Data Provider for Odbc”

然后你必须创建一个 DSN 并提供一个连接字符串。以下 ConnectionString 对我有用

Driver={PostgreSQL};Server=localhost;Port=5432;Database=TestMasterMap;Uid=postgres;Pwd=;

要创建一个 DSN，你有进入管理工具à数据源（ODBC）并创建用户DSN。完成此操作后，您可以在 SQL Server 导入和导出向导的 DSN 文本框中提供 DSN 名称。

---

一位评论者声称它有效，但他在大表上遇到“读取元组时内存不足”错误。因此，对于超过 300 万行的表，他必须将导入分成 300 万行块。

此外，该线程中还有一个指向 PostgreSQL 的本机 .NET 提供程序的链接。

就我个人而言，如果这是我只需要做一次的事情，并且如果我很好地理解架构和数据，我会尝试：

1. 从 PostgreSQL 导出数据，作为平面文件
2. 在 SQL 中创建架构服务器（没有 PK 或约束）
3. 使用 SSIS 导入/导出向导导入平面文件，
4. 然后创建 PK 和必要的约束

执行上述操作可能比花几天时间搞乱 SSIS 导入/导出向导和 PostgreSQL 花费的时间更少（但如果这些工具能发挥作用那就太好了！）

Answer 3

当我评论完上面的答案时，我想到尝试 SQL WorkbenchJ；它有一个数据泵功能，对我来说效果很好。我设法将数据从 PostgreSQL 数据库导出到 SQL Server 实例。

对于那些想要以批处理模式（通过 shell）运行此程序的人，操作方法如下：Google 网上论坛帖子。讨论中提到的 WbCopy 命令在我能找到的任何地方都没有真正记录，但您可以通过数据泵接口生成一个命令，然后更改您需要的任何内容。

Answer 4

给出一个更实际的例子，说明如何实现标记答案中描述的内容；您可以从 PostgresQL 导出到平面文件，然后使用 bcp 实用程序，用于在 SQL Server 中导入。
例如，在 .bat 文件中，对于单个表（并且您需要已在目标 SQL DB 中创建该表）：

@echo off

set DbName=YOUR_POSTGRES_DB_NAME
set csvpath=C:\PATH_TO_CSV\CSV_NAME.csv
set username=YOUR_POSTGRES_DB_USERNAME

:: Export to CSV, note we're using a ~ delimiter to avoid issues with commas in fields
psql -U %username% -d %DbName% -c "COPY (select * from SOURCE_TABLE_NAME) TO STDOUT (FORMAT CSV, HEADER TRUE, DELIMITER '~', ENCODING 'UTF8');" > %csvpath%

:: Import CSV to SQL Server
set logpath=C:\bcplog.txt
set errorlogpath=C:\bcperrors.txt
set sqlserver=YOUR_SQL_SERVER
set sqldb=YOUR_DB_NAME

:: page code 65001 = UTF-8
bcp DESTINATION_TABLE_NAME IN %csvpath% -t~ -F1 -c -C65001 -S %sqlserver% -d %sqldb% -T -o %logpath% -e %errorlogpath%