创建从 Microsoft SQL Server 到 AS/400 的连接

Question

我正在尝试从 Microsoft SQL Server 连接到 AS/400，以便我可以从 AS/400 提取数据，然后将数据标记为正在提取。

我已经成功创建了 OLE DB“IBMDASQL”连接，并且能够提取一些数据，但是当我尝试从一个非常大的表中提取数据时遇到问题

这运行正常，并返回计数1.7 亿：

select count(*)
from transactions

这个查询执行了 15 个小时，然后我就放弃了。 （它应该返回零，因为我还没有将任何内容标记为“正在处理”）

select count(*) 
from transactions
where processed = 'In process'

我是 Microsoft 人员，但我的 AS/400 人员说“已处理”列上有一个索引，并且在本地，该查询瞬间运行。

关于我可能做错了什么有什么想法吗？我找到了一个只有 68 条记录的表，并且能够在大约一秒钟内运行此查询：

select count(*)
from smallTable
where RandomColumn = 'randomValue'

所以我知道 AS/400 至少能够理解该类型的查询。

Answer 1

这场战斗我已经打过很多次了。

有两种方法可以解决这个问题。

1) 将数据从 AS400 暂存在 SQL Server 中，您可以在其中优化索引
2）要求AS400人员创建逻辑视图来加速数据检索，你的AS400程序员是正确的，索引会有所帮助，但我忘记了他们用来定义类似于sql server视图的“视图”的术语，我相信它是这样的“物理”与“逻辑”。逻辑性就是你想要的。

第三，1.7亿条记录是很多记录，即使对于像SQL Server这样的关系数据库，您是否考虑过每晚运行一个SSIS包，将您的数据暂存到您自己的SQL表中，看看是否可以提高性能？

Answer 2

我建议这种方式具有良好的性能，我想你至少有SQL2005，我还没有测试过，但这是一个提示

让AS400通过创建存储过程以本机方式执行选择在AS400中

1. 打开一个AS400会话
2. 启动STRSQL

3. 以这种方式创建一个AS400存储过程来获取/更新记录集

   创建程序我的选择（在 PARAM CHAR(10) 中）
   语言 SQL 
   动态结果集 1 
   开始 
   声明 C1 游标用于 SELECT * FROM MYLIB.MYFILE WHERE MYFIELD=PARAM;
   打开C1；
   返回; 
   结尾
   

4. 创建一个AS400存储过程来更新记录集

   创建程序MYUPDATE（在 PARAM CHAR(10) 中）
   语言 SQL 
   结果集 0 
   开始 
   更新 MYLIB.MYFILE SET MYFIELD='newvalue' WHERE MYFIELD=PARAM;
   结尾
   

从SQL SERVER调用那些AS400 SP

declare @myParam char(10)
set @myParam = 'In process'
-- get the recordset
EXEC ('CALL NAME_AS400.MYLIB.MYSELECT(?) ', @myParam) AT AS400 -- < AS400 = name of linked server
-- update
EXEC ('CALL NAME_AS400.MYLIB.MYUPDATE(?) ', @myParam) AT AS400 

希望有帮助

Answer 3

我建议遵循 IBM 红皮书 SQL Performance Diagnosis on IBM DB2 Universal Database for iSeries 中的建议 以确定到底发生了什么。

IBM 技术支持对于诊断此类问题也非常有帮助。不要害怕与他们联系，因为软件支持通常包含在维护合同中，并且与他们交谈是免费的。

我见过 OLEDB 连接在几个小时内耗尽 100% 的 cpu，并且当通过 VisualExplain（查询分析器）运行相同的查询时，它估计只需几秒钟即可执行。

Answer 4

我们发现像这样运行查询的效果与预期一致：

SELECT *
FROM OpenQuery( LinkedServer,
    'select count(*) 
    from transactions
    where processed = ''In process''')
GO

Answer 5

这可能是排序问题吗？ - 您的 WHERE 子句正在文本字段上进行测试，如果两个服务器的排序规则不匹配，则该子句将应用于客户端而不是服务器端，因此您首先需要拉取所有 1.7 亿条记录到客户端，然后对其执行 WHERE 子句。

Answer 6

根据我过去的交互，无论您如何访问数据，查询都应该花费大约相同的时间。另一个想法是，您是否可以在表上创建视图来获取所需的数据或使用存储过程。