DTS、SSIS、Informatica、PL/SQL 脚本
过去,我曾使用Informatica进行一些ETL(提取转换加载),但发现它相当慢,通常用一些PL/SQL脚本替换它(当时使用Oracle)。 (根据答案中的反馈修改…
是否可以从 C# 创建 SQL Server 本机文件(如 BCP 本机格式)
我们正在升级一个已有 15 年历史的代码库,需要创建一些本机 BCP 格式的数据文件。 在新系统中,我们理想地希望利用 C# DataTable 对象中的数据来创建…
Pentaho ETL 和数据分析器是不错的选择吗?
我一直在寻找 ETL 工具,在 google 上找到了很多关于 Pentaho Kettle 的信息。 我还需要一个在星型模式上运行的数据分析器,以便业务用户可以尝试并生…
将数据从一种数据库方案迁移到另一种数据库方案时的最佳实践?
很多时候,当我在处理一个项目时,我发现自己正在查看数据库方案,并且必须导出数据才能使用新方案。 很多时候,数据库中存储的数据相当粗糙。我的意…
Rhino-Etl 和 MySQL 的问题
我已经使用 Rhino-ETL 一段时间了,它运行得非常流畅。但是我在连接到 MySQL 数据库时遇到问题。 Rhino.Etl.Core.RhinoEtlException: Failed to execu…
将数据从一个数据库移动到具有不同数据结构的另一个数据库
如何将数据从假设的mysql数据库移动到postgres数据库? 场景:两个类似的应用程序。用户想要从一个应用程序切换到另一个应用程序。 但他在之前使用 my…
如何使表与 SQL Server - ETL 中的查询保持同步?
我不确定如何表达这个问题,所以我会尝试解释。我在SQL Server 2005上有一个第三方数据库。我有另一个SQL Server 2008,我也想“发布”第三方数据库中…
大规模 ETL 字符串查找性能问题
我遇到 ETL 流程性能问题。我有一个包含 4+ 十亿行的表。结构为: id bigint Identity(1,1) raw_url varchar(2000) not null md5hash char(32) not nu…
将 CSV 导入 SQl Server 2005 的最简单方法
我有几个大约 5k 的 CSV 数据文件,需要导入到 SQL Server 2005 中。 过去使用 DTS 很简单。我之前尝试过使用 SSIS,但似乎要付出大约 10 倍的努力,…
重塑表格以将行转换为列
我尝试搜索帖子,但只找到了 SQL Server/Access 的解决方案。 我需要 MySQL (5.X) 中的解决方案。 我有一个包含 3 列的表(称为历史记录):hostid、i…
跟踪 MERGE 命令及其 OUTPUT 执行的操作
我正在使用以下(长)SQL 语句修改类型 2 维度: INSERT INTO AtlasDataWarehouseReports.District ( Col01, Col02, Col03, Col04, Col05, Col06, Col…