etl

etl

文章 16 浏览 97

DTS、SSIS、Informatica、PL/SQL 脚本

过去,我曾使用Informatica进行一些ETL(提取转换加载),但发现它相当慢,通常用一些PL/SQL脚本替换它(当时使用Oracle)。 (根据答案中的反馈修改…

若无相欠,怎会相见 2024-08-15 16:51:57 8 0

如何直观地设计用于编程提取的混搭查询

我正在开发一个应用程序,该应用程序从互联网页面获取各种输入,而每个信息片段都来自不同的位置(混搭)。 我想通过可视化工具生成混搭构建块(片段…

一身仙ぐ女味 2024-08-13 09:05:11 2 0

是否可以从 C# 创建 SQL Server 本机文件(如 BCP 本机格式)

我们正在升级一个已有 15 年历史的代码库,需要创建一些本机 BCP 格式的数据文件。 在新系统中,我们理想地希望利用 C# DataTable 对象中的数据来创建…

挽心 2024-08-12 10:50:01 2 0

Pentaho ETL 和数据分析器是不错的选择吗?

我一直在寻找 ETL 工具,在 google 上找到了很多关于 Pentaho Kettle 的信息。 我还需要一个在星型模式上运行的数据分析器,以便业务用户可以尝试并生…

待天淡蓝洁白时 2024-08-12 06:18:32 4 0

将数据从一种数据库方案迁移到另一种数据库方案时的最佳实践?

很多时候,当我在处理一个项目时,我发现自己正在查看数据库方案,并且必须导出数据才能使用新方案。 很多时候,数据库中存储的数据相当粗糙。我的意…

葬心 2024-08-12 04:39:27 3 0

SSIS 中查找任务的替代方案

我正在为数据仓库开发一个SSIS解决方案,用于提取相应应用程序键的代理键,我正在使用SSIS的查找任务,但该任务的问题是它将完整的查找表缓存在其内存…

计㈡愣 2024-08-08 19:01:10 2 0

Rhino-Etl 和 MySQL 的问题

我已经使用 Rhino-ETL 一段时间了,它运行得非常流畅。但是我在连接到 MySQL 数据库时遇到问题。 Rhino.Etl.Core.RhinoEtlException: Failed to execu…

我不咬妳我踢妳 2024-08-08 10:50:29 1 0

将数据从一个数据库移动到具有不同数据结构的另一个数据库

如何将数据从假设的mysql数据库移动到postgres数据库? 场景:两个类似的应用程序。用户想要从一个应用程序切换到另一个应用程序。 但他在之前使用 my…

薄荷梦 2024-08-07 15:39:03 2 0

如何使表与 SQL Server - ETL 中的查询保持同步?

我不确定如何表达这个问题,所以我会尝试解释。我在SQL Server 2005上有一个第三方数据库。我有另一个SQL Server 2008,我也想“发布”第三方数据库中…

浪荡不羁 2024-08-06 00:14:13 4 0

大规模 ETL 字符串查找性能问题

我遇到 ETL 流程性能问题。我有一个包含 4+ 十亿行的表。结构为: id bigint Identity(1,1) raw_url varchar(2000) not null md5hash char(32) not nu…

旧城空念 2024-08-04 06:29:14 1 0

将 CSV 导入 SQl Server 2005 的最简单方法

我有几个大约 5k 的 CSV 数据文件,需要导入到 SQL Server 2005 中。 过去使用 DTS 很简单。我之前尝试过使用 SSIS,但似乎要付出大约 10 倍的努力,…

东京女 2024-08-02 17:02:30 2 0

重塑表格以将行转换为列

我尝试搜索帖子,但只找到了 SQL Server/Access 的解决方案。 我需要 MySQL (5.X) 中的解决方案。 我有一个包含 3 列的表(称为历史记录):hostid、i…

无人接听 2024-08-01 14:12:31 3 0

ETL 作为事务

对于我迄今为止编写的所有 ETL,我从未将它们设为事务 - 即,如果表 4 失败,则回滚所有内容。 这方面的最佳实践是什么? 要“BeginTran + Commit”还…

小矜持 2024-07-29 13:24:28 5 0

跟踪 MERGE 命令及其 OUTPUT 执行的操作

我正在使用以下(长)SQL 语句修改类型 2 维度: INSERT INTO AtlasDataWarehouseReports.District ( Col01, Col02, Col03, Col04, Col05, Col06, Col…

秋风の叶未落 2024-07-29 06:59:41 2 0

用Excel提取数据

我每月收到 100 多个 Excel 电子表格,我从中选取固定范围并粘贴到其他电子表格中以制作报告。 我正在尝试编写一个 VBA 脚本来迭代我的 Excel 文件并…

童话 2024-07-29 05:43:15 4 0
更多

推荐作者

不再见

文章 0 评论 0

真是无聊啊

文章 0 评论 0

樱娆

文章 0 评论 0

浅语花开

文章 0 评论 0

烛光

文章 0 评论 0

绻影浮沉

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文