Sqoop

Sqoop

文章 28 浏览 66

Sqoop hive 导入错误数据

我正在尝试从 PGSQL 导入数据并使用 sqoop 加载到 Hive 中 使用的查询: sqoop import --connect jdbc:postgresql://${HOST}:${PORT}/${INST} --usern…

我不在是我 2025-01-13 20:04:22 0 0

来自 SQL Server 的 Sqoop,没有主键

我正在尝试对一个具有数十亿条记录并且表中没有任何主键的表进行 sqoop 导入,因此我无法通过任何现有列进行 --split-by 。 是否可以按行号拆分,以便…

箹锭⒈辈孓 2025-01-08 23:59:59 0 0

如何在Java程序中使用Sqoop?

我知道如何通过命令行使用 sqoop 。 但不知道如何使用java程序调用sqoop命令。 谁能提供一些代码视图吗?…

傲性难收 2025-01-04 17:44:41 1 0

在 Hive 中导入表后显示错误计数

我已经从 MS SQL Server 导入了 Hive 中的近 10 个表。 但是,当我尝试交叉检查 Hive 中某个表中的记录时,我在运行查询时发现了更多记录(select cou…

守不住的情 2025-01-03 09:29:09 1 0

sqoop导入时与在hive中创建表相关的查询

我正在尝试将 sqoop 从 SQL Server 导入到 Hive 中。 当我执行 sqoop-import 命令时,问题是导入任务已完成, 我可以看到HDFS上的完整数据(在/user/h…

辞取 2025-01-01 10:29:54 1 0

将 HBase 数据导出到 RDBMS

我使用 HBase 来存储数据,但后来为了满足我的要求,我想将数据从 HBase 导出到 RDBM,例如 mysql 或 postgres。我知道我们有 Sqoop 作为一个选项,但…

睫毛上残留的泪 2024-12-25 04:03:25 1 0

与 sqoop-import 相关的查询?

场景: 我已将数据从 SQl Server 导入到 HDFS。数据以多个文件的形式存储在HDFS目录中: 零件-m-00000 零件-m-00001 零件-m-00002 部分-m-00003 问题…

疯了 2024-12-22 11:32:40 0 0

sqoop 导入时发生错误“将 varchar 值转换为 JDBC 数据类型 DECIMAL”

场景: 当我输入 sqoop 导入查询时,我得到如下信息: 错误: hadoop@ubuntu:~/sqoop-1.1.0/bin$ ./sqoop-import --driver 'com.microsoft.sqlserver.…

太阳哥哥 2024-12-20 16:12:39 1 0

sqoop导入查询错误

场景: I am trying for importing data from MS SQL Server to HDFS. But I am getting certain errors as: 错误: hadoop@ubuntu:~/sqoop-1.1.0$ bi…

人心善变 2024-12-20 07:29:30 2 0

如何使用 Hadoop、Hive 和 Sqoop 从 MS SQL Server 检索和分析数据?

我想对数据库(MS SQL Server)中的数据进行分析。那么如何借助 Sqoop/Hive 将这些数据转移到 HDFS 上呢? Hive/Sqoop 可以吗? 请建议我我们该怎么做…

何以畏孤独 2024-12-19 13:47:03 1 0

Sqoop 命令 --hive-import 失败

我尝试使用 Hadoop 将数据库从 mysql 导入到 Hive,并使用 Sqoop 的“--hive-import”命令自动创建表并将数据加载到 hive。 我使用下面的命令使用 sqo…

玻璃人 2024-11-29 03:40:51 3 0

sqoop导入完成但hive显示表看不到表

安装hadoop、hive(CDH版本)后我执行 ./sqoop import -connect jdbc:mysql://10.164.11.204/server -username root -password password -table user …

命硬 2024-11-18 05:02:05 5 0

在 ubuntu 上哪里安装 jdbc 驱动程序?

我正在尝试在 ubuntu 上安装 MS SQL JDBC 驱动程序,以便与 sqoop for Hadoop 一起使用。我对 java 和 linux 完全陌生,所以我不确定将所有内容提取到…

把人绕傻吧 2024-10-22 03:05:02 8 0

apache sqoop导出遇到了以下错误

错误信息:java.lang.Exception: java.io.IOException: java.lang.ClassNotFoundException: stu at org.apache.hadoop.mapred.LocalJobRunner$Job.run…

○闲身 2022-09-13 00:28:42 35 0

sqoop 导出mysql到hive失败

问题描述 不胜感激指点 这是执行的导入命令sqoop import-all-tables --connect "jdbc:mysql://0.0.0.0:3306/hwkj_crm?useSSL=false&useUnicode=true&…

手心的海 2022-09-12 02:06:39 42 0
更多

推荐作者

5397313

文章 0 评论 0

烟沫凡尘

文章 0 评论 0

一个破名字

文章 0 评论 0

萌︼了一个春

文章 0 评论 0

当爱已成负担

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文