使用sqoop将oracle数据导入hbase时,如何用隐藏列rownum作为--split-by?

发布于 2022-09-03 08:08:14 字数 380 浏览 26 评论 0

如题,将oracle中的数据导入hbase,用rownum进行并行导入,最终只能导入一个map的数据,为什么?
/usr/hdp/2.3.2.0-2950/sqoop/bin/sqoop import --connect "jdbc:oracle:thin:@" --username --password \
--query "SELECT * FROM tablename where $CONDITIONS" \
--hbase-table testoracle --hbase-row-key SEQID --split-by ROWNUM -m 8 --column-family cf

表中共有800w+数据,如果用seqid作为分割,就能全部导入,如果用rownum分割就只能导入100w条。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文