hive

hive

文章 63 浏览 58

sqoop导入时与在hive中创建表相关的查询

我正在尝试将 sqoop 从 SQL Server 导入到 Hive 中。 当我执行 sqoop-import 命令时,问题是导入任务已完成, 我可以看到HDFS上的完整数据(在/user/h…

辞取 2025-01-01 10:29:54 4 0

使用分区创建外部

我在 hadoop 中有数据并使用分区(日期和时间)创建了一个外部表。表创建很好,但是当我尝试查询数据时,我没有得到任何结果。 Hadoop文件路径-> /tes…

虐人心 2024-12-29 21:06:33 5 0

Hive 选择与 Rlike 加入

我在配置单元上有两个表,一个包含我从日志中提取的引用链接。 另一个有正则表达式来过滤它们。 我只想获取与正则表达式不匹配的引荐来源网址。 我的…

如梦 2024-12-29 18:45:40 3 0

如何让hive同时运行mapreduce作业?

我是 hive 的新手,遇到了一个问题, 我在 hive 中有一个像这样的表: create table td(id int, time string, ip string, v1 bigint, v2 int, v3 int,…

你穿错了嫁妆 2024-12-27 10:54:49 5 0

优化 Hadoop Hive 中的几 GB 数据

我现在已经相当广泛地使用 Hive,我想知道是否有办法改进以下工作流程。 每天晚上,Oracle 集群中的制表符分隔的未压缩文本文件转储都会写入 HDFS,由…

装纯掩盖桑 2024-12-27 09:06:55 3 0

Amazon MapReduce Hive 调用简单队列服务

我是亚马逊 MapReduce 的新手。谁能告诉我如何轻松地从 Hive 作业向 Amazon 的 SQS(简单队列服务)提交消息?我想将指向我作业的 S3 结果的指针放入 …

无言温柔 2024-12-26 12:08:05 6 0

hive 是否支持结构体中的可选字段

thrift 确实支持结构中的可选字段 struct Name { 1: string firstname, 2: optional string middlename, 3: string lastname, } ,但是 hive 支持创建…

时光匆匆的小流年 2024-12-26 02:22:00 3 0

hive 显示给出错误的表

我在运行配置单元时遇到以下错误。我只是使用默认的 derby 数据库。 我正在使用以下 hadoop 版本 root@edmg-u10:~/dse-1.0.1/bin# dse hadoop version…

野味少女 2024-12-25 23:32:45 2 0

如何在自定义地图和自定义地图的帮助下实现连接Hive 中的自定义缩减脚本

我是 Hive 的新手,我正在尝试在 Hive 中执行任务。 我知道我们可以在 hive 中创建映射脚本和化简脚本,但我对映射脚本和化简脚本中包含哪些内容感到…

挽梦忆笙歌 2024-12-25 10:03:29 2 0

如何在hive中将ansi转换为utf8

我想在配置单元中使用自定义输入格式,我在这里找到代码: https://github.com/msukmanowsky/OmnitureDataFileInputFormat 但是当我完成测试代码时,…

云仙小弟 2024-12-25 05:37:42 1 0

运行 hive 查询时出错

我正在尝试运行 hive 查询,但收到错误如下: hive> FROM ( > FROM t1 > MAP t1.patient_mrn, t1.encounter_date > USING 'retrieve' > AS mp1, mp2 >…

剩一世无双 2024-12-24 22:45:27 3 0

如何将xml数据直接加载到Hive表中而不使用java将其转换为平面文件

我在“将 XML 加载到 Hive 表中”而不将其转换为平面文件时遇到一些问题。请通过提供必要的示例和方法来帮助我。…

夏末 2024-12-23 09:27:03 3 0

如何在hive中将mapreduce任务的数量设置为1

我尝试在 hive 中执行以下操作 - set hive.exec.reducers.max = 1; set mapred.reduce.tasks = 1; from flat_json insert overwrite table aggr_pgm_m…

美男兮 2024-12-22 18:57:22 9 0

Hive脚本问题

我正在运行以下 shell 脚本, #!/bin/bash HADOOP_HOME='/home/hadoop/hadoop-0.20.2' HIVE_HOME='/home/hadoop/hive-0.8.0' echo -e '1\x01foo' > /t…

镜花水月 2024-12-22 13:38:31 2 0

是否可以使用 Whirr 在 EC2 上创建包含 Hbase、Hive 和 Pig 的 Hadoop 集群

是否可以使用 Whirr 在 Amazon EC2 上创建一个包含 Hbase、Hive 和 Pig 的 Hadoop 集群?…

破晓 2024-12-22 02:59:04 8 0
更多

推荐作者

5040234068

文章 0 评论 0

樱花雨梦

文章 0 评论 0

≈。彩虹

文章 0 评论 0

雨轻弹

文章 0 评论 0

血之狂魔

文章 0 评论 0

qq_0bIjwE

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文