hadoop hive window function reduce任务卡住超时(45分钟)
求助。现有cdh5,hive版本为0.12,在对一个表大概60多成条记录进行分窗处理时(服务器配置比较高,内存256G,配置container可分配内存为130G),跑到最…
【hive】执行select * from table_name where partition_name ='name';报错
hadoop版本2.6.0  hive1.1.1 之前表示创建好的,分区表也设置好的,为了测试按照分区表查询数据时遇到了这个问题。而且异常信息打印完毕后直接退…
CDH 上 kylin安装报错
在安装kylin的时候,报错 Caused by: java.lang.IllegalArgumentException: File not exist by 'kylin_metadata@hbase ': /usr/local/apache-kylin-1…
Hive UDF函数报错UDFArgumentException: The UDF implementation class 'xxxxx' is not present inthe class path
这两天遇到了一个比较诡异的问题,就是编辑Hive的UDF函数,并提交需要执行MapReduce的SQL后,提示报错 org.apache.hadoop.hive.ql.exec.UDFArgumentEx…
使用java 如何将oracle 的数据迁移到Hive 上?
如题:使用java 如何将oracle 的数据迁移到Hive 上? 自己准备 先用jdbc 将oracle 的数据先导出成文本, 根据hive 规则创建表 在jdbc 上执行hive loa…
在bin 目录下 执行 hive ,报错了
 sh hive Logging initialized using configuration in file:/usr/local/hive121/conf/hive-log4j.properties [ERROR] Terminal initialization f…
hive 创建数据表失败
hive> create database sogou FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. MetaException(message:Got …
hive 如何实现递归关联
sql server 中 可以用 with a as( select * from c union all select * from b inner join a on a.col1=b.col ) 这样的语法来实现递归 请问hive 可以…
hadoop 中利用gis-tools-for-hadoop 处理空间数据一直有问题
在Hadoop集群中运行esri 的一个gis-tools-for-hadoop 里面的一个示例。结果在MapReduce阶段一直报错 java.lang.RuntimeExption: Error in configurin…
Hive的Json解析问题get_json_object
大家好, 请教下面这个json串应该如何解析出pay_id呢。问题可能是的位置,不过这个串也是个有效的。 {"orderId":"4","PayInfo":"[{"pay_id":1,"money…
hive on spark on yarn 任务一直 是running状态
@stark_summer 你好,想跟你请教个问题: hive配置成spark引擎,提交任务到yarn,执行SQL 能够正确的返回结果,但是执行完毕,任务的状态一直是runni…
Handler processing failed; nested exception is java.lang.NoClassDefFoundError
org.springframework.web.util.NestedServletException: Handler processing failed nested exception is java.lang.NoClassDefFoundError: org/apach…
求助:HIVE中一张5亿的表关联3张都只有100条数据的表,怎样效率更高?谢谢
求助:HIVE中一张5亿的表关联3张都只有100条数据的表,怎样效率更高?谢谢 表 T1(a int,b varchar(100),c int,d int)  …