后端

后端

文章 1.3k 浏览 22

scala的distinct函数怎么用?

我这样写:val validRDD = unionRDD.map(item =&gt { val arr = item.split(' ') ((arr(1), arr(2)), arr(3).toDouble) }) .distinct()unionRDD中是用…

情释 2022-09-30 23:11:54 32 0

在rdd中使用recommendProductsForUsers报错?

org.apache.spark.SparkException: Task not serializable at org.apache.spark.util.ClosureCleaner$.ensureSerializable(ClosureCleaner.scala:416)…

少女的英雄梦 2022-09-30 23:11:17 56 0

此hive错误如何解决?

运行一般的hql都没有问题,运行select * from mall order by createtime desc会报错:INFO : Compiling command(queryId=root_20210928170420_7553da3…

雪若未夕 2022-09-30 23:11:09 59 0

多次查询数据库如何更有效率

$arr = [] $go= $dbh -&gt query("select id,gid from table1")while($rs = $go -&gt fetch(PDO :: FETCH_ASSOC)){$arr['table1'] = $rs} $go= $dbh -…

吹泡泡o 2022-09-30 23:10:51 33 0

spark集群中println的结果在哪儿看?

scala中有println语句我打包jar包,提交到集群了但是结果不知道在哪儿看呢?webUI里似乎没有console里也没有…

黎歌 2022-09-30 23:10:41 43 0

scala list类型转rdd时候报错:SparkException: Task not serializable

完整的错误是:org.apache.spark.SparkException: Task not serializable at org.apache.spark.util.ClosureCleaner$.ensureSerializable(ClosureClea…

野侃 2022-09-30 23:10:38 63 0

scala一直报错:java.lang.NullPointerException

完整的错误是:21/09/29 16:05:25 ERROR Executor: Exception in task 0.0 in stage 3.0 (TID 3) java.lang.NullPointerException at org.apache.spar…

伤感在游骋 2022-09-30 23:10:28 48 0

scala连接kafka失败 如何解决?

按照官方文档的示例,写了以下程序:def main(args: Array[String]):Unit = { val sparkConf: SparkConf = new SparkConf().setMaster("local[4]").se…

通知家属抬走 2022-09-30 23:10:20 76 0

flume报错了ERROR RPC client creation failed! NettyAvroRpcClient

flume中设置了监听端口:agent.sources.log4j.type = avro agent.sources.log4j.bind = 0.0.0.0 agent.sources.log4j.port = 4450安全组已经开放了445…

长发绾君心 2022-09-30 23:09:29 54 0

本地0.0.0.0服务无法访问

在本地启动服务时指定host为0.0.0.0,port指定为8881,然后通过0.0.0.0:8881访问不到,通过127.0.0.1:8881就能访问到,在不修改host及port的情况下,怎…

眼眸里的快感 2022-09-30 23:09:22 27 0

redis lua脚本对并发性能有影响吗?

假设 redis 的 QPS 是10w,但是我有一个 lua 脚本要做到 先读,再 update,因为网络是很慢的,传输一次要200ms,那这个就是 redis 的 QPS 直接从 10w …

丶视觉 2022-09-30 23:08:58 37 0

Java的LoadLoad内存屏障可以理解为Load1 happens-before Load2吗?

比较完整地表述一遍我的问题:Java内存屏障中LoadLoad屏障是否可以理解为,对于Load1 LoadLoad Load2这个语句,Load1 happens-before Load2?最近在看…

柠檬色的秋千 2022-09-30 23:08:56 35 0

idea开发的springboot项目,后台接口跟前端展示页面都设置成了utf-8,为什么查询出来的还是乱码?

如果汉字是从数据库中查询出来的,就不会乱码,如果是在代码中写的就会乱码,这是为什么呀?同一个接口…

梦明 2022-09-30 23:08:56 32 0

为什么hive安装需要配mysql而不需要配hadoop?

hive安装中为什么需要配mysql的地址密码hive需要mysql来做什么?为什么不需要配hadoop的地址也能找到hadoop?…

淤浪 2022-09-30 23:08:26 56 0

Java 有三张表,我应该写两个实体类,还是三个实体类

有一张订单表、一张商品表、一张订单商品关系表我应该写三个实体类还是两个实体类三个感觉有些冗余,两个感觉会在一个实体类里面写太多的东西请问应该…

墨落成白 2022-09-30 23:08:22 36 0
更多

推荐作者

花开柳相依

文章 0 评论 0

zyhello

文章 0 评论 0

故友

文章 0 评论 0

对风讲故事

文章 0 评论 0

Oo萌小芽oO

文章 0 评论 0

梦明

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文