大数据

大数据

文章 168 浏览 845

cdh6.3安装hdfs报错

执行的命令 hdfs/hdfs.sh ["secondarynamenode"] Sun Jun 14 07:49:04 CST 2020JAVA_HOME=/usr/java/jdk1.8.0_181using /usr/java/jdk1.8.0_181 as J…

忆梦 2022-09-12 03:14:02 36 0

Spark 任务瓶颈分析

我先说说我的机器,一台 master,性能肯定够。一台 slave 节点(配置为 6 核 10g内存 单块硬盘) master 节点只负责管理,不参与任何运算。然后发现…

滥情稳全场 2022-09-12 03:08:16 38 0

未来网络和存储会不会去中心化,每个计算机都是共同体!

未来网络和存储会不会去中心化,每个计算机都是共同体!…

轮廓§ 2022-09-12 03:01:02 27 0

pyspark无法关闭

问题描述 pyspark无法关闭,调用stop也无法关闭,请问是什么原因呢 如下 …

感受沵的脚步 2022-09-12 02:47:08 24 0

在 Spark中为什么task不是按照顺序执行

我在 spark-shell 下面运行一个最简单的 wordcount 程序, val text = spark.read.textFile("/datasets/wordcount_512m.txt") text.flatMap(line =&g…

浮生未歇 2022-09-12 02:40:49 36 0

如何在DolphinDB database中更快地获取最新状态数据

我的应用场景是每600毫秒一次从1000个设备收集数据,然后将其写入分布式数据库。需要实时数据查询以查询每个设备的最新状态数据。 def createDatabas…

最笨的告白 2022-09-12 02:36:52 12 0

爬虫爬过来的数据为啥要经过大数据分析

我一直不理解为啥爬虫爬过来的数据要经过大数据分析…

尝蛊 2022-09-12 02:34:56 27 0

流表用defined(name, VAR|DEF)判断为什么总是返回false

如下代码所示,我想在创建DolphinDB database流表之前先清除流表。 stName="mtopst" if (defined(stName,VAR)){ clearTablePersistence(objByName(st…

〃温暖了心ぐ 2022-09-12 02:33:26 14 0

在DolphinDB中怎么获取一列值全是NULL的列

假设我有一张DolphinDB内存表如下: t = table(1..3 as a, `a`b`c as b) &gtt a b 1 a 2 b 3 c 现在想增加一列全是NULL,如下所示: a b col 1 a NUL…

剪不断理还乱 2022-09-12 02:30:13 15 0

Storm中可不可以使用Websocket发送消息

我在Storm Bolt处理完数据后,想通过Websocket实时发送给前端进行显示处理,可以始终都发送不出去,其他地方发送都可以发送成功,数据可以传递给Webso…

挖鼻大婶 2022-09-12 02:27:36 25 0

请问爬虫爬过来的数据 为啥要先进行大数据处理才给后端展示呢?

因为我了解的大数据可能就是数据分析和处理,比如爬虫 抓了很多数据 必须经过爬虫这样的处理才展示出来呢?…

表情可笑 2022-09-12 02:26:11 14 0

计算持仓成本,有没有高效的方法

如下代码所示,order表的字段id是订单号,price是价格,amount下单数量(+买入,-卖出),当amount为正时,持仓成本=cumsum(amount*price)/cumsum(am…

机场等船 2022-09-12 02:24:45 18 0

DolphinDB导出文件时提示No such file or directory,但路径是存在的

如下图所示,我在DolphinDB database中用saveText导出文件时提示文件或目录不存在:但路径是存在的,如下图:我这个目录下 777 权限,为啥提示不存在…

樱娆 2022-09-12 02:18:16 14 0

怎么获取DolphinDB表中一天的股票最高价时的信息

假设我有如下表以及记录 sym = `C`MS`MS`MS`IBM`IBM`C`C`C$SYMBOL price= 49.6 29.46 29.52 30.02 174.97 175.23 50.76 50.32 51.29 qty = 2200 1900…

作死小能手 2022-09-12 02:15:59 13 0

请问一下,dolphindb中delimiter能是tab符么?

请问一下,在DolphinDB database中如下代码: t1=table(1..6 as id,2..7 as v, 3..8 as v1, 4..9 as v2, 5..10 as v3 ) saveText(t1, "trades.txt","…

つ低調成傷 2022-09-12 02:09:29 19 0
更多

推荐作者

遂心如意

文章 0 评论 0

5513090242

文章 0 评论 0

巷雨优美回忆

文章 0 评论 0

junpengz2000

文章 0 评论 0

13郎

文章 0 评论 0

qq_xU4RDg

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文