请问应该怎么读取DolphinDB的分布式表,能够最小占用内存啊

发布于 2022-09-12 02:04:20 字数 296 浏览 16 评论 0

请教下dfs分区,用loadtable和where语句取数据,一样的语句,一会可以取出来一会显示Out of memory,这个是我哪里用错了吗?谢谢

trade = s.loadTable(tableName='stock_minute1_data',dbPath="dfs://minute_1")   
t1=trade.where("datetime<=temporalParse('20090201 15:00:00', 'yyyyMMdd HH:mm:ss')")       
df = t1.toDF()

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(1

橘虞初梦 2022-09-19 02:04:20

你这个query会读取所有20090201 15:00:00之前的数据,这个数据量有多大?

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文