large-data-volumes

large-data-volumes

文章 0 浏览 4

优化MySQL聚合查询

我在 MySQL 中有一个非常大的表(约 1 亿条记录),其中包含有关文件的信息。 其中一条信息是每个文件的修改日期。 我需要编写一个查询来计算符合指定…

失去的东西太少 2024-07-18 07:29:03 8 0

如何使用 Perl 计算大型 CSV 文件中的行数?

我在工作中必须在Windows环境下使用Perl,并且我需要能够找出一个大的csv文件包含的行数(大约1.4Gb)。 知道如何以最少的资源浪费来做到这一点吗? …

謸气贵蔟 2024-07-16 11:32:04 8 0

具有数百万行的四个表之间的联接的 Sql 查询

我们有一个 transact sql 语句,用于查询 4 ​​个表,每个表中有数百万行。 尽管根据 TuningAdvisor 的说法,它已经使用索引和统计信息进行了优化,…

往事风中埋 2024-07-16 02:08:28 12 0

如果 2^32 还不够怎么办?

如果表中有太多条目,2^32 不足以满足给定时间段(日、周、月……)内的 auto_increment ID 怎么办? 如果MySQL提供的最大数据类型不够用怎么办? 我…

故人如初 2024-07-15 22:31:52 7 0

高效存储 7.300.000.000 行

您将如何解决以下存储和检索问题? 每天(365 天/年)将添加大约 2.000.000 行,每行包含以下信息: id(唯一行标识符) entity_id(采用 1 到 2.000.…

穿越时光隧道 2024-07-14 22:31:26 9 0

mysql 表结构 - 一张非常大的表或单独的表?

我正在从事一个本质上与网站访问者分析类似的项目。 它将被数百个网站使用,平均每个网站每天的浏览量为10,000到100,000,因此数据量将非常大。 我应…

童话 2024-07-14 13:01:29 8 0

什么数据验证方法最适合大型数据集

我有一个大型数据库,想要实现一个允许用户批量更新信息的功能。 用户下载 Excel 文件,进行更改,系统接受该 Excel 文件。 用户使用 Web 界面 (ASP.N…

彼岸花ソ最美的依靠 2024-07-13 03:23:19 9 0

如何在所有缩放级别实时准确地绘制大数据向量?

我有大量数据集(10 Hz 数据,因此每 24 小时 864k 个点),我需要实时绘制它们。 这个想法是用户可以缩放和平移到高度详细的散点图。 数据不是很连续…

甜扑 2024-07-13 01:53:24 10 0

如何限制mysqldump使用的带宽

我必须通过没有那么多带宽且其他人需要同时使用的网络管道转储大型数据库。 如果我尝试它,它会占用所有带宽,并且延迟会飙升,而其他人都会陷入困境…

愛放△進行李 2024-07-09 23:08:25 10 0

大主键:1+ 十亿行 MySQL + 英诺数据库?

我想知道 InnoDB 是否是格式化表的最佳方式? 该表包含一个字段、主键,该表每天将获取 816k 行(预计)。 这会很快变得非常大! 我正在研究文件存储…

痞味浪人 2024-07-09 13:52:01 13 0

绘制大量数据的图表

在我开发的产品中,有一个迭代循环,可以进行几百到几百万次迭代。 每次迭代计算一组统计变量(双精度),变量数量最多可达 1000 个(通常为 15-50 个…

你在我安 2024-07-08 21:35:21 12 0

关于处理大数据量的建议

因此,我有“大量”的“非常大”的 ASCII 文件的数值数据(总共千兆字节),并且我的程序需要至少按顺序处理整个文件一次。 关于存储/加载数据有什么…

花伊自在美 2024-07-06 01:28:11 9 0
更多

推荐作者

胡图图

文章 0 评论 0

zt006

文章 0 评论 0

z祗昰~

文章 0 评论 0

冰葑

文章 0 评论 0

野の

文章 0 评论 0

天空

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文