large-data

large-data

文章 0 浏览 4

无论设置正确与否,PHP 连接都会在大文件上传时重置

我遇到了一个非常常见的问题,似乎找到的所有可用解决方案都不起作用。 我们有一个接收大量流量的 LAMP 服务器。使用此服务器,我们执行定期文件提交…

冷了相思 2024-12-07 09:46:55 1 0

对于大型表连接和更新,我应该更改哪些 MySQL my.ini 参数?

我有以下内容: TableA - 20M 行 TableB - 500K 行 许多查询,特别是以下查询,需要很长时间。 UPDATE TableA AS A INNER JOIN TableB AS B ON B.Valu…

土豪我们做朋友吧 2024-12-06 22:58:12 3 0

查询中的 MySQL 子位置计数器

我需要获取一个记录集,其中为每 60 条记录填充字段 level1,这意味着我需要以这种方式填充 level1 字段: 在 pos=1 和 pos=60 上,level1 = 1 在 pos…

后来的我们 2024-12-06 18:16:48 1 0

在 MySQL 中存储和访问庞大数据矩阵的最有效方法

我将在 mysqlDB 中存储大量矩阵数据,存储和访问数据最有效的方法是什么? 获取数据时效率最重要,表不会定期更新。 矩阵大约是 100.000 乘以 1000(…

Bonjour°[大白 2024-12-05 10:58:01 2 0

如何通过 LINQ 处理图像数据类型

我尝试在谷歌和这个网站上搜索这个问题,但是很难找到正确的,所以这可能已经在某个地方被问过并得到了回答,但我找不到它。 不管怎样,我继承了一些…

孤寂小茶 2024-12-05 04:19:23 1 0

150M记录按名称排序

我有一个每天生成约 1.5 亿条记录的数据集,其中包含: member_id、member_name、member_name_first_letter 我需要获取按 member_name asc 排序的列表…

笑红尘 2024-12-05 03:59:54 2 0

存储大型可搜索文本文件的最佳方式

我正在开发一个在线圣经搜索程序。圣经是一本相当大的书,纯文本占用了近 5MB 的空间。我计划在程序中实现 API,并允许其他网站包含自己的圣经搜索小…

愁以何悠 2024-12-05 01:40:12 0 0

java:非常大的树?

目标是建造非常大的树。 我所说的“非常大”是指数亿个节点,相当于几千兆字节。 问题是通用数据结构的开销太大。我买不起“节点”对象和子“地图”。…

末蓝 2024-12-02 15:05:49 0 0

插入忽略或插入不在其中的位置

我有一个 900 万行的表,由于其庞大的规模,我正在努力处理所有这些数据。 我想要做的是将导入 CSV 添加到表中而不覆盖数据。 在我做这样的事情之前;…

谎言月老 2024-12-02 07:49:42 5 0

重构循环?

我想循环超过 200,000 个用户数据集来过滤 30,000 个产品,我如何优化这个嵌套的大循环以获得最佳性能? //settings , 5 max per user, can up to 200…

浮世清欢 2024-12-01 23:59:29 1 0

如何在不使用数据库切片的情况下在视图中显示大列表?

我有一项服务,可以通过多个表的多次迭代和计算生成大型地图。我的问题是我无法使用分页偏移量来切片数据,因为数据来自多个表并且数据上发生了不同的…

迎风吟唱 2024-11-30 11:05:54 2 0

Hibernate 存储过程调用导致 OutOfMemory

数据库是 Oracle 11g 我正在使用 Hibernate 的命名查询来执行一个存储过程,返回一个非常大的数据集(超过 200 万行),例如 : Query query = sessio…

素染倾城色 2024-11-29 11:28:45 0 0

Parallel.ForEach 可能会导致“内存不足”如果使用带有大对象的可枚举,则会出现异常

我正在尝试将数据库中存储图像的数据库迁移到数据库中指向硬盘驱动器上的文件的记录。我试图使用 Parallel.ForEach 来加快进程 使用此方法查询出数据…

浅浅 2024-11-28 03:46:23 1 0

使用WCF提供大型报表数据集

我需要一个应用程序来访问远程数据库的报告数据。我们当前有一个 WCF 服务来处理该数据库的 I/O。通常,应用程序只是在 WCF 服务与其自身之间来回发送…

追我者格杀勿论 2024-11-27 00:28:45 0 0

有没有办法将结果查询加载到内存中?

我有一个巨大的数据库(21亿行),我需要执行一些计算来提取一些统计结果。据我了解,直接在这个数据库上执行计算显然是不明智的。 我现在想做的是将…

在梵高的星空下 2024-11-26 23:58:53 0 0
更多

推荐作者

qq_2gSKZM

文章 0 评论 0

∞梦里开花

文章 0 评论 0

qq_IklFPL

文章 0 评论 0

迷途知返

文章 0 评论 0

深海不蓝

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文