large-data

large-data

文章 0 浏览 2

数据库的大量数据标准化

我需要将大量数据存储在数据库中。数据为:该月的每一天,有 5 个事件。这 5 个事件进一步分为 2 个不同的子事件,需要将它们分开,这意味着该月的每…

来世叙缘 2024-10-25 00:43:25 3 0

如何以 png 作为背景进行绘图?

我制作了一个 300 万点的图并将其保存为 PNG。花了几个小时,我想避免重新绘制所有点。 如何生成以此 PNG 作为背景的新绘图?…

书间行客 2024-10-21 15:40:54 4 0

Iphone 地图套件、大图像和地图大数据导致内存警告&崩溃

我正在开发一个应用程序,但现在我陷入困境。我认为这是由于缺乏早期规划造成的。实际上,我之前并不知道我会在我的应用程序中获取如此多的数据,这就…

半山落雨半山空 2024-10-21 13:03:27 1 0

将数据从一个sql表移动到另一个表的最有效方法是什么

目前,我有一个 SSIS 作业,它运行将数据从一台 sql 20008 机器移动到另一台机器。该作业从大约 6 个表中移动大约 200 万条记录。这大约需要 5-10 分…

じ违心 2024-10-21 04:27:18 4 0

使用 Django 和 MySQL 来存储和查找大型 DNA 微阵列结果

我正在尝试设置一个 Django 应用程序,它允许我存储和查找 DNA 微阵列的结果,其中包含约 500k 个独特探针,适用于大量受试者。 我一直在玩弄的模型设…

扭转时空 2024-10-20 01:38:44 2 0

处理选择框中的大量数据

您好,我正在使用 jQuery 并从我的一个 mySQL 表中检索“项目”。该表中有大约 20,000 个“项目”,它将用作我的表单中的搜索参数。所以基本上他们可…

素手挽清风 2024-10-18 08:12:04 2 0

哪种数据库引擎适合处理10^10条记录?

我打算使用 mysql 来存储我的数据集。 我有大约 10^8(亿)条记录: ID(整数)、x(浮点)、y(浮点)、z(浮点)、属性(浮动)。 哪种数据库引擎适…

谁的新欢旧爱 2024-10-17 07:24:11 3 0

MySQL 对大表的 UPDATE 查询

我有一个包含 21M 条记录的 MySQL 数据库,我试图对大约 1M 条记录进行更新,但查询失败,并显示错误 1206 (HY000):锁总数超过锁表大小。 是否可以在…

陌生 2024-10-15 23:16:17 4 0

处理非常大的数据集和及时加载

我有一个用 C# (.NET 4.0) 编写的 .NET 应用程序。在此应用程序中,我们必须从文件中读取大型数据集并以网格状结构显示内容。因此,为了完成此任务,…

人生戏 2024-10-14 06:31:56 1 0

如何存储和查询非常大的数据集(超出关系数据库)

我们目前面临的问题是如何有效地存储和检索非常大的数据集(数十亿)中的数据。我们一直在使用 mysql,并优化了系统、操作系统、raid、查询、索引等,…

最初的梦 2024-10-13 16:55:45 3 0

在 C 中保留一个用于成员资格测试的大列表

每一项都是一个由 17 个 32 位整数组成的数组。我或许可以为它们生成 120 位唯一的哈希值。 我有一个算法可以生成 9,731,643,264 个这样的项目,并且…

游魂 2024-10-12 18:16:58 3 0

使用LOAD DATA INFILE导入大数据文件时如何保持MYSQL性能?

我正在使用一个大型数据库(某些表有 500000000+ 行)。每天应使用 LOAD DATA INFILE 替换 3-1000 万行,每次导入大约 100 万行(因此使用 CRON 每天 …

一生独一 2024-10-11 01:28:29 3 0

收集、维护和确保庞大数据集准确性的最佳实践是什么?

我提出这个问题是为了寻求有关如何设计系统的实用建议。 amazon.com 和 pandora 等网站拥有并维护着巨大的数据集来运营其核心业务。例如,亚马逊(以…

眼藏柔 2024-10-08 20:34:29 3 0

无法通过 WCF 发送大消息

我使用 WCF 发送各种消息,特别是该消息大约有 3200000 字节加上一些字符串和标头。大paylode是通过另一个服务从主机检索的序列化对象,我试图在各个…

瑾兮 2024-10-06 18:29:41 5 0

C 编程文件读写技术

这是我第一次编写涉及文件读写的程序。实际上我想知道执行此操作的最佳技术是什么。因为当我和同学比较我的作品时,我们的逻辑是非常不同的。 你看,…

梦纸 2024-10-05 20:34:53 5 0
更多

推荐作者

烙印

文章 0 评论 0

singlesman

文章 0 评论 0

独孤求败

文章 0 评论 0

晨钟暮鼓

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文