large-data-volumes

large-data-volumes

文章 0 浏览 4

将大型或复杂对象从 WCF 服务器发送到客户端

我的应用程序是近实时数据缓冲应用程序。 我正在使用网络。用于发送复杂对象的 TCP 绑定。 通过不同的回调函数向客户端缓冲数据。 只要我启用某些事件…

舞袖。长 2024-10-08 00:50:55 9 0

在 R 中绘制非常大的数据集

如何在 R 中绘制非常大的数据集? 我想使用箱线图、小提琴图或类似的图。内存中无法容纳所有数据。我可以逐步读入并计算制作这些图所需的摘要吗?如果…

回首观望 2024-10-05 22:46:06 8 0

NTFS 目录有 100K 条目。如果分布在 100 个子目录中,性能会有多少提升?

背景 我们有一个自行开发的文件系统支持的缓存库。目前,由于条目数量较多(例如多达 100,000 个),我们在一次安装中遇到了性能问题。问题:我们将所…

彩扇题诗 2024-10-05 16:24:28 8 0

想法:如何使用基于 GPU 的直接体积渲染以交互方式渲染大型图像系列

我正在寻找如何将 30+gb、2000+ 彩色 TIFF 图像系列转换为能够使用基于 GPU 的体积渲染(使用 OpenCL / OpenGL / GLSL)实时可视化(交互式帧速率)的…

岁月如刀 2024-10-03 14:40:25 10 0

大网站显示的数据较少

我负责管理一个大型网站,并一直在研究其他类似的网站。我特别看了一下 flickr 和 deviantart。我注意到,虽然他们说他们有大量数据,但他们只显示了…

云朵有点甜 2024-10-01 08:08:00 7 0

从 SQL Server 中非常大的表 (600M) 获取子集 (200M) 的最快方法

我们面临以下问题,我们正在努力想出最好的解决方案。 我们使用的是 SQL Server 2008。我们有一个包含超过 6 亿条记录、大约 25 列的表。其中一列是 I…

遗心遗梦遗幸福 2024-09-28 06:53:09 4 0

ORM 的使用可能涉及数十亿条记录

前几天我在想这个问题,像 Twitter 这样的应用程序要处理数百万用户。我在想“跟随”的功能如何工作,数据库中的最大用户数可以跟随数据库中的最大用…

少女净妖师 2024-09-26 18:04:54 7 0

Web 服务中序列化的成本

我的下一个项目涉及在企业框架内创建数据 API。这些数据将由在不同软件平台上运行的多个应用程序消耗。虽然我的同事普遍喜欢 SOAP,但我想使用 RESTfu…

独自←快乐 2024-09-26 15:51:59 10 0

在巨大的数据集上计算令牌计数器

我需要检查大量文本(> 2 Tb,维基百科完整转储)并为每个看到的标记保留两个计数器(每个计数器根据当前事件递增)。我需要对这些计数器执行的唯一操…

梦里寻她 2024-09-26 15:23:50 8 0

使用 Apache CXF 传输大消息

我正在编写 CXF WS 来上传一些大文件 - 最多 1GB。在大多数情况下,它们不会> 10-15MB,但问题是加载文件并使用标准绑定将其作为常规 byte[] 发送是无…

温折酒 2024-09-26 06:03:14 7 0

Parallel.ForEach 在处理极大的数据集时抛出异常

我的问题集中在一些 Parallel.ForEach 代码上,这些代码过去可以正常工作,现在我们的数据库已经增长到原来的 5 倍,它几乎经常崩溃。 Parallel.ForEa…

泅人 2024-09-25 22:27:00 9 0

向具有超过 1500 万条记录的 SQL 列添加自动编号

我需要向 SQL 2005 中包含大约 1500 万条记录的现有表添加一个自动编号列。 您认为这需要多长时间?更好的方法是什么?…

清君侧 2024-09-25 06:52:55 7 0

跨多个数据库的 SQLite 视图。这样可以吗?有更好的办法吗?

使用 SQlite 我有一个大型数据库,分为几年: DB_2006_thru_2007.sq3 DB_2008_thru_2009.sq3 DB_current.sq3 它们都有一个名为 hist_tbl 的表,其中包…

执手闯天涯 2024-09-24 20:00:41 6 0

将 SQL Server 数据库中超过十亿行的一列复制到另一列

数据库:SQL Server 2005 问题:将十亿以上的值从同一个表中的一列复制到另一列 行。 test_table (int id, bigint bigid) 尝试的事情1:更新查询 upda…

红衣飘飘貌似仙 2024-09-24 16:34:17 6 0

如何建立一个单词表

所以现在我想制作爱沙尼亚语单词列表~大约 2000 万个小写的独特单词。要获取单词列表的输入,可以使用爱沙尼亚语料库。语料库文件采用文本编码倡议 (T…

黑色毁心梦 2024-09-24 02:09:16 5 0
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文