parallel-processing

parallel-processing

文章 0 浏览 7

Java如何调用并行传递分块数据的方法

我有一个 API 调用一次只能接受 5 个子请求。因此,如果传入的子请求超过 10 个,我需要进行分块,然后根据 SLA 并行发送它们。 下面是一个非并行分块…

非要怀念 2025-01-11 16:50:45 1 0

使用 Pool 在 Python 中多重处理 CSV 块

我正在尝试在虚拟机上处理非常大的 CSV 文件(大约 6 GB 的 .gz 文件),为了加快速度,我正在研究各种多处理工具。我对此还很陌生,所以我正在不断学…

信愁 2025-01-11 16:17:38 1 0

对列表列表使用 mclapply

假设我有以下列表: users_days_delays <- list(users, days, delays) 有 users <- list(1, 2, 3) days <- list(1, 2, 3, 4) delays <- list(0, 100) …

一腔孤↑勇 2025-01-11 14:52:08 0 0

Python 多处理队列、管道、共享内存

我想并行运行两个 Python 进程,每个进程都可以随时向另一个进程发送数据并从另一个进程接收数据。 Python的multiprocessing包似乎对此有多种解决方案…

绿阴红影里的.如风往事 2025-01-11 09:41:07 1 0

使用 urlretrieve 并行下载

我经常需要批量下载和重命名 HTML 页面,不久前为此编写了这个简单的代码: import shutil import os import sys import socket socket.setdefaulttim…

好多鱼好多余 2025-01-11 05:54:11 0 0

C++ 中的 OpenMP 分段错误

我有一个非常简单的函数,可以计算 N by N 2D 矩阵(由指针 arr 表示)的内部条目数低于 a特定阈值,并更新通过引用传递的计数器 below_threshold: v…

枫林﹌晚霞¤ 2025-01-11 03:09:26 0 0

逻辑处理器未出现在 omnetpp 应用程序中

我需要在 omnetpp 应用程序中并行运行,我按照 parallel-simulation = true parsim-communications-class = cMPICommunications parsim-synchronizati…

↙温凉少女 2025-01-11 00:03:58 1 0

大数据集、ProcessPoolExecutor 问题

问题 - ProcessPoolExecutor 没有提高速度。由 tqdm 确认 了解了足够的 Python 知识,可以复制和/或编写一个可以运行的程序。每个文件大约需要 40 秒…

短叹 2025-01-10 22:47:35 0 0

R 中的多线程

我的一个项目需要取消一长串 URL(+300k)的缩短。 我附上下面的代码: # This is the function through which I extract an URL and check whether t…

演出会有结束 2025-01-10 18:54:53 1 0

并行写入两个列表(Python)

我尝试并行化 Python 中的底部 for 循环,因为对于 for 循环中的每次迭代,当前迭代都独立于所有其他迭代。 我找到了包“joblib”,但找不到如何同时…

随波逐流 2025-01-10 18:19:26 0 0

Java 并行计算向量

我想开始并行化我的 Java 代码。这是我的玩具问题。我有两个向量(双[])分别包含几个三角形的高度和底边。我有一个 Triangle 类,其中包含一个comput…

明媚如初 2025-01-10 18:02:33 0 0

为什么 ProcessPoolExecutor 一直运行

我尝试使用 python ProcessPoolExecutor 来计算一些 FFT 并行,请参见以下代码: import concurrent.futures import numpy as np from scipy.fft impo…

野味少女 2025-01-10 15:30:11 1 0

scikit-optimize中的ask函数可以并行化吗?

我正在使用 skopt (scikit-optimize) 包,使用 Ask-tell 语法。我在 Windows 机器上使用 python 3.7 询问函数调用需要很长时间(第一次调用约 1 分钟…

不必了 2025-01-10 14:14:12 0 0

将回溯划分为并行进程

我正在尝试使用 c 中的回溯过程来解决数独 25*25 问题。有没有办法将回溯分成多个并行进程,以便我可以将它们用作线程?…

瑶笙 2025-01-10 13:14:55 0 0

如何指示 OpenACC 在并行循环内顺序执行一条指令?

我想要 'r_m[i] /=lines_samples;'我的意思是,由一个线程执行一次。我是否必须添加特殊的编译指示或执行任何操作才能让编译器理解它? 这是代码: #p…

北凤男飞 2025-01-10 12:15:34 0 0
更多

推荐作者

卷耳

文章 0 评论 0

佚名

文章 0 评论 0

℉服软

文章 0 评论 0

qq_2gSKZM

文章 0 评论 0

凉宸

文章 0 评论 0

gyhjy

文章 0 评论 0

更多

友情链接

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文