cost 396 ms
如何通过并行化提高python代码的处理速度 - How to increase processing speed of python code through parallelization

我目前有一个包含以下部分的顺序代码(所有部分都正确封装和隔离在 class 方法等中): 来自.network stream 和 opencv VideoCapture的帧捕获用yolov7处理图片到pytorch(用cuda) yolov7的经典处理 output 每 X 帧完成一次超重经典处理 ...

为什么 geometryFromEdges 在 parfor 中使用时会出现解析错误? - Why does geometryFromEdges give a parse error when used in parfor?

我想使用 Matlab 中的并行计算工具箱在线程上并行求解多个 PDE。我有以下代码: 这会导致以下错误: 使用 pde.EquationModel/geometryFromEdges 时出错指定的超类“pde.GeometricModel”包含解析错误,无法在 MATLAB 的搜索路径中找到,或 ...

在 C++ 的并行 PRNG 中取得领先 - Jumping ahead in parallelised PRNGs in C++

我正在实施蒙特卡洛模拟,我需要运行一些动力学的多个实现,然后对所有模拟的最后 state 取平均值。 由于实现的数量很大,我使用 OpenMP 并行运行它们。 每个实现都从相同的初始条件开始,然后在每个时间步以给定的概率发生一个过程,并确定我从均匀分布中抽取随机数的过程。 我想确保所有模拟在统计上都 ...

如何在 slurm 中使用不同的数据在不同的节点中运行 a.sh? - How to run a .sh in different nodes using different data in slurm?

我是 Slurm 的初学者,我需要一些帮助来解决以下问题。 我制作了 a.sh,其中,最初,一个 matlab 脚本创建了两个 arrays(基于参数 i 的值)。 然后,那些 arrays 被 Fortran 程序使用,计算其他 arrays 的数量。 我希望针对 i 的 10 个不同值(在 1 ...

并行运行多个 AWS sync 命令以将数据从多个源 s3 复制到多个目标 s3 - Run multiple AWS sync command in parallel to copy data from multiple source s3 to multiple destination s3

我想将数据从 A 桶复制到 M 桶,从 B 桶复制到 N 桶等等。 为了加快这个过程,我像这样并行运行同步命令 但是使用此命令,来自所有存储桶 (A、B、C、D、E、F) 的数据将发送到每个目标存储桶。 有人可以帮我解决吗? 另外,还有其他方法可以加快 cp/sync 过程吗? ...

在 azure docker 管道上并行运行 mocha 测试 - Run mocha tests in parallel on azure docker pipeline

为什么当我通过 azure 管道并行运行 mocha 测试时,它们总是一个接一个地执行? 我已经尝试过管道中有和没有 docker 但没有运气。 我也尝试过使用本地构建和推送的图像,然后从 Azure 管道运行该图像......仍然没有运气。 我也通过 GitHub 操作得到了同样的意外结果。 但是 ...

我如何与 OMP 并行化,具有两个矩阵的数据依赖性 - How can I parallelize with OMP, with data dependencies for two matrices

下面显示的代码用于通过 Gauss Jordan 方法计算矩阵的逆,将 memory 次访问减半。 这改进了单线程执行时间。 我遇到的问题是创建了新的数据依赖性,阻止了我并行化。 例如,对于循环 K 或循环 i(具有条件 if i.=k.... 的循环)。 我想我们将不得不对代码进行转换以消除数据依 ...

在 ST 中并行计算可变向量 - Parallelize computation of mutable vector in ST

如何使在 ST 中完成的计算并行运行? 我有一个需要通过随机访问填充的向量,因此使用了 ST,并且计算在单线程下正确运行,但一直无法弄清楚如何使用多个内核。 由于向量中索引的含义,需要随机访问。 有 n 个事物,在 n 个事物中每一种可能的选择方式在向量中都有一个条目,例如选择 function。这 ...

在 C# 中并行运行两个任务 - Running two taks parallely in C#

我需要计算两个大文件(大约 10GB)的哈希值来检查是否相等。 目前我一次计算一个 hash,但为了节省大量时间,我想到同时并行计算两个哈希值。 这是我的方法: 因为这是我第一次尝试做这样的事情,我不太确定我写的代码是否像我想象的那样工作,因为我已经看到在其他线程中通常使用 async 方法和 aw ...

在 ansible 剧本的任务中循环执行命令 - looping over a command in a task in ansible playbook

我有以下剧本, hostinfo.json 看起来像这样, 我需要同时在两台机器上运行上述命令。 请注意,这是一个单独的命令,并且是同一任务的一部分。 我们如何实现这一点,以便命令同时运行 abc 和 xyz,然后在完成后继续执行下一个任务。 我试过这个, 但是剧本会等待在 abc 上运行的 im ...

Julia,如何创建一个由几个可选宏组成的宏? - In Julia, how to create a macro consisting of several optional macros?

在 Julia 中,我正在尝试不同的并行化库,以使我的程序性能更高,并检查 memory 消耗是否与没有并行化时相同。 不幸的是,这会导致大量重复。 有没有一种方法可以组织我的代码,以便我只编写一次算法,然后一些带有参数的宏决定代码的并行化方式? 我的问题与这个类似。 例如,我的 MWE 回报 所 ...

在 R 中创建“FORK”集群并注册 DoSNOW 时出错 - Error when making a "FORK" cluster and registerDoSNOW in R

我有一个并行进程,我在 R 工作了一段时间,在 PSOCK 上使用 FORK 集群(由于 PSOCK 的速度和 memory 开销)并使用 registerDoParallel 注册后端。 我想包含一个进度条以查看我的代码执行了多远(有时是否可以运行数小时或数天,具体取决于迭代次数)并查看是否有任何 ...

如何将原子计数器添加到 powershell ForEach -Parallel 循环 - How do I add an atomic counter to a powershell ForEach -Parallel loop

在这个问题中,解释了如何添加到并发 ThreadSafe 集合Powershell:如何将结果添加到数组(ForEach-Object -Parallel) 我有一个更简单的用例,我只想增加一个值。 (整数)。 是否可以使用某种原子 Integer 数据类型在 Powershell 中执行? ...

可以在多个内核上运行 fsolve(串行)的多次迭代吗? - Possible to run multiple iterations of fsolve(in serial) on multiple cores?

我正在尝试使用 Matlab 的粒子群优化来解决复杂的优化问题。 PSO 中调用的目标 function 使用 matlab 的 fsolve() function 解决内部优化问题,其中来自 fsolve 的解决方案用于计算 PSO 将尝试最小化的 function 评估。 通常,在没有 PS ...

分组 dataframe 并使用 Python/Dask/multiprocessing 以并行方式对结果矩阵执行操作? - Grouping a dataframe and performing operations on the resulting matrix in a parallelized manner using Python/Dask/multiprocessing?

我正在做一个项目,我需要根据分子的 ID 对数据库中的分子进行分组,并对生成的矩阵执行操作。 我正在使用 Python,我想通过并行处理来提高性能。 我目前正在从 SDF 文件加载分子并将它们存储在 Pandas dataframe 中。每个分子都有一个 ID、一个唯一的 Pose ID 和一个唯 ...

多个任务并行 - 一个部分“一个接一个” - Multiple Tasks in parallel - One Section "one after another"

我有几个任务并行运行相同的方法。 对于此方法的特定部分。 我希望任务一个接一个地到 go(不是并行的)。 背景:在特定部分,我打开另一个表单,用户在其中输入密码。 我不希望用户为每个任务输入密码。 第一个应该保存在全局字符串中并由其他任务使用。 我试图将这部分放入调用中。 Input-Messa ...


 
粤ICP备18138465号  © 2020-2024 STACKOOM.COM