在 dask.distributed 集群中的计算机之间共享 python 模块

Question

我有一个 ssh dask.distributed集群，其中一台主计算机包含我的脚本的所有模块，另一台只有几个模块，当然包括 dask 本身。

是否可以更改另一台计算机的sys路径，以便它也在主计算机中查找模块？ 当然，我可以简单地通过 sftp 上传它们，但是因为我一直在制作很多模块，重复做会很烦人。

Answer 1

使用 NFS 或 SSH 远程安装等网络解决方案可以实现这样的事情，但这是一个相当大的领域，超出了 Dask 本身的 scope。 如果幸运的话，这里会出现其他答案，其他人已经解决了类似的问题，但更可能的是复制是更简单的解决方案。