1

upload_file当多个用户上传 ( ) 相同 python 文件或 zip 内容的略有不同版本时，我特别有兴趣避免冲突。

看起来这不是一个真正受支持的用例，因为工作进程是长时间运行的，并且会受到其他人的环境更改/添加的影响。

我喜欢这个库，它可以轻松地按需进行本地/远程上下文切换，因此希望能深入了解我们可能拥有的选项，即使这意味着对于特定于用户的工作进程需要一些类似部署的无缝步骤。

4

1 回答 1

0

通常，拥有不同用户环境的解决方案是在 Kubernetes、Marathon 或 Yarn 等其他作业调度程序之上即时启动和销毁不同 Dask 工作人员/调度程序的网络。

如果您需要重用同一组 dask 工作人员，那么您也可以小心地workers=一致指定关键字，但这很容易出错。

于 2017-10-08T12:41:30.983 回答