如何运行 Dask pypy

问题描述

我是 dask 框架的新手,因此,如果我的问题听起来很傻,请原谅我。

目前,我使用 dask-distributed(来自 conda 的 2020.12.0)在 LocalCluster 中运行我的任务,速度相当快,但我担心的是与 dask 的 pypy 支持有关。正如我在 @mrocklin 的 GitHub 博客上看到的那样,其中说如果我们使用 pypy 来运行 dask 调度程序,那么我们可以获得大约 2X-5X 的加速。但我关心的是如何注册 dask-scheduler 以使用 pypy。 我还访问了 Dak 文档,但找不到所需的解决方案。目前,我使用 pypy (Blog) 创建了一个 conda 环境,但无法将 pypy 与 dask 一起使用。

如果注册调度程序需要一些脚本或修改(正如我们为 cython 写的那样),请告诉我。

在这方面给我建议,我们将不胜感激。

解决方法

暂无找到可以解决该程序问题的有效方法,小编努力寻找整理中!

如果你已经找到好的解决方法,欢迎将解决方案带上本链接一起发送给小编。

小编邮箱:dio#foxmail.com (将#修改为@)