问题标签 [modin]

For questions regarding programming in ECMAScript (JavaScript/JS) and its various dialects/implementations (excluding ActionScript). Note JavaScript is NOT the same as Java! Please include all relevant tags on your question; e.g., [node.js], [jquery], [json], [reactjs], [angular], [ember.js], [vue.js], [typescript], [svelte], etc.

0 投票
1 回答
114 浏览

python - 将 Prophet 或 Auto ARIMA 与 Ray 结合使用

关于雷,我无法找到明确的答案。Ray 是一个用于数据处理和训练的分布式框架。为了使它以分布式方式工作,必须使用 Modin 或 Ray 支持的其他一些分布式数据分析工具,以便数据可以在整个集群上流动,但是如果我想使用像 Facebook 的 Prophet 或 ARIMA 这样的模型呢?熊猫数据框作为输入?当我使用 pandas 数据框作为模型函数的参数时,它会只在单个节点上工作,还是有可能的解决方法让它在集群上工作?

0 投票
1 回答
29 浏览

python - 将 findall 的 Pandas 结果转换为单行

你好,我有 csv 文件,我使用 pandas,我的问题是当我使用 pandas.Series.str.findall 时。我不会在调用 findall 之后将结果的值(什么是数组)保存到 csv 中的行

这是我的代码

我的输入 csv 看起来像

以及我想要什么

0 投票
0 回答
67 浏览

pandas - 使用 modin pandas 时无法捕获 Ray 任务错误

我试图在将浮动列转换为字符串列之前检查它是否实际上是一个 int 列(确切的用例:123.00 需要为 123,'123-4' 需要保持为 '123-4')。

代码:

但是,没有捕获到异常

ValueError:int() 的无效文字,基数为 10:'123-4'

ray.exceptions.RayTaskError(ValueError): ray::apply_func()

我试过用except:, except ValueError:,

更新:作为 github 问题呈现:https ://github.com/modin-project/modin/issues/3966

0 投票
1 回答
74 浏览

python - 从稀疏矩阵导入时出现 Modin AttributeError

我正在尝试使用 Modin 包导入使用 scipy 创建的稀疏矩阵(特别是 scipy.sparse.csr_matrix)。

调用方法:

我收到以下属性错误:

在使用原始的 pandas API 时,它可以工作。

有类似问题的人吗?感谢您的支持

0 投票
1 回答
52 浏览

python - Pandas Modin 光线库无法启动

我正在尝试使用modin加速我的 pandas 数据处理

我收到以下警告和错误:

虽然我已经清楚地重新运行了代码,但它们之间的时间超过了 30 秒。

当我在安装 modin 和 ray 后第一次运行它时,它运行得相当好,只有以下警告:

然后我将代码修改为:

我收到此错误:

当我针对这个问题查看 Github 时,结果发现这是一个错误

如何解决这些警告和错误?

编辑:我重新启动了允许重新运行一个周期的 pycharm 环境。这表明它是 Pycharm/环境问题?

我该如何解决这个问题?

0 投票
0 回答
44 浏览

python - 制作熊猫数据框的KeyError

我正在尝试使用 pandas 数据框找到函数的方程。这在过去在其他项目上也有效,但是,现在似乎没有任何效果。

我知道可能有更简单的方法来解决这个问题,但我需要它以某种方式工作。

xVerdier 是图的 x 值列表

fDer 是所述图的 y 值列表

这是错误信息

0 投票
1 回答
23 浏览

python - 如何将类型:pandas.core.frame.DataFrame 替换为类型:modin.pandas.dataframe.DataFrame

我尝试在代码中用 modin pandas 替换 pandas:

但错误是:

我应该如何更改代码来解决问题?