pandarallel:一个简单高效的工具,可在所有可用CPU上并行化Pandas操作

时间:2024-05-31 15:44:57
【文件属性】:

文件名称:pandarallel:一个简单高效的工具,可在所有可用CPU上并行化Pandas操作

文件大小:428KB

文件格式:ZIP

更新时间:2024-05-31 15:44:57

python parallel pandas Python

潘达拉尔·雷尔 没有并行化 具有并行化 安装 $ pip install pandarallel [--upgrade] [--user] 要求 在Windows中,Pandaral·lel将适用于当的Python会话( python , ipython , jupyter notebook , jupyter lab ,...)从执行 在Linux和macOS上,无需执行任何特殊操作。 警告 并行化具有成本(实例化新进程,通过共享内存发送数据等),因此,只有在要进行并行化的计算量足够高的情况下,并行化才有效。 对于很少的数据,使用并行化并不总是值得的。 例子 提供了每个API的示例。 基准 对于,这是使用和不使用Pandaral·lel的比较基准。 用于该基准测试的计算机: 操作系统:Linux Ubuntu 16.04 硬件:Intel Core i7 @ 3.40 GH


【文件预览】:
pandarallel-master
----MANIFEST.in(16B)
----pandarallel()
--------utils()
--------pandarallel.py(19KB)
--------__init__.py(60B)
--------data_types()
----LICENSE(1KB)
----setup.py(575B)
----README.md(6KB)
----docs()
--------standard_vs_parallel_4_cores.png(14KB)
--------progress_parallel_apply.gif(261KB)
--------progress_apply.gif(178KB)
--------examples.ipynb(10KB)
----tests()
--------test_inliner.py(13KB)
--------test_pandarallel.py(8KB)
----.gitignore(102B)

网友评论