- PySpark
它是用于Spark（分析型大数据引擎）的python API。 Spark已经在Hadoop平台之上发展，并且可能是最受欢迎的云计算工具。 它是用Scala编写的，但是pySpark API中的许多方法都可以 … 展开
知乎专栏
Pandas替代
- 并行/云计算— Dask，PySpark和Modin
- 高效内存利用— Vaex
- 不同的编程语言— Julia
zhuanlan.zhihu.com/p/347585743速度起飞！替代 pandas 的 8 个神库 - 腾讯云
- Dask。Dask 在大于内存的数据集上提供多核和分布式并行执行。在Dask 中，一个 …
- Modin。Modin 是一个多进程的 Dataframe 库，可以加速 Pandas 的工作流程。多进程意味 …
- Data Table。Datatable 是一个用于处理表格数据的 Python 库。与pandas 的使用上很类似， …
- Polars。Polars 是使用 Apache Arrow Columnar Format 作为内存模型在 Rust 中实现的速度 …
- Vaex。Vaex 也是一个开源的 DataFrame，它采用内存映射、高效的核外算法和延迟计算等 …
萝卜大杂烩 | Polars ，最强Pandas平替(内含实操代码， …
Polars是一个用于操作结构化数据的高性能DataFrame库，可以说是平替 pandas 最有潜质的包。 当然pandas目前作为 Python数据分析 的核心工具来说还是最强的，完全值得我们深入学习。
Pandas替代框架性能测 …
Pandas在大数据处理上的不足，制约了其在数据科学领域的进一步发展，尽管它在小数据集上处理非常灵活方便；探究Pandas在大数据时代的替代品，是算法工程师面临的重要问题。 当然，现在各类公有云和分析型数据库大行其道，大 …
Pandas替代框架性能测评：Polars、Modin、Pandarallel与pySpark
2024年1月17日 · 简介： 在数据科学和机器学习领域，Pandas是数据处理和分析的常用工具。 然而，对于大规模数据，Pandas可能会遇到性能瓶颈。 本文将对比评估Polars、Modin …
最强 Pandas 平替 -- Polars - CSDN博客
Polars 是一个用于操作结构化数据的高性能 DataFrame 库，可以说是平替 pandas 最有潜质的包。 Polars 其核心部分是用 Rust 编写的，但该库也提供了 Python 接口。
为Pandas加速，Dask, Ray, Modin, Vaex, RAPIDS哪个好呢？
Dask：low-level调度程序和高级别的部分Pandas替换，专门用于在计算群集上运行代码。 Ray：一个用于在处理器或集群之间并行化Python代码的底层框架。 Modin：由Dask或Ray驱 …
一个闪电般快速的 DataFrame 处理库，完美替代 Pandas - 51CTO
2023年12月8日 · Polars是一个快速的DataFrame库，旨在提供快速高效的数据处理能力，允许您在不影响性能的情况下处理大型数据集。 众所周知，SQL和Pandas是数据科学领域常用工 …
Pandas替代框架性能测 …
2022年5月15日 · Pandas在大数据处理上的不足，制约了其在 数据科学 领域的进一步发展，尽管它在小数据集上处理非常灵活方便；探究Pandas在大数据时代的替代品，是算法工程师面临的重要问题。 当然，现在各类 公有云 和分析型数 …
Polars库 | 最强 Pandas 平替来了 | 大邓和他的PYTHON
2023年12月27日 · Polars 是一个用于操作结构化数据的高性能 DataFrame 库，由于 Polars 是从0开始用Rust编写，紧密与机器结合。 其矢量化和列式处理可在现代处理器上实现缓存一致性算法和高性能。 如果您经常使用 pandas，那么用起 …