Xorbits - 加速 Python 数据处理和 AI

加速 Python 数据处理和 AI

简单易用 & 速度超快

Xorbits 是一个 Python 数据处理和 AI 的加速框架，它能加速许多知名 Python 库，包括 numpy、pandas、scikit-learn 等。Xorbits 利用多核和 GPU 来加速计算，支持单机加速，也可以轻松扩展到成千台机器，以支持处理 TB 级数据。

主要特点

最快速的分布式数据科学计算框架

Xorbits 可以利用多核或 GPU 来加速单台机器上的计算，或扩展到数千台机器以支持处理数 TB 的数据。

兼容 numpy、pandas 等接口，除了 import 替换，其他代码无需改动

Xorbits 能轻松支持处理 TB 级大规模数据

Xorbits 和其他流行的分布式数据科学相比，性能最强

Xorbits 支持跑在许多环境，笔记本、集群、Kubernetes、云平台等等

只需用 Xorbits 替换导入，例如将 import pandas 替换为 import xorbits.pandas。原有代码就有了超快的计算速度并拥有了处理大规模数据的能力。

Xorbits 可以处理数 TB 的数据。 Xorbits 支持多种数据格式，包括 Parquet、CSV、数据库、HDF5、Zarr 等。

Xorbits 的愿景是加速整个 Python 数据科学世界，不仅 pandas 在 Xorbits 中得到加速，许多其他许多流行库，诸如 numpy、scikit-learn 等，也得到加速。