polars 基于rust 的dataframe 框架

polars 基于rust 开发，使用了arrow 列式存储格式实现的dataframe 框架

支持的特性

• lazy ｜ eager 之行
• 多线程
• SIMD
• 查询优化
• 强大的表达式api
• 混合streaming （可以支持大于内存的数据）
• 支持各种语言调度（python，rust，nodejs，r）

说明

因为基于了rust 以及arrow 开发，polars 性能很不错，同时支持不少数据处理能力，对于sql 也是支持的

参考资料

https://github.com/pola-rs/polars
https://pola-rs.github.io/polars/user-guide/#philosophy
https://duckdblabs.github.io/db-benchmark/
https://www.dremio.com/blog/10-data-quality-checks-in-sql-pandas-and-polars/
https://pola-rs.github.io/polars/user-guide/migration/pandas/
https://pola-rs.github.io/polars/user-guide/migration/spark/#example-2-combining-two-heads