#apache-arrow #query-execution #data-access #arrow #query #sql-query #sql

datafusion-data-access

通用数据访问层,目前主要基于对象存储接口

3 个稳定版本

10.0.0 2022年7月15日
9.0.0 2022年6月13日
8.0.0 2022年5月16日

#16 in #query-execution

Download history 36/week @ 2024-03-11 9/week @ 2024-03-18 16/week @ 2024-03-25 84/week @ 2024-04-01 4/week @ 2024-04-08 8/week @ 2024-04-15 29/week @ 2024-04-22 8/week @ 2024-04-29 5/week @ 2024-05-06 15/week @ 2024-05-13 2/week @ 2024-05-20 7/week @ 2024-05-27 21/week @ 2024-06-03 11/week @ 2024-06-10 7/week @ 2024-06-17 13/week @ 2024-06-24

每月 53 次下载
3 个 crate 中使用(通过 datafusion-objectstore-s3

Apache-2.0

22KB
361

数据融合数据访问层

数据融合 是一个可扩展的查询执行框架,使用 Rust 编写,使用 Apache Arrow 作为其内存格式。

该 crate 是 DataFusion 的子模块,提供用于访问数据的异步 API,无论是远程还是本地。目前,它基于对象存储接口。在未来,此模块可能包括访问数据库或流式数据的接口。

依赖项

~6–17MB
~220K SLoC