#data-pipeline #pipeline #etl #data #aqueducts #cli-applications #cli

app aqueducts-cli

CLI 应用程序,用于运行为 aqueducts 框架定义的管道

9 个不稳定版本 (3 个破坏性更新)

0.4.0 2024年7月28日
0.3.2 2024年7月6日
0.3.0 2024年6月24日
0.2.2 2024年5月27日
0.1.2 2024年5月22日

#1440命令行工具

Download history 116/week @ 2024-05-15 540/week @ 2024-05-22 64/week @ 2024-05-29 12/week @ 2024-06-05 2/week @ 2024-06-12 124/week @ 2024-06-19 27/week @ 2024-06-26 198/week @ 2024-07-03 24/week @ 2024-07-10 2/week @ 2024-07-17 197/week @ 2024-07-24 54/week @ 2024-07-31

每月290 次下载

自定义许可证

110KB
1.5K SLoC

Aqueducts CLI

一个示例 CLI 应用程序,利用 Aqueducts 框架运行在 YAML 中声明的 ETL 管道。

安装

# install with default features (s3, gcs, azure)
cargo install aqueducts-cli

# install with odbc support
cargo install aqueducts-cli --features odbc

# install with s3 support only
cargo install aqueducts-cli --no-default-features --features s3

运行

aqueducts --file ./example.yml --param key1=value1 --param key2=value2  

依赖项

~56–79MB
~1.5M SLoC