#duck-db #native-bindings #ffi

sys libduckdb-sys-queryscript

libduckdb 库的本地绑定,C API

4 个版本

0.7.4 2023年3月8日
0.7.3 2023年3月7日
0.7.2 2023年3月7日
0.7.1 2023年3月7日

#1520数据库接口

Download history 6/week @ 2024-04-05 3/week @ 2024-05-17 1/week @ 2024-05-24 1/week @ 2024-06-07 2/week @ 2024-06-14 3/week @ 2024-06-21

每月 60 次下载
2 个 Crates 中使用(通过 duckdb-queryscript

MIT 许可证

3.5MB
10K SLoC

duckdb-rs

Downloads Build Status dependency status codecov Latest Version Docs

duckdb-rs 是 Rust 使用 duckdb 的舒适包装器。它试图提供一个类似于 rusqlite 的接口。实际上,最初的代码甚至这个 README 都是 fork 自 rusqlite,因为 duckdb 也试图提供一个与 sqlite3 兼容的 API。

use duckdb::{params, Connection, Result};

// In your project, we need to keep the arrow version same as the version used in duckdb.
// Refer to https://github.com/wangfenjin/duckdb-rs/issues/92
// You can either:
use duckdb::arrow::record_batch::RecordBatch;
// Or in your Cargo.toml, use * as the version; features can be toggled according to your needs
// arrow = { version = "*", default-features = false, features = ["prettyprint"] }
// Then you can:
// use arrow::record_batch::RecordBatch;

use duckdb::arrow::util::pretty::print_batches;

#[derive(Debug)]
struct Person {
    id: i32,
    name: String,
    data: Option<Vec<u8>>,
}

fn main() -> Result<()> {
    let conn = Connection::open_in_memory()?;

    conn.execute_batch(
        r"CREATE SEQUENCE seq;
          CREATE TABLE person (
                  id              INTEGER PRIMARY KEY DEFAULT NEXTVAL('seq'),
                  name            TEXT NOT NULL,
                  data            BLOB
                  );
        ")?;

    let me = Person {
        id: 0,
        name: "Steven".to_string(),
        data: None,
    };
    conn.execute(
        "INSERT INTO person (name, data) VALUES (?, ?)",
        params![me.name, me.data],
    )?;

    // query table by rows
    let mut stmt = conn.prepare("SELECT id, name, data FROM person")?;
    let person_iter = stmt.query_map([], |row| {
        Ok(Person {
            id: row.get(0)?,
            name: row.get(1)?,
            data: row.get(2)?,
        })
    })?;

    for person in person_iter {
        println!("Found person {:?}", person.unwrap());
    }

    // query table by arrow
    let rbs: Vec<RecordBatch> = stmt.query_arrow([])?.collect();
    print_batches(&rbs).unwrap();
    Ok(())
}

关于构建 duckdb 和 libduckdb-sys 的说明

libduckdb-sys 是一个与 duckdb-rs 分离的 crate,它提供了 DuckDB C API 的 Rust 声明。默认情况下,libduckdb-sys 尝试使用 pkg-config 在您的系统上查找已存在的 DuckDB 库,或者为 MSVC ABI 构建使用 Vcpkg 安装。

您可以通过多种方式调整此行为

  • 如果您使用 bundled 功能,libduckdb-sys 将使用 cc crate 从源代码编译 DuckDB 并链接到它。此源代码嵌入在 libduckdb-sys crate 中,由于我们仍在开发中,我们将定期更新它。在我们更加稳定之后,我们将使用来自 duckdb 的稳定发布版本。这可能是最简单的构建问题解决方案。您可以通过在您的 Cargo.toml 文件中添加以下内容来启用此功能
    [dependencies.duckdb]
    version = "0.1"
    features = ["bundled"]
    
  • 当链接到系统上现有的 DuckDB 库(因此不使用任何 bundled 功能)时,您可以设置环境变量 DUCKDB_LIB_DIR 指向包含库的目录。您还可以设置环境变量 DUCKDB_INCLUDE_DIR 指向包含 duckdb.h 的目录。
  • 安装 duckdb 开发包通常就足够了,但 pkg-configvcpkg 的构建助手有一些额外的配置选项。使用 vcpkg 的默认设置为动态链接,必须在构建之前设置环境变量 VCPKGRS_DYNAMIC=1

绑定生成

我们使用 bindgen 从 DuckDB 的 C 头文件生成 Rust 声明。 bindgenrecommends 作为使用该库的库构建过程的一部分来运行。我们尝试了这种方法(具体为 duckdb 0.10.0),但它有一些令人烦恼的问题。

  • 构建 libduckdb-sys(因此 duckdb)的构建时间显著增加。
  • 运行 bindgen 需要一个相对较新的 Clang 版本,许多系统默认并未安装。
  • 运行 bindgen 还需要 DuckDB 的头文件存在。

因此,我们尝试通过提供预生成的 DuckDB 绑定来避免在构建时运行 bindgen

如果您使用 bundled 功能,您将获得预生成的 DuckDB 版本的绑定。如果您想在构建时运行 bindgen 来生成自己的绑定,请使用 buildtime_bindgen Cargo 功能。

贡献

请参阅 Contributing.md

清单

  • 运行 cargo fmt 确保您的 Rust 代码格式正确。
  • 确保 cargo clippy --all-targets --workspace --features bundled 无警告通过。
  • 确保 cargo test --all-targets --workspace --features bundled 报告没有失败。

TODOs

  • 重构 ErrorCode 部分,它是从 rusqlite 借用的,我们应该有自己的
  • 支持更多类型
  • 更新 duckdb.h
  • 调整代码示例和文档
  • 删除未使用的代码/函数
  • 添加 CI
  • 发布到 crate

许可

DuckDB 和 libduckdb-sys 都可在 MIT 许可下使用。有关更多信息,请参阅 LICENSE 文件。

无运行时依赖