13 个版本 (破坏性更新)

0.26.0 2023 年 10 月 11 日
0.24.2 2023 年 8 月 26 日
0.22.0 2023 年 6 月 25 日
0.18.0 2023 年 3 月 30 日
0.12.1 2022 年 9 月 25 日

#35#kerberos


5 crate 中使用

MIT 许可证

485KB
11K SLoC

Crates.io docs.rs MIT licensed

什么是 Netidx

Netidx 是一种中间件,它允许在一个程序中发布一个值,如 42,并在另一个程序中消费它,无论是同一台机器还是通过网络。

值在分层命名空间中具有全局唯一的名称。例如,我们发布的 42 可能被命名为 /the-ultimate-answer(通常我们不会直接在根目录下放置值,但在这个例子中是合适的)。网络上的任何其他程序都可以通过该名称引用 42,并在 /the-ultimate-answer 发生变化的情况下(不太可能)收到更新。

与其他系统的比较

  • 类似于 LDAP

    • Netidx 跟踪值的分层目录
    • Netidx 在一定程度上是可浏览和可查询的
    • Netidx 支持身份验证、授权和加密
    • Netidx 值可读也可写。
    • 可以通过在较小系统之间添加引用来构建更大的 Netidx 系统。解析器服务器集群可能有父级和子级。
  • 不同于 LDAP

    • 在 Netidx 中,解析器服务器(如 slapd)只保留具有数据的发布者的位置,而不是数据本身。
    • 没有 '条目'、'属性'、'ldif 记录' 等。系统中的每个名称要么是结构性的,要么是一个单个值。类似条目的结构是通过层次结构创建的。因此,也没有模式检查。
    • 可以订阅一个值,如果在它变化时将立即收到通知。
    • 没有数据上的全局过滤器,例如,不能查询 (&(cn=bob)(uid=foo)),因为 netidx 不是一个数据库。是否以及存在哪些查询机制取决于发布者。然而,可以查询结构,例如,/foo/**/bar 会返回以 bar 结尾的任何位于 foo 下的路径。
  • 类似于 MQTT

    • Netidx 值是发布/订阅
    • 单个 Netidx 值可能有多个订阅者
    • 所有 Netidx 订阅者在他们订阅的值发生变化时都会收到更新。
    • Netidx 消息传递是可靠和有序的。
  • 不同于 MQTT

    • 在 Netidx 中,没有集中的消息代理。消息直接从发布者流过 TCP 到订阅者。解析器服务器只存储发布值的发布者/的地址。

有关更多详细信息,请参阅netidx 书籍

以下是一个示例服务,该服务发布CPU温度,以及相应的消费者,用于消费数据。

发布者

use netidx::{
    publisher::{Publisher, Value, BindCfg},
    config::Config,
    resolver::Auth,
    path::Path,
};
use tokio::time;
use std::time::Duration;
use anyhow::Result;

fn get_cpu_temp() -> f32 { 42. }

async fn run() -> Result<()> {
    // load the site cluster config. You can also just use a file.
    let cfg = Config::load_default()?;

    // no authentication (kerberos v5 is the other option)
    // listen on any unique address matching 192.168.0.0/16
    let publisher = Publisher::new(cfg, Auth::Anonymous, "192.168.0.0/16".parse()?).await?;

    let temp = publisher.publish(
        Path::from("/hw/washu-chan/cpu-temp"),
        Value::F32(get_cpu_temp())
    )?;

    loop {
        time::sleep(Duration::from_millis(500)).await;
        let mut batch = publisher.start_batch();
        temp.update(&mut batch, Value::F32(get_cpu_temp()));
        batch.commit(None).await;
    }
    Ok(())
}

订阅者

use netidx::{
    subscriber::{Subscriber, UpdatesFlags},
    config::Config,
    resolver::Auth,
    path::Path,
};
use futures::{prelude::*, channel::mpsc};
use anyhow::Result;

async fn run() -> Result<()> {
    let cfg = Config::load_default()?;
    let subscriber = Subscriber::new(cfg, Auth::Anonymous)?;
    let path = Path::from("/hw/washu-chan/cpu-temp");
    let temp = subscriber.subscribe_one(path, None).await?;
    println!("washu-chan cpu temp is: {:?}", temp.last());

    let (tx, mut rx) = mpsc::channel(10);
    temp.updates(UpdatesFlags::empty(), tx);
    while let Some(mut batch) = rx.next().await {
        for (_, v) in batch.drain(..) {
            println!("washu-chan cpu temp is: {:?}", v);
        }
    }
    Ok(())
}

发布的事物始终具有值,新订阅者最初接收这些值。此后,订阅是一个无损失的有序流,就像TCP连接一样,只是传输的单位不再是字节publisher::Value。由于订阅者可以将值写回发布者,因此连接是双向的,就像Tcp流一样。

值包括许多有用的原语,包括零拷贝的字节缓冲区(使用酷炫的bytes crate),因此您可以轻松使用netidx高效地发送任何您喜欢的消息。然而,建议您坚持使用原语,并以层次结构中多个发布的值来表达结构,因为这样可以使您的系统更容易被发现,并且效率也很高。

netidx包括对kerberos v5(包括Active Directory)的可选支持。如果启用,所有组件都将进行解析器、订阅者和发布者之间的相互身份验证,以及所有传输数据的加密。

在krb5模式下,解析器服务器维护和强制实施整个命名空间的一组授权权限。系统管理员可以集中执行谁可以发布什么,以及谁可以订阅什么。

依赖关系

~26–61MB
~1M SLoC