regex-lexer

Rust 中基于正则表达式的词法分析器（标记化器）。

基本用法

enum Token {
    Num(usize),
    // ...
}

let lexer = regex_lexer::LexerBuilder::new()
  .token(r"[0-9]+", |num| Some(Token::Num(num.parse().unwrap())))
  .token(r"\s+", |_| None) // skip whitespace
  // ...
  .build();

let tokens = lexer.tokens(/* source */);

许可证

根据以下之一许可

• Apache 许可证 2.0 (LICENSE-APACHE 或 http://www.apache.org/licenses/LICENSE-2.0)
• MIT 许可证 (LICENSE-MIT 或 http://opensource.org/licenses/MIT)

由您选择。

贡献

除非您明确声明，否则任何有意提交以包含在您的工作中的贡献，如 Apache-2.0 许可证中定义的，应按上述方式双重许可，不附加任何其他条款或条件。