使用正则表达式构建 &str 分词器
所有者 defensadev。
#7 in #分词器
每月25次下载用于 retoken
20KB 520 行
使用正则表达式和标记流构建 &str 分词器,以便在处理 &str 数据时获得类似 proc-macro2 / syn 的体验。
~0.6–1.1MB ~25K SLoC