使用旧的 Rust 2015

0.1.1	2018年7月21日
0.1.0	2015年11月1日

在国际化 (i18n) 中排名第 200

每月下载量 1,313
在 2 crates 中使用

MIT 许可证

36KB
178 行

rust-tinysegmenter

Rust 实现的 TinySegmenter，这是一个紧凑型日语分词器。

安装

将以下内容添加到项目的 Cargo.toml 中

[dependencies]
tinysegmenter = "0.1"

并使用 extern crate 导入

extern crate tinysegmenter;

let tokens = tinysegmenter::tokenize("私の名前は中野です");
println!("{}", &tokens.join("|")); // 私|の|名前|は|中野|です

许可协议：MIT

~22KB