Lib.rs

› 文本处理 › morsels_common
#ascii #tokenizer #morsels #basic #intended #language #morsels-indexer

morsels_lang_ascii

为morsels提供的ASCII基本分词器

作者：Ang Ze Yu

34个版本 (7个重大更新)

0.7.3 2022年10月24日
0.6.2 2022年10月8日
0.2.1 2022年7月24日
0.0.11 2022年1月5日
0.0.6 2021年12月30日

#1805 in 文本处理

每月下载量 28次
在4个crate中使用（直接使用3个）

MIT许可证

145KB
2.5K SLoC

Morsels语言包

这是一个为morsels_indexer命令行工具提供的分词crate，不建议直接使用。

依赖

~215–740KB
~12K SLoC