aldebran97 / AC

AC自动机 文本相似检索 词库匹配 分词器

Geek Repo:Geek Repo

Github PK Tool:Github PK Tool

文本处理工具Java实现

【1】分词器

(1)目前支持n-gram分词器和DAG分词器,DAG分词器可用自己的语料库训练自己的分词器。

(2)通过多种策略对相似语义提供支持。

详细说明 README.md

【2】海量词库匹配

基于AC自动机实现海量词库的高效匹配,这是一种利用空间换时间的方法。其匹配时间与输入长度成正比,受词库数量影响极小。

详细说明和效率统计 README.md

【3】文本相似检索

实现了支持大量数据、多字段、多权重、相似语义的毫秒级相似检索的方法。

详细说明、效率统计和评分数据 见README.md

About

AC自动机 文本相似检索 词库匹配 分词器

License:The Unlicense


Languages

Language:Java 100.0%