Releases: hankcs/HanLP
Releases · hankcs/HanLP
v1.2.1
v1.2.0新增TnT分词器
- 分词器支持数词和数量词识别
- 消除CRF分词对句子开头的词语的错误合并
- 实现了一个基于HMM2-Trigram字符序列标注的分词器
- 加入了一些防止缓存不兼容的安全措施
- 词典减肥,新增TnT模型:data-for-1.2.0.zip
- 重构分词器
v1.1.5内存优化
- 词典由AhoCorasickDoubleArrayTrie降级为DoubleArrayTrie,内存占用减少一半
- 所以词典的缓存与旧版不兼容,请删除缓存或者下载data-for-1.1.5.zip
- 为减小配置难度,提供内置了mini数据包的Portable版,零配置,可以通过Maven直接引入:
<dependency>
<groupId>com.hankcs</groupId>
<artifactId>hanlp</artifactId>
<version>portable-1.1.5</version>
</dependency>