中文分词_中文分词技术文章

中文分词

0 人感兴趣 · 7 次引用

关注

03-31

当前的中文搜索引擎都支持拼音搜索，但是在使用过程中会出现各种各样的场景，当前的自定义插件，用来处理在拼音搜索过程中如果遇到长拼音序列的情况，应该如何进行处理。

2022-04-06

实战项目地址newbeemall，集成RediSearch，代码开源已上传，支持的话可以点个star😁

2021-07-09

每一个简短的搜索词背后都隐藏着用户最真实的查询意图，这就需要搜索引擎使用很多不同策略去挖掘用户背后的需求，这就涉及到“搜索query理解”。

2021-04-21

Elasticsearch 搜索引擎内置了很多种分词器，但是对中文分词不友好，所以我们需要借助第三方中文分词工具包。

2021-04-11

在前一篇文章中，我们讲解了 ElasticSearch 如何在数据存储方面支持全文搜索和复杂条件查询，本篇文章则着重分析 ElasticSearch 在全文搜索前如何使用 ik 进行分词，让大家对 ElasticSearch 的全文搜索和 ik 中文分词原理有一个全面且深入的了解。

2020-05-27

万事开头难，创业之初，没资金、没资源，由于技术需要，不得不直面这些底层NLP技术研发。最初的几年里，使用了ansj开源项目，后来开始使用hanlp。随着业务的推进，不断暴露出很多问题，不能满足业务需要，如控制分词粒度、纠错等等。。。

2020-05-24

Lucene 中提供了 SmartCN 为中文提供分词功能，实际应用中还会涉及到停用词、扩展词（特殊词、专业词）等，因此本文将聚焦在 SmartCN 而暂时不考虑其他中文分词类库。