中文分词的常见项目
1、中文分词是其他中文信息处理的基础，搜索引擎只是中文分词的一个应用。其他的比如机器翻译（MT）、语音合成、自动分类、自动摘要、自动校对等等，都需要用到分词。
2、分词技术的难点是：消除歧义和新词识别。领域：信息检索，机器翻译（MT）、语音合成、自动分类、自动摘要、自动校对等等，都需要用到分。希望能给您提供帮助。
3、中文主要有：NLTK，HanLP，Ansj，THULAC，结巴分词，FNLP，哈工大LTP，中科院ICTCLAS分词，GATE，SnowNLP，东北大学NiuTrans，NLPIR；英文主要有：NLTK，Genism，TextBlob，Stanford NLP，Spacy。
4、jieba（结巴分词）“结巴”中文分词：做最好的 Python 中文分词组件。
谁来推荐一个JAVA的分词工具
1、至于JAVA写的分类器很多，常用的比如说Weka， RapidMiner(这个相当不错，有专门的Web data Mining的扩展包，是我的最爱)，这些都可以自己调用其接口实现新的算法。
2、ik-analyzer查查这个吧，是一个JAVA分词器 但是你说的处理完保存在另一个文件里这些就得你自己写代码处理了。
3、IK分词 我/爱/北京 2 可以自己扩展词典 有很多分词器是不能够进行自己扩展词典的，有自己的词典，导致分词的结果才是自己想要的结果。3 可以自己定义停用词字典 4 和Lucene结合比较高，有很多封装好的模块。
4、这里的分词是什么意思呢？如果是按照空格将一段文字分解成字符串数组的话，我想无所谓中英文的区别吧。
5、String text = IK Analyzer是一个结合词典分词和文法分词的中文分词开源工具包。它使用了全新的正向迭代最细粒度切分算法。
java搭建lucene需要的jar包
1、httpClient包是目前比较常用的网络连接包，然后使用htmlParser来解析抓取到的数据即可。
2、方法：在项目名上右击，依次点击【New】–【Floder】，打开新建文件夹窗口 输入文件夹名称【lib】，点击【ok】。
3、比如主程序类叫Main，在目录lib下有aaa.jar，bbb.jar，ccc.jar，则需要输入以下命令才能执行：java -cp lib/aaa.jar；lib/bbb.jar；/lib.ccc.jar Main (linux系统下用冒号，windows下用分号)。
4、JAR 文件就是 Java Archive File，顾名思意，它的应用是与 Java 息息相关的，是 Java 的一种文档格式。JAR 文件非常类似 ZIP 文件——准确的说，它就是 ZIP 文件，所以叫它文件包。
微信扫一扫 
支付宝扫一扫 
