java分词代码，java ik分词

求高手给我用java编写一个英文单词分词器

1、Container con=getContentPane()；//建一个awt容器对象，用来添加其他元素，最好用这个添加元素。

2、使用JAVA编写词法分析器或语法分析器，完成的程序能正常运行，无错误，能识别相应的词法或语法成份。... 使用JAVA编写词法分析器或语法分析器，完成的程序能正常运行，无错误，能识别相应的词法或语法成份。

3、例如，英文句子I am a student，用中文则为：“我是一个学生”。计算机可以很简单通过空格知道student是一个单词，但是不能很容易明白“学”、“生”两个字合起来才表示一个词。

4、分词器一般都有这些方法吧，比如MMAnalyzer中有tokenStream或者segment等方法，自己搜搜吧。至于写文件，网上一大堆，lz还是自己多搜索，少提问吧。

5、这里的分词是什么意思呢？如果是按照空格将一段文字分解成字符串数组的话，我想无所谓中英文的区别吧。

相关问答

Q1: java如何分词??

1、在Eclipse中新建一个java项目。在该项目的src文件夹下新建如下2个包 将解压好的文件jieba-analysis-master\src\main\java\com\huaban\analysis\jieba目录下的这8个文件 放到刚才新建的com.huaban.analysis.jieba包里。

2、String或是StringBuffer(建议用) 中的indexOf(中华)方法，查找给定的的字符串中是否有给定词表中的词。借鉴编译原理中的状态装换的思想。先编写一个状态机，用于测试给定字符串中的词是否满足词表中的内容。

3、官网下载最新版本分词器注：听学长说这个分词器有时间限制，所以一段时间之后需要重新下载。

Q2: 怎么使用java中文分词组件word

1、String或是StringBuffer(建议用) 中的indexOf(中华)方法，查找给定的的字符串中是否有给定词表中的词。借鉴编译原理中的状态装换的思想。先编写一个状态机，用于测试给定字符串中的词是否满足词表中的内容。

2、读取word用doc4j，然后就是读成字符串进行处理了。提取关键字首先是中文分词技术，就是把一段话划分成多个组成的词语，然后统计词语的出现次数，这个是主要依据。

3、中文分词应该属于另外一个大范畴，我就没考虑了。

Q3: Java中文分词算法

写在最后：1)建议使用第一种方法，因为在java 内部实现的查找操作其实 和你想得思路是相同的，不过他的效率会高些。2)如果个人的编程能力比较强或是不考虑效率只是想实现专有的分词算法。可以使用第二种方法。

现有的分词算法可分为三大类：基于字符串匹配的分词方法、基于理解的分词方法和基于统计的分词方法。

MMSEG4J基于Java的开源中文分词组件，提供lucene和solr 接口：1．mmseg4j 用 Chih-Hao Tsai 的 MMSeg 算法实现的中文分词器，并实现 lucene 的 analyzer 和 solr 的TokenizerFactory 以方便在Lucene和Solr中使用。

java分词代码的介绍就聊到这里吧，感谢你花时间阅读本站内容，更多关于java ik分词、java分词代码的信息别忘了在本站进行查找喔。