title: Lucene中Token与Term的区别？
topic: Lucene
content: 说实话，以前我对Token和Term也太了解。只知道Term是一个最小搜索单元，Lucene中有个Term和对应的TermQueryToken应该是分词过程中记录一些分词信息的对象。然后我特意下载lucene-core-4.7.1进行查看，看到Token这类上面是这么写的： 我用非常蹩脚的英语水平，大致翻译一下主要内容就是： Token是一种在对文本进行分词时产生的对象，包含分词对象（Term）的词语内容，词语在文本中的开始结束位置，和一个词语类型（关键字
answerer_tags: 互联网搜索引擎工程师