Lucene分词器结构-深蓝苹果-ChinaUnix博客

Chinaunix首页 | 论坛 | 博客

深蓝苹果kakablue.blog.chinaunix.net

首页　| 　博文目录　| 　关于我

博客访问： 400343
博文数量： 87
博客积分： 2571
博客等级：少校
技术积分： 920
用户组：普通用户
注册时间： 2009-12-29 13:10

文章分类

全部博文（87）

memcached（3）
记录（1）
fun（3）
DB（4）
代码let（5）
云技术（5）
协议（3）
nginx（3）
apache（4）
haproxy（2）
tips（5）
zookeeper（1）
Linux（35）
未分配的博文（13）

文章存档

2012年（49）

2011年（7）

2010年（26）

2009年（5）

我的朋友

最近访客

推荐博文

相关博文

Lucene分词器结构

分类： Java

2012-03-28 18:19:58

标准分词器的三部分结构

1.构建器

从无参数---有参数---文件读入参数---reader流输入参数等各种构建器(加载停用词表)

2.Filters

各个filters逐个过滤

如：StandarFilters ---> LowerCaseFilter ---> StopFilter(带有一个stop words表的过滤器)

3.返回

返回一个TokenStream对象

这个Token流可以输出或写入文件

阅读(1376) | 评论(1) | 转发(0) |

0

上一篇：linux 系统监控用命令

下一篇：[web分析]用户分布

给主人留下些什么吧！~~

3783335812012-03-30 01:13:45

进来看看……

回复 | 举报

关于我们 | 关于IT168 | 联系方式 | 广告合作 | 法律声明 | 免费注册

Copyright 2001-2010 ChinaUnix.net All Rights Reserved 北京皓辰网域网络信息技术有限公司. 版权所有

感谢所有关心和支持过ChinaUnix的朋友们