`
edwardpro
  • 浏览: 301246 次
  • 性别: Icon_minigender_1
社区版块
存档分类
最新评论

lucene的前端集群思路

阅读更多

你的搜索可以集群吗(这里单指前端应用集群)?这是一个突然发来的问题。。。其实lucene说实话什么都好就是集群不方便。。。

查看了些资料基本上做集群都是利用系统的集群文件系统等实现的,这个效率不会好。

突然我觉得可以这样的结构来做集群:

一台单机做索引,索引文件存在这台物理机上

然后利用nfs将索引文件映射到多台前端子机,子机将nfs的内容用RAMDirectory读到内存索引中,然后子机各自使用web服务提供前台访问

前端再使用集群服务器实现前台的集群

当索引更新的时候可使用jms通知子机及时同步nfs和RAMDirectory的内容

不过这样对服务器有些限制,比如: 索引量不能很大,无限大需要无限大的内存支持,这严重地限制了索引增长,但大多数应用还是可实现的,一个几G的索引已经不小了。

2
2
分享到:
评论
3 楼 yuling1217 2008-04-28  
最近做收索看了看lucene的源码,觉得很不好啊,首先说来不支持中文字典的分词,另外国内有几个关于中文分词的可以称为lucene的小插件吧,也不够商业话,当然一般企业小应用还是可以的。
  另外查看lucene的源码后发现很多地方都不够优化,问题多多哦
2 楼 johnnyhg 2008-04-21  
将索引分类,然后分放到不同的机器上,是不是也可以达到同样的效果。
1 楼 grantbb 2008-04-19  
你的方案还是有道理的,不过nfs的速度和可靠性也要评估。
索引太大了,使用RAMDirectory确实会很慢。

相关推荐

Global site tag (gtag.js) - Google Analytics