弱弱问下，有没有童鞋搞过搜索引擎的关键词？建立词库神马的？

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

已注册用户请登录

这是一个创建于 3512 天前的主题，其中的信息可能已经有所发展或是发生改变。

比如采集百度相关搜索？采集一些有指数的词？

最近搜集了一批大站，在采集爱站的词条。

3 条回复 • 2014-09-30 14:11:30 +08:00

xunyu

2014-09-30 13:59:54 +08:00

lucene，不用谢

anheiyouxia

2014-09-30 14:08:30 +08:00 via Android

N面前就已经看到有这样的网站，我记得当时比较流行的那个程序似乎叫聚宝盆什么的，就是爬虫程序，去爬各种热门关键字，然后再把这些关键字再爬页面后存起来。
这两年这个现象越来越严重了，真的很恶心这样的垃圾站。

llhh

2014-09-30 14:11:30 +08:00

@xunyu 用这个框架采集吗？

@anheiyouxia 我不是为了制造垃圾页面啊！