分词完成得到切片，如何快速的通过停用词表剔除多余的词

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

The Go Programming Language

› http://golang.org/

Go Projects

› Revel Web Framework

这是一个创建于 2401 天前的主题，其中的信息可能已经有所发展或是发生改变。

求个高效的方法。

3 条回复 • 2018-04-28 10:21:14 +08:00

gabon

2018-04-27 18:17:54 +08:00 via Android

分词 n 个，停用词 m 个，复杂度就 On。分完的每个词你得最少扫描一遍吧。停用词用 hashset 保存，foreach 迭代分完的词。

ByteChen

2018-04-28 08:48:54 +08:00

分词不会太麻烦吗

zarte

2018-04-28 10:21:14 +08:00

@ByteChen 那也没办法呀，要统计热点。