关于 V2EX 新的自动打标签功能

[Livid]

现在在 V2EX 每个主题的右下角，多了一个新的自动打标签功能，及相关的聚合页面。

这是基于 jieba 做的。目前的效果在某些主题上还是不太理想，接下来会继续优化。

大家如果有什么好的思路，或者好的词典，还请多多赐教，谢谢。

[xiaojay]

分词 然后用 TF-IDF ？

[Livid]

@botao1
@mkeith 请相信设计师的直觉。:-)

[hzlzh]

@Livid 墙裂的需要大小写规范化单词

[nemoliu]

能介绍一下计算的过程么？对标题分词然后根据tf-idf做关键词提取？

[Livid]

@xiaojay
@nemoliu

https://github.com/fxsjy/jieba/blob/master/jieba/analyse/__init__.py

[FarBox]

中文词典应该都是接近的。如果有更好的，同求。 :)

我们原来有尝试用jieba+mongodb做全文检索，但试了下，性能很糟糕，没有办法用在生产环境。

最后选择用ElasticSearch作为纯粹的分词+索引的中间库，也算一种奇葩的用法；不过效果还挺不错的。

[dorentus]

放这个位置不也挺好的么……

[mopig]

http://v2ex.com/tag/tooyoung
不存在的 tag 会报错～

[Superoutman]

非常赞同19楼 @botao1 的提议。

[ryon]

tag和节点会不会有一定的重复？我们在设计的过程中也考虑过类似的问题，后来最终考虑还是采用节点，相比之下自动计算出来的tag可能很多情况下利用率不高。

[huafang]

@ryon wecenter 新版不错，我一直在期待

[mactaew]

@Livid 分词略有问题。

[ayukun]

和27楼想到一块了，放那里就挺好，还容易看见 ，刚刚找这个主题的表情费了好一会。可以考虑加淡彩

[meteor2013]

目前在iPhone 上看不到标签

[dorentus]

@ayukun
我明白了，自己的帖子，功能按钮，例如「追加内容」目前是放在那个位置的……
所以 Livid 才一开始就没考虑把 tag 放在那里吧

[Livid]

@dorentus 对，在一个主题刚发布的前 300 秒，那里会有 MOVE 和 EDIT 按钮。1800 秒之后，会有 APPEND 按钮。

[Livid]

@mopig 谢谢，这个问题已经解决。

[xiaop]

tag这个功能非常棒！如果能对tag做归类就更棒了

[ayang23]

jieba启动慢，费内存，貌似要在每个django线程里加载一份词典，简单的不如用mmseg

[Mihuwa]

很赞的功能。