悟空视频-电影推荐网站上线

[zixie1991]

一直都有个想法，根据电影的热度、评分、播放量等多种维度信息找到自己喜欢的电影，于是就有了“悟空视频”这个站点。

地址：wukongshipin.com

赞叹下，开源社区力量大，pyspider、flask、bootstrap 确实很简单、实用。

[zixie1991]

@parvin 已经将你的网站加入友链了

[smileawei]

2017 韩国 XX 级电影推荐。就凭这个 收藏上车了。

[lieqishi]

@zixie1991 求友链(你站已加)，谢谢啦 http://www.lieqishi.com

[zixie1991]

@lieqishi 已经将你的网站加入友链了

[MikeFeng]

沃！ cool ！能分享 pyspider 脚本学习下么？

[zixie1991]

@MikeFeng pyspider 是个开源项目，项目地址： https://github.com/binux/pyspider，作者博客： http://binux.me/

[MikeFeng]

@zixie1991 我想请教一下，你抓取到的数据是直接存数据库，还是通过项目接口录入数据的

[zixie1991]

@MikeFeng 直接存数据库

[RainFinder]

打不开呢

[MikeFeng]

@zixie1991 我看了一下，发现每个视频网站相同的视频可能名字不一样，也有可能名字一样的视频内容不一样，你是怎么确定这个视频的唯一性的？不同的视频网站视频分类也不同，你是怎么归类的？每个视频都去不同网站抓视频集数这个工程量是不是很大呢？还是你抓的是第三方非主流的视频网站的数据，如果是这样那上面的问题是不是都是第三方的视频网站处理了

[zixie1991]

@RainFinder 能正常打开的

[zixie1991]

@MikeFeng 网站播放地址是通过抓取主流视频网站（包括腾讯视频、爱奇艺、乐视视频、芒果 TV、优酷网等）获得，每个网站一个 spider。针对”每个视频网站相同的视频可能名字不一样”的问题，我的解决方法是：根据视频的名称、演员、简介三个维度的信息，来计算视频的相似度的（采用了最小编辑距离、simhash 等相似度量方法），其中每个维度被赋予不同的权值，当两个视频的相似度大于某个阈值时判断两个视频相似。

[touzi]

打不开了

[zixie1991]

@touzi 能截个图吗？我访问能够打开

[touzi]

@zixie1991 点楼主两个连接打不开, 复制域名打开了. Chrome 浏览器, 第一次打开速度慢. 北京电信通.

[MikeFeng]

@zixie1991 原来如此，受教受教，感谢

[zhangneww]

@zixie1991 北京联通打不开

[zixie1991]

@zhangneww @touzi 谢谢反馈！！！

[pango]

楼主技术很牛。

提点意见：1、这种网站停留时间太低，跳出率会很高，非常不利于 seo。 2、不知道“评论”抓取的是不是豆瓣的数据，如果是，重复内容会很多，加上影片标题、简绍都是抓取自豆瓣，容易被搜索引擎判断为垃圾站。
解决办法：1、增加停留时间，比如增加截图、预告片；减少跳出率，比如增加一个播放列表页面。2、减少重复内容，不要抓豆瓣的短评，抓长评后进行改写。

另外既然楼主的感叹了开源社区力量大，不知你也能否为开源社区添砖加瓦呢？不要害怕被人拷贝你的 idea，这种站，关键在运营，不在代码。 ~~

[zixie1991]

谢谢 @pango 回复，很高兴有 V 友提出这么好的建议！后期有空会尝试做一些网站优化，很乐意与大家交流技术。