付费写一个爬虫系统

2019-05-15 15:48:06 +08:00
 zinfinb

主要采集 主流财经类网站的实时新闻,在股市交易日的交易时间阶段 对采集实时性要求高,越快越好。 其他时间段可以抓取间隔时间长一些。

要求实时性和稳定性达到最佳, 服务器资源可以提供多台,或者代理池 ip 购买

有兴趣的 pm 我,或者加我球球 : 196063

4329 次点击
所在节点    Python
12 条回复
deepall
2019-05-15 15:54:33 +08:00
给几个网站看看?
zinfinb
2019-05-15 16:01:27 +08:00
就财联社 https://www.cls.cn/ 电报那些啊 ,网站解析那些都好弄,我这边大部分都搞定了,主要是稳定性 和盘中的速度,需要一份可靠的解决方案
xavier007
2019-05-15 16:04:39 +08:00
已添加,麻烦通过下
q397064399
2019-05-15 16:11:20 +08:00
采集这种资料有什么用吗? 分类 ? NLP 自动分析 利空 利多吗 加入到 Alpha 因子中去?
hellosoft
2019-05-15 16:12:09 +08:00
同上,我也有这个需求,想找人写 Python 爬虫,有想做的+微信 compucen
fngtz
2019-05-15 16:13:17 +08:00
爬微博还有点用,财经新闻没有任何意义的。
zinfinb
2019-05-15 16:16:48 +08:00
@q397064399 做事件驱动啊 也可以加入到一些程序化交易的系统里
xavier007
2019-05-15 16:39:34 +08:00
@hellosoft 已添加,麻烦通过下
hailong0707
2019-05-15 17:44:31 +08:00
fank99
2019-05-16 10:18:37 +08:00
简单看了下,不是直接返回 json 吗,感觉还是比较简单的啊
danmu17
2019-05-21 23:56:23 +08:00
我估计又是那种要求每隔几秒就抓取一次全站数据的小白需求。
不过国内似乎写这种直接 DDOS/CC 网站的爬虫也不奇怪?
ruby0906
2020-06-22 22:32:05 +08:00
搜索: 有为财经 看看这个是不是符合你们的要求。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/564386

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX