有没有办法第一时间获得国内各大新闻网站发布的文章?(5 秒内)

2 天前
 sdjl
如题,需要监控各大新闻网站,如腾讯新闻、网易新闻等等,可能上百个。

有没有办法在这些网站发布文章的几秒内就能获得文章推送?(对方发布的所有文章)

主要是有个客户向我提出这个需求~~我也不知道可不可以,问问大家。
1647 次点击
所在节点    问与答
23 条回复
Baymaxbowen
2 天前
舆情系统?
kzfile
2 天前
不就是 rss 吗,当然,某些网站没有也可以自己配置
https://docs.rsshub.app/zh/guide/
sdjl
2 天前
@kzfile 这个是主动推送吗? 需要 3 秒内及时推送。
kzfile
2 天前
@sdjl 是用户主动拉数据.如果你自建服务,缓存过期时间可以自己调,缓存已过就从对应服务获取最新的
sdjl
2 天前
@kzfile 如果我一秒钟拉取一次,不会被对方封 IP 么?
sdjl
2 天前
也可以购买第三方的服务哈,如果有的话。
renmu
2 天前
@sdjl 肯定会啊
falcon05
2 天前
这不就是爬虫吗?怕封就搞 ip 池
sdjl
2 天前
@falcon05 爬的成本太高,就是看看有没有其他方案
shuxhan
2 天前
@kzfile #2 rss 有延迟,秒级响应不可能做到的
shadowyue
2 天前
你把新闻 APP 的推送通知打开,大新闻会给你推
gechang
2 天前
秒级获取需要投入 ip 池,否则肯定被封,人家也不可能让你白嫖
sdjl
2 天前
@shuxhan
@gechang

是的,我也是这样认为的。但是客户让我问问有没有解决方案,我来找大家帮帮忙。
googlefans
2 天前
不怕报警吗?打击这种未经同意恶意爬取的
wzbrbj
2 天前
TG 的新闻频道还不够你用么?
geekyouth
2 天前
今日热榜官网,满足你的需求
https://tophub.today/
crysislinux
2 天前
这种肯定只能一直爬。别人有更新又不会告诉你
a1b2c3T
2 天前
@wzbrbj #15 一开始我订阅了好多新闻频道,还有 rss 也弄了好多,后来发现没啥屌用,少看点新闻 哪怕几个月半年不看对自己的生活没有一点影响==,后来就想起来去翻一翻
luodeyitian
2 天前
正常的新闻发布没那么高的频率,哪怕财联社的电报平均也得 20 秒一个。而且你去爬别人的新闻肯定要加 ip 池的。
YJi
2 天前
上百个平台全量数据么? (全量肯定做不到)
还是针对特定频道,特定用户的定向监测?比如某些官媒,某些大 V 这种。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1076270

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX