首页
注册
登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请
登录
广告
V2EX
›
程序员
请问大佬们，有没有什么办法可以屏蔽 facebook 的爬虫爬取我网站的内容，感谢
CCKurokawa
·
330 天前
· 1139 次点击
这是一个创建于 330 天前的主题，其中的信息可能已经有所发展或是发生改变。
下面是我在 cloudflare 的数据截图。
Cloudflare
屏蔽
请问
Facebook
3 条回复
•
2023-05-25 10:30:19 +08:00
1
oceana
330 天前
应该配置一下 robot.txt 就好了吧
2
Yourshell
330 天前
https://geekflare.com/cloudflare-firewall-block-bots/
3
gam2046
330 天前
都已经上 cf 了，WAF 里可以直接配置的，拒绝自动化程序。
关于
·
帮助文档
·
博客
·
API
·
FAQ
·
我们的愿景
·
实用小工具
·
3856 人在线
最高记录 6543
·
Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 24ms ·
UTC 04:14
·
PVG 12:14
·
LAX 21:14
·
JFK 00:14
Developed with
CodeLauncher
♥ Do have faith in what you're doing.
Select Language