openai 的爬虫 GPTBot，要不要放行？

2023-09-26 17:22:28 +08:00
 herozzm

ua 中的链接GPTBot，被它爬了之后，会把我的网站放在对话答案中吗？类似 seo
日志：

[25/Sep/2023:23:05:46 +0800] 52.233.106.58 379 "-" "HTTP/2.0" "GET" "www.xxxxx.com" "/view.html" 599 413 MISS "Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)" "-"
705 次点击
所在节点    问与答
2 条回复
175758
2023-09-26 17:34:11 +08:00
管他谁的，自己网站自己想干啥干啥
vueli
2023-09-26 17:52:38 +08:00
他只会搜索内容，不会留下你的网站地址。目前我对话没发现有 seo 这种可能的迹象。

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/977330

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX