为什么总有人扫我的网站，难道我动了谁的奶酪？

[tianshiyeben]

在 nginx 日志里，经常有奇怪的 404，还有假蜘蛛。

烦。

[kios]

动了别人奶酪应该就直接 DDoS 你了 = =

[crella]

前段时间做了个爬虫，把展示页面放在公网服务器上。我在别的论坛发贴分享这个链接，被删了帖，于是我估计除了我就还有湖北某市的一个访问者……

然后有几晚，puma 显示很多 malformed request 还有对各种不存在的路径的请求，搜了一下是 nmap 的扫描行为，某些 ip 是国家队。

[wanguorui123]

每天收到大量请求，全部被自动封锁了

[kumasama]

不是可以查出来谁扫你吗?

[zarte]

扫网站拿肉鸡不很正常么？

[ifxo]

都是 ai 扫的，你是躺枪了

[Cmdhelp]

aliyun,tengxunyun，国外的安全网站，黑客，都是大批量扫描，，，不过幸好还有点道德，rm -rf /tmp,都是这种命令传进来

[tianshiyeben]

@crella 嗯，我也类似，只是我没仔细留意过是什么人在搞

[tianshiyeben]

@Cmdhelp rm 都有，汗

[tianshiyeben]

@kumasama 我也不太懂，我这还是监控系统，哈哈

[tianshiyeben]

@wanguorui123 用什么能自动封锁啊。我就批了一层 cf

[ArtIsPatrick]

我扫的，🧀不错😊

[tianshiyeben]

@ifxo 我看了两边，都看成 a v 了

[tianshiyeben]

@ArtIsPatrick ？

[tianshiyeben]

@kios 我这就开源项目

[M2K4]

你的网站就是奶酪

[tankren]

不是 bat 就是 bot 想多了

[opengps]

都是自动探寻漏洞的，公网环境这种情况太常见了

[xuanbg]

太正常不过了，从我司的日志看，至少有 30%的访问量来自各种爬虫、蜘蛛、攻击脚本。有统计说互联网的流量有 60%以上是爬虫，这样看来我司网站还在水准之下。哈哈哈，这就没事了，安心睡觉。

[ajaxfunction]

我维护的一个二手房网站，正常用户 pv 一天也就是 3000 左右，

但是各家 bot 就和疯了一样，光每天生成的 nginx 日志文件就接近 100MB 了， 无时无刻不在爬数据，也不注意频率，搞的我经常宕机，更可恶的是把我 cdn 流量都消耗不少，无解