被人工智能ClaudeBot爬虫抓取网站内容导致服务器经常超负荷。

今天站长网站服务器突然100%,但是网站并没有用户涌入,检查日志发现大量的国外IP和下列代码记录。

Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; ClaudeBot/1.0; +claudebot@anthropic.com)

搜索资料查看后,发现这个是国外的ClaudeBot爬虫,所以我们可以通过一下办法来进行屏蔽,解决网站超负荷状态。

ClaudeBot是Claude的爬虫,Claude是一款国外人工智能(AI)聊天机器人。

l

请登录后发表评论