站长笔记网 发表于 6 天前

突然新增的请求访问导致服务器卡死,SemrushBot是什么搜索蜘蛛爬虫?为什么大量访问站点。

近站长笔记网被国外很多IP进行访问,有一段时间多大千万次请求,看样子又不像攻击,经过查看网站日志分析出来是一个叫SemrushBot的网站请求。

SemrushBot是什么呢?百度了下,说是国外一个营销机构,针对SEO的分析进行到处爬取网站。

**** Hidden Message *****
页: [1]
查看完整版本: 突然新增的请求访问导致服务器卡死,SemrushBot是什么搜索蜘蛛爬虫?为什么大量访问站点。