突然新增的请求访问导致服务器卡死，SemrushBot是什么搜索蜘蛛爬虫?为什么大量访问站点

近站长笔记网被国外很多IP进行访问，有一段时间多大千万次请求，看样子又不像攻击，经过查看网站日志分析出来是一个叫SemrushBot的网站请求。

SemrushBot是什么呢？百度了下，说是国外一个营销机构，针对SEO的分析进行到处爬取网站。