收集一些国外的搜索引擎AI的爬虫,大家可以屏蔽一下。站长笔记网16天前更新321收集一些国外的搜索引擎AI的爬虫,大家可以屏蔽一下。 大家把这些标识加入UA黑名单就行了。 Claude(AI)聊天机器人:ClaudeBot 亚马逊:Amazonbot Facebook:facebookexternalhit 恶意爬虫