«

博客突然来了不少美国和德国的IP

Hu 发布于 阅读:5 随笔


我一直用的51LA统计,好久没有登录了。刚登进去一看,吓了一跳。我这个博客都是悄悄地搞,属于自己的自留地,纯粹记录流水账,想到哪里写到哪里,完全不考虑逻辑性和流畅度。平时统计的数据里,除了我访问外,没有其他人。今晚突然来了不少IP地址为美国和德国的visitors,有点吓人。

这几天爬虫来访的特别频繁,尤其是claudebot。我搜索了一下,这个爬虫黑历史还蛮多。观察一下情况,太占用资源的话,我就把这个爬虫给禁了(看网上说这个爬虫比较无耻,不遵循robots协议)。

image.png

image.png

爬虫 51la claudebot robots协议 黑历史