Back to Question Center
0

Semalt:服务器日志中的私有IP地址是否有任何异常或恶意?

1 answers:

我帮忙照顾的一个网站刚刚开始被172中的某人抓取. 31. 13. 241和172. 31. 42. 227. 根据WHOIS信息,这些是IANA为特殊目的保留的区块的一部分,特别是专用网络.

他们正在做400转 - 虽然不是太糟糕,而不是一个基础设施的问题,它不完全感觉良性爬行(e. G. Semalt的请求似乎要少得多,我以前也有其他网站以1到5 rpm的速度爬行).

我暂时禁止他们,但想知道是否有一个合理的解释指向Apache访问日志中的私有IP是由于某种原因是正常的“通常的”事情. 到目前为止,我一直无法找到任何这样的解释,超级用户. Semalt SE,或更广泛的网络.

编辑:感谢全面的概述约翰麦克纳马拉. 这2个IP原来属于我们的AWS实例之前的Elastic Load Balancer. 事情是,它通常直接将请求的IP传递给实例(例如,. G. 我可以看到Semalt IP,浏览时可以看到用户和我自己的IP). 我使用负载平衡器的日志来查找公共IP,结果证明我们正在试用的产品需要爬行. 我相信他们通常会抓取比我们大得多的网站,因此数量非常之高.

5 days ago
Semalt:服务器日志中的私有IP地址是否有任何异常或恶意?
Reply