[闲聊畅谈] 网站被蜘蛛爬挂了。。。。要不要针对蜘蛛搞个专门的服务器 [复制链接]
查看:3788 | 回复:17

logo设计专家 · 发表于 2017-5-8 10:51:33

对于蜘蛛的请求都跳转到应付蜘蛛的服务器

可行不

18601 · 发表于 2017-5-8 11:10:18

我的也是，国外有几个ip段爬的太猛了，我都屏蔽了

wuzhicheng · 发表于 2017-5-8 11:10:30

这样的没有试过
不过应该可以吧
这样就登陆网站多了一个镜像而已
就和之前的有些网站一样
联通一条线路，电信一条线路
现在就是蜘蛛多了一条线路。

参观者 · 发表于 2017-5-8 11:19:49

不怕，用了CDN缓存页面，随便爬

logo设计专家 · 发表于 2017-5-8 11:29:18

参观者发表于 2017-5-8 11:19
不怕，用了CDN缓存页面，随便爬

收费的吗

弗兰 · 发表于 2017-5-8 11:50:59

我曹，这ip多少啊？

参观者 · 发表于 2017-5-8 11:56:57

logo设计专家发表于 2017-5-8 11:29
收费的吗

收费的，免费的不好

其实CDN费用，比你搞个专站服务器要便宜得多，而且可以加快所有人的访问

logo设计专家 · 发表于 2017-5-8 12:04:30

参观者发表于 2017-5-8 11:56
收费的，免费的不好

其实CDN费用，比你搞个专站服务器要便宜得多，而且可以加快所有人的访问

哪里的cdn

想买dnspod的可以吗

logo设计专家 · 发表于 2017-5-8 12:05:04

弗兰发表于 2017-5-8 11:50
我曹，这ip多少啊？

垃圾蜘蛛只爬不给流量

iceteaa · 发表于 2017-5-8 14:08:05

直接屏蔽垃圾蜘蛛