有个站,最近被人疯狂采集。cpu和带宽都被占满。
有很多IP进来,大概判断一下屏蔽一下IP,能消停一会儿,但是过会儿又不行了。
这个站不挣钱,就像挂着没准啥时候运气好能收录了。
如果实在被欺负的厉害就只能关站了
有没有什么办法能抑制一下啊,不打算完全杜绝,别影响我机器性能就行啊
河南省网友说:判断一下如果是爬虫,就让它爬另外一个库,库里的内容从刑法里面找,最好是会让他直接活埋那种
江苏省网友说:联系那个人,直接把站大报给他一份,他省事,你省经历,一举两得
河南省网友说:看一下采的大体时间,再发点那啥让他采,完了之后自己删除就好了
福建省网友说:开CC防护验证码 他要能手动输入验证码算他厉害
河北省网友说:把站便宜卖给他,然后采他
江苏省网友说:站多少钱 ,卖给我吧
山东省网友说:互采吧,你也采他的
陕西省网友说:这也太过分了。支持回采。
江西省网友说:不屏蔽,根据来源IP提供不同的内容。。。什么内容你懂的(也可以限定IP的访问频率,以及IP请求次数)
其它人(蜘蛛)正常访问没关系
江西省网友说:禁UA试试呢
黑龙江省网友说:用cf 的浏览器检测功能..
山东省网友说:cc防护也只是第一次访问要验证码,后面就不需要了,先手工验证通过,再采集
四川省网友说:访问频率高了照样出 他采集
浙江省网友说:网址多少,我看看先