你采集我?你是不是UA模仿百度蜘蛛?
可以判断百度 360 谷歌 bing 搜狗 神马 头条 等等且不限于其他搜索引擎 可以自己加搜索引擎
【大数据,不拖慢网速,不拖慢网站,不走数据库,千万数据,百万流量照样秒开】
百度官方给的方法【完全按照官方来操作】:
https://ziyuan.baidu.com/college/articleinfo?id=3378 【误判0%】【误判0%】【误判0%】
Mozilla/5.0(Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko)Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0;+http://www.baidu.com/search/spider.html)
好家伙,我直接反查你的ip,判断是真假蜘蛛,你采集我,假的直接给你自动拉黑,真的自动白名单,服务器底层判断
自动拉黑直接跳转404页面(不限于404,也可以403,500等等操作),优先判断白名单>黑名单>判断ua!
收费插件,费用80,开源,无加密,无授权。
WX: