2016年5月2日升级:完善蜘蛛规则,新增国家IP屏蔽
- 2016-05-02 13:01:00
- admin 原创
- 2403
1、屏蔽以下无用蜘蛛:
MJ12bot
BLEXBot
AhrefsBot(防止竞争对手分析网站)
2、添加以下蜘蛛规则:
Macintosh(苹果公司蜘蛛)
Sogou web spider(搜狗蜘蛛)
3、添加CDN支持;
4、对谷歌、必应、雅虎、百度日本等蜘蛛进行了完善;
5、新增了国家IP屏蔽功能(基于后台屏蔽),有需要的客户请于客服联系进行设置。
发表评论