京東云星盾在開啟遭遇攻擊模式或者JS挑戰(zhàn)的時候,是會把搜索引擎的蜘蛛攔截的,因為遭遇攻擊模式或者JS挑戰(zhàn)的時候,是需要人機(jī)驗證的,而搜索引擎蜘蛛并不具有人機(jī)識別的能力。
解決辦法是把各大搜索引擎的蜘蛛訪問UA加入白名單,這樣通過些UA訪問過來的,就不會有攔截,缺點,如果有人假冒這些UA對網(wǎng)站進(jìn)行訪問,那么也是不會有任何攔截,所以各類同學(xué)根據(jù)自己的需求看著來弄。
操作方法:
1.進(jìn)入點擊進(jìn)入安全規(guī)則-防火墻規(guī)則

2.創(chuàng)建防火墻規(guī)則

3.填寫規(guī)則
規(guī)則名稱:UA白名單
字段:User-Agent
運算符:等于
值:Mozilla/5.0 (compatible; Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html)
或Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B
操作:繞過
繞過的功能:全部
確認(rèn)即可。
如下圖:

其中的值自己根據(jù)想要加白的搜索引擎UA多少來填,如需要把360、谷歌等搜索引擎UA一起加白的,選或,再輸入對應(yīng)的UA,千萬別選且。
以下是一些主要搜索引擎的抓取蜘蛛User-Agent的示例:
百度
- 百度PC蜘蛛:
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
- 百度移動蜘蛛:
Mozilla/5.0 (Linux; u; Android 4.2.2; zh-cn;) AppleWebKit/534.46 (KHTML, like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
- 百度小程序蜘蛛:
Mozilla/5.0 (iPhone; CPU iPhone OS 9_1 like Mac OS X) AppleWebKit/601.1.46 (KHTML, like Gecko) Version/9.0 Mobile/13B143 Safari/601.1 (compatible; Baiduspider-render/2.0; Smartapp; +http://www.baidu.com/search/spider.html)
谷歌
- Google PC蜘蛛:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; Googlebot/2.1; +http://www.google.com/bot.html) Chrome/W.X.Y.Z Safari/537.36
,其中W.X.Y.Z是Chrome瀏覽器版本號,會隨Googlebot的更新而變化。 - Google移動蜘蛛:
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
必應(yīng)
- Bing PC蜘蛛:
Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) Chrome/
或Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm) W.X.Y.Z Safari/537.36
- Bing移動蜘蛛:
Mozilla/5.0 (Linux; Android 6.0.1; Nexus 5X Build/MMB29P) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/W.X.Y.Z Mobile Safari/537.36 Edg/W.X.Y.Z (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
搜狗
- 搜狗PC蜘蛛:
Sogou web spider/4.0 (+http://www.sogou.com/docs/help/webmasters.htm#07)
- 搜狗移動蜘蛛:
Sogou wap spider/4.0 (+http://www.sogou.com/docs/help/webmasters.htm#07)
360搜索
- 360搜索蜘蛛:
Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/50.0.2661.102 Safari/537.36; 360Spider
神馬搜索
- 神馬PC蜘蛛:
Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/69.0.3497.81 YisouSpider/5.0 Safari/537.36
- 神馬移動蜘蛛:
Mozilla/5.0 (iPhone; CPU iPhone OS 10_3 like Mac OS X) AppleWebKit/602.1.50 (KHTML, like Gecko) CriOS/56.0.2924.75 Mobile/14E5239e YisouSpider/5.0 Safari/602.1
Yandex
- Yandex蜘蛛:
Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/81.0.4044.268