Chrome瀏覽器模擬百度蜘蛛訪問

某些網(wǎng)站可能針對(duì)搜索引擎掛馬（百度/360/搜狗等），Chrome瀏覽器可以安裝User-Agent Switcher for Chrome模擬百度蜘蛛來訪問網(wǎng)頁，如果是針對(duì)搜索引擎掛馬的就會(huì)顯示。

下載蜘蛛模擬軟件，模擬蜘蛛訪問查看非法信息。

準(zhǔn)備工作

• 已經(jīng)安裝Google Chrome瀏覽器

安裝擴(kuò)展

• 訪問 User-AgentSwitcher_1_0_43.crx 并下載這個(gè)擴(kuò)展

• 按照下圖打開Chrome瀏覽器 - 擴(kuò)展程序
  

• 
  

設(shè)置百度蜘蛛

安裝完成在擴(kuò)展程序頁面可以看到User-Agent Switcher for Chrome點(diǎn)選項(xiàng)

按照如下截圖添加百度蜘蛛（藍(lán)色的文字部分）

• New User-agent name:baidu

• New User-Agent String:Mozilla/5.0 (compatible;Baiduspider-render/2.0; +http://www.baidu.com/search/spider.html;soso;360;sogou)

• Group:spider

• Append?:Repalce

• Indicator Flag:1
  

測(cè)試

安裝擴(kuò)展后Chrome瀏覽器右上角多出一個(gè)小眼睛，點(diǎn)擊小眼睛 - spider - baidu，這樣就可以模擬百度蜘蛛訪問了。

比如訪問一個(gè)針對(duì)搜索引擎掛馬的網(wǎng)頁：http://www.zttoten.com/index.php?rmlbgh=cbfmcm&westauditpageinfo=1 [這個(gè)地址可能會(huì)會(huì)失效]，這樣就可以看到被掛馬的情況。（默認(rèn)情況下訪問這個(gè)地址可能會(huì)跳轉(zhuǎn)到網(wǎng)站首頁。）

注意事項(xiàng)

• 如果之前已經(jīng)用正常模式訪問過非法信息網(wǎng)頁，再模擬百度蜘蛛的時(shí)候可能會(huì)失效，清除下瀏覽器緩存（cookie），然后重新選擇百度蜘蛛訪問非法信息頁面測(cè)試。

• 此方法僅針對(duì)搜索引擎掛馬有效，其它掛馬類型并不適用。

360瀏覽器模擬百度搜索引擎蜘蛛訪問：http://m.shinetop.cn/faq/list.asp?unid=2289