您可以使用此軟件快速抓取站點中可能出現(xiàn)的損壞鏈接和服務器錯誤,或者識別站點中的臨時和重定向鏈接,還可以在爬行分析之后檢查信息的可能重復,如web站點、頁面標題、說明和內(nèi)容。您可以大量導出所有這些錯誤的問題,并將它們發(fā)送給開發(fā)人員進行修復。
工具功能01定位斷開的鏈接,立即抓取網(wǎng)站,找到損壞的鏈接(404)和服務器錯誤。批量導出錯誤和源URL以修復或發(fā)送給開發(fā)人員。審核重定向查找臨時和重定向,確定重定向鏈和循環(huán),或上傳url列表以審核站點的遷移。
分析頁面標題和元數(shù)據(jù),分析頁面標題和元描述在捕獲過程中,并確定網(wǎng)頁標題的長度、簡短、缺失或重復的頁面標題和元描述。我們發(fā)現(xiàn),重復內(nèi)容使用MD5算法來檢測準確的url重復、部分重復的頁面標題、指令或標題,以及查找內(nèi)容較低的網(wǎng)頁。
使用XPath提取數(shù)據(jù),使用CSS路徑、XPath或regex從web頁面的HTML收集任何數(shù)據(jù)。這可能包括社會元標簽,額外的標題,,SKU或更多!檢查機器人和指令來查看機器人。txt, meta robots或X-Robots-Tag指令(如Noindex或nofollow)和URL.被牧師和rel= next和rel= prev阻塞
新聞由鍵坤信息原創(chuàng)發(fā)布,轉載轉發(fā)或復制請保留版權信息
更多關于云服務器,域名注冊,虛擬主機的問題,請訪問三五互聯(lián)官網(wǎng):m.shinetop.cn