對于SEO站長,經(jīng)常會使用百度站長平臺的抓取診斷工具,主要作用是以百度蜘蛛的角度去分析網(wǎng)站的內(nèi)容,判斷百度蜘蛛的抓取情況,解決了百度蜘蛛與seo站長們眼中內(nèi)容是否一致的問題。如果經(jīng)常出現(xiàn)抓取失敗,那會大大的影響網(wǎng)站的正常收錄,下面筆者來分析一下百度抓取診斷失敗的原因有哪些。網(wǎng)站建設(shè)★網(wǎng)站設(shè)計(jì)★網(wǎng)站制作★網(wǎng)頁設(shè)計(jì)-800元全包;企業(yè)網(wǎng)絡(luò)推廣☆網(wǎng)站優(yōu)化☆seo☆關(guān)鍵詞排名☆百度快照-2200元全年展示;做網(wǎng)站優(yōu)化排名-網(wǎng)站建設(shè)公司
成都創(chuàng)新互聯(lián)公司專業(yè)為企業(yè)提供常山網(wǎng)站建設(shè)、常山做網(wǎng)站、常山網(wǎng)站設(shè)計(jì)、常山網(wǎng)站制作等企業(yè)網(wǎng)站建設(shè)、網(wǎng)頁設(shè)計(jì)與制作、常山企業(yè)網(wǎng)站模板建站服務(wù),10余年常山做網(wǎng)站經(jīng)驗(yàn),不只是建網(wǎng)站,更提供有價(jià)值的思路和整體網(wǎng)絡(luò)服務(wù)。
1.301或302重定向設(shè)置錯(cuò)誤
301重定向是指百度蜘蛛訪問鏈接時(shí)發(fā)生了跳轉(zhuǎn),如果跳轉(zhuǎn)后的鏈接超長或者連續(xù)跳轉(zhuǎn)的次數(shù)超過5次,就會發(fā)生重定向錯(cuò)誤而導(dǎo)致抓取失敗。
2.網(wǎng)站訪問速度
很多SEO站長表示,在本地測試訪問時(shí)候,返回的HTTP狀態(tài)碼是200,但是抓取診斷就一直顯示抓取中,沒有反饋任何結(jié)果,這是由于服務(wù)器的線路不同,百度蜘蛛抓取的速度可能發(fā)生延時(shí),就會產(chǎn)生明明可以正常訪問,卻出現(xiàn)抓取失敗的情況。一般遇到這種情況需要定期檢測服務(wù)器各地訪問速度,優(yōu)化網(wǎng)站的打開訪問速度。
3.robots.txt封禁
在抓取診斷工具中如果返回的抓取失敗,請確認(rèn)你是否對該網(wǎng)站設(shè)置了robots.txt封禁,阻止百度蜘蛛抓取網(wǎng)站的某些內(nèi)容,如果你未使用robots.txt文件屏蔽百度,請點(diǎn)擊旁邊的報(bào)錯(cuò)鏈接,百度會立即更新你網(wǎng)站的robots信息;如果是你的誤操作導(dǎo)致了robots.txt封禁,請及時(shí)修改robots文件,避免造成你的網(wǎng)站在百度收錄量影響。
4.DNS錯(cuò)誤問題
DNS錯(cuò)誤是指由于服務(wù)器停止運(yùn)行或DNS到你網(wǎng)域的路由存在問題,導(dǎo)致百度蜘蛛無法與DNS服務(wù)器通信。對于持續(xù)的或反復(fù)出現(xiàn)的DNS錯(cuò)誤,請與你的DNS提供商聯(lián)系處理。通常情況下,你的DNS提供商即為網(wǎng)站服務(wù)器托管服務(wù)提供商,配置你的服務(wù)器,使其能夠以404或500等HTTP錯(cuò)誤代碼對不存在的主機(jī)名作出響應(yīng)。
5.404錯(cuò)誤
一般情況下,當(dāng)百度蜘蛛訪問到不存在的網(wǎng)頁(因?yàn)槟銊h除或重命名了網(wǎng)頁且沒有將舊網(wǎng)址重定向到新網(wǎng)頁,或者鏈接中存在拼寫錯(cuò)誤)時(shí),就會出現(xiàn)“未找到”狀態(tài)錯(cuò)誤(通常是404 HTTP狀態(tài)代碼),404錯(cuò)誤也會導(dǎo)致抓取失敗。
6.訪問遭拒絕
一般情況下,百度會通過跟蹤網(wǎng)頁間的鏈接來查找內(nèi)容。百度蜘蛛必須能夠訪問某個(gè)網(wǎng)頁才能抓取該網(wǎng)頁。如果你意外地看到了“訪問遭拒”的錯(cuò)誤,可能是由于以下幾種原因?qū)е碌模?/p>
(1)百度spider無法訪問您網(wǎng)站上的網(wǎng)址,因?yàn)槟憔W(wǎng)站上的所有或部分內(nèi)容要求用戶登錄后才能查看。
(2)你的服務(wù)器要求用戶使用代理進(jìn)行身份驗(yàn)證,或者您的托管服務(wù)提供商阻止百度蜘蛛訪問你的網(wǎng)站。
總結(jié):
百度站長工具抓取診斷失敗的原因還有很多,以上筆者分析了一些常見的,提供給大家參考,需要逐一排除找出原因。
當(dāng)前題目:百度站長工具抓取診斷失敗的原因分析
文章源于:http://m.rwnh.cn/article7/dghecoj.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供微信公眾號、自適應(yīng)網(wǎng)站、動(dòng)態(tài)網(wǎng)站、網(wǎng)站內(nèi)鏈、面包屑導(dǎo)航、網(wǎng)頁設(shè)計(jì)公司
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)