2020-08-31 分類: 網(wǎng)站建設(shè)
記得互聯(lián)網(wǎng)剛進(jìn)入中國(guó)時(shí),央視有一欄目是叫做互聯(lián)網(wǎng)生存大賽,就是把一檔子人關(guān)起來,只有互聯(lián)網(wǎng),看誰(shuí)能通過它買到自己想要的東西生存下來。當(dāng)時(shí)覺得真不容易,這些人必定是高手。當(dāng)時(shí)就說這是未來的人生活的常態(tài),足不出戶就可以利用互聯(lián)網(wǎng)活下來?,F(xiàn)在看來,其實(shí)更有趣的是把人們遠(yuǎn)離互聯(lián)網(wǎng),看他們能否活下來。
進(jìn)入主題,近段時(shí)間9月底與10月前 許多站長(zhǎng)經(jīng)歷堪比過山車般的持起彼伏,在9月23日的時(shí)候,百度來了一波大更新,許多新站終于是跳出一大部分收錄。而正當(dāng)以為可以高興的迎接國(guó)慶的時(shí)候,一大波網(wǎng)站被百度進(jìn)行懲罰。百度的動(dòng)作是越來越猜不透了。
百度大更新蜘蛛抓取痕跡
一大波被百度懲罰的網(wǎng)站正悄悄來襲
網(wǎng)站日志作為站長(zhǎng)每日必看的東西,如果是簡(jiǎn)單的查看網(wǎng)站蜘蛛的抓取,這些借助愛站的工具包就能看出網(wǎng)站是否受蜘蛛歡迎了,但是如果要對(duì)日志進(jìn)行詳細(xì)的分析,還是的老老實(shí)實(shí)的查看日志文件。而最近用愛站工具查看蜘蛛概要分析的時(shí)候,發(fā)現(xiàn)百度蜘蛛總停留時(shí)間幾乎為0,而百度蜘蛛訪問次數(shù)以及總抓取量卻正常,接下來我們一起研究下這個(gè)問題:
百度抓取總停留時(shí)間
每當(dāng)網(wǎng)站有啥病痛的時(shí)候,最著急的就是站長(zhǎng)了,感覺這時(shí)候誰(shuí)都靠不住,只能自己去琢磨了。這時(shí)候沒別的辦法,只能先去查看網(wǎng)絡(luò)日志。不看不知道,一看嚇一跳,發(fā)現(xiàn)返回的404錯(cuò)誤多的幾乎能上天。
看到這里的時(shí)候,幾乎嚇了一跳,哪里跑出來的錯(cuò)誤頁(yè)面,既然有幾萬(wàn)條。等接著往下看的時(shí)候發(fā)現(xiàn)幾乎都是同一IP抓取的,到底是何方神圣,能集中的那么厲害。慢慢發(fā)現(xiàn)看的時(shí)候發(fā)現(xiàn)一些baidu的字眼,看到百度就好辦了,先看一下這個(gè)IP是不是百度爬蟲的,發(fā)現(xiàn)之后好像是百度云觀測(cè)的爬蟲。
然后往回想一下之前在百度站長(zhǎng)平臺(tái)使用過網(wǎng)站體檢,發(fā)現(xiàn)體驗(yàn)度太低之后,去百度云觀測(cè)設(shè)置網(wǎng)站保護(hù),估計(jì)是因?yàn)檫@個(gè)原因。而返回這些錯(cuò)誤的404頁(yè)面基本都是不存在的頁(yè)面,而結(jié)合百度云觀測(cè)可以知道,這應(yīng)該是百度云觀測(cè)的測(cè)試蜘蛛,測(cè)試網(wǎng)站的安全性,它模仿木馬的攻擊去抓取網(wǎng)站鏈接,返回404證明攻擊不成功。而大量的404返回會(huì)照成百度蜘蛛的誤判,我們知道蜘蛛兌404是很反感的,所以接觸一些之后就馬上回頭,照成這次的停留時(shí)間基本0。
好了,困擾在心頭的結(jié)終于打開了,各位別看好像很輕松的就解決了,其中的辛苦想必只有自己知道,而單純解決這個(gè)問題都耗費(fèi)了幾天時(shí)間,因?yàn)椴皇敲看螌?duì)網(wǎng)站操作過的事情都能像電影一樣過一遍。而這也正是有趣的地方,除了是有涉及違規(guī)的網(wǎng)站外,正常的網(wǎng)站出現(xiàn)問題如何解決是對(duì)一個(gè)站長(zhǎng)的挑戰(zhàn),而如何處理這份挑戰(zhàn)就變的相當(dāng)?shù)挠腥ち恕?/p>
當(dāng)前文章:另類404錯(cuò)誤實(shí)操:互聯(lián)網(wǎng)站長(zhǎng)如何把網(wǎng)站出現(xiàn)的
文章分享:http://m.rwnh.cn/news/85780.html
成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站排名、虛擬主機(jī)、面包屑導(dǎo)航、做網(wǎng)站、商城網(wǎng)站、自適應(yīng)網(wǎng)站
聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來源: 創(chuàng)新互聯(lián)
猜你還喜歡下面的內(nèi)容