nofollow和robots都有禁止讓搜索引擎抓取的含義，很多人總把nofollow和robots搞混淆了，下面就來(lái)說(shuō)說(shuō)nofollow和robots有什么區(qū)別？

在實(shí)際優(yōu)化工作之中，我們經(jīng)常會(huì)遇到一個(gè)頁(yè)面我們不想其被搜索引擎收錄的情況，在這種情況下，使用robots非常便捷，一勞永逸。因?yàn)槟阒灰趓obots中對(duì)該頁(yè)面設(shè)置了屏蔽抓取以后，不管你的這個(gè)頁(yè)面在網(wǎng)站中出現(xiàn)了多少次，，都不會(huì)被爬蟲(chóng)抓取以及收錄；而如果這種情況下使用nofollow標(biāo)簽來(lái)進(jìn)行屏蔽的話，你會(huì)發(fā)現(xiàn)網(wǎng)站維護(hù)起來(lái)會(huì)異常麻煩，因?yàn)榫W(wǎng)站中的新頁(yè)面難免會(huì)有該鏈接，生成新的頁(yè)面都要加一次nofollow標(biāo)簽，一旦有一次遺漏了，就很有可能會(huì)被搜索引擎給收錄了。還有一種情況則相反，有一個(gè)頁(yè)面我們希望它正常被收錄獲得排名，但是因?yàn)橛械捻?yè)面中關(guān)于此鏈接的重復(fù)鏈接太多了，會(huì)造成不好的影響，這時(shí)候就不適合用robots來(lái)屏蔽了，而是應(yīng)該使用nofollow標(biāo)簽對(duì)部分重復(fù)鏈接進(jìn)行屏蔽。

nofollow針對(duì)的是訪問(wèn)路徑進(jìn)行屏蔽，擋住百度蜘蛛等爬蟲(chóng)的去路，而robots如同一個(gè)平臺(tái)，我們?cè)谶@個(gè)平臺(tái)上對(duì)網(wǎng)站中的部分頁(yè)面進(jìn)行登記過(guò)了，以后但凡遇到這個(gè)鏈接頁(yè)面，你都不要再多管了。這里需要注意的是，robots只針對(duì)站內(nèi)頁(yè)面有效，不能屏蔽站外的鏈接，而nofollow沒(méi)有這個(gè)限制，這也是nofollow和robots比較重要的一個(gè)區(qū)別。

robots不僅可以屏蔽站內(nèi)的頁(yè)面還可以屏蔽特定蜘蛛及其他網(wǎng)站爬蟲(chóng)程序的訪問(wèn)。比如有的時(shí)候，可能你的網(wǎng)站帶寬較小，而在網(wǎng)站日志中看到某個(gè)沒(méi)有用處的蜘蛛頻繁性地訪問(wèn)你網(wǎng)站，從而讓服務(wù)器過(guò)于擁擠以至崩潰，這時(shí)就可以利用robots限制其訪問(wèn)權(quán)限。除了可以限制爬蟲(chóng)的訪問(wèn)權(quán)限以外，還可以在robots中載明sitemap地址，更有利于蜘蛛注意到sitemap并且快速抓取網(wǎng)站的新內(nèi)容以及更新的頁(yè)面。

網(wǎng)頁(yè)標(biāo)題：nofollow和robots有什么區(qū)別
網(wǎng)頁(yè)URL：http://m.rwnh.cn/news/250189.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián)，為您提供App開(kāi)發(fā)、網(wǎng)站內(nèi)鏈、手機(jī)網(wǎng)站建設(shè)、網(wǎng)站設(shè)計(jì)公司、網(wǎng)站設(shè)計(jì)、網(wǎng)站制作

廣告

聲明：本網(wǎng)站發(fā)布的內(nèi)容（圖片、視頻和文字）以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主，如果涉及侵權(quán)請(qǐng)盡快告知，我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng)，如需處理請(qǐng)聯(lián)系客服。電話：028-86922220；郵箱：631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載，或轉(zhuǎn)載時(shí)需注明來(lái)源： 創(chuàng)新互聯(lián)