中文字幕日韩精品一区二区免费_精品一区二区三区国产精品无卡在_国精品无码专区一区二区三区_国产αv三级中文在线

詳解的robots.txt協(xié)議文件寫(xiě)法

2013-06-11    分類(lèi): 網(wǎng)站建設(shè)

詳解的robots.txt協(xié)議文件寫(xiě)法!多建站系統(tǒng),在建成網(wǎng)站后,都網(wǎng)站根目錄,默認(rèn)有robots.txt協(xié)議文件。在網(wǎng)站優(yōu)化競(jìng)爭(zhēng)日益加劇的今天,原本設(shè)立之初無(wú)優(yōu)化因素的robots.txt文件也被大化使用,掌握其寫(xiě)法,有備無(wú)患。

詳解的robots.txt協(xié)議文件寫(xiě)法

一:robots.txt […]

很多建站系統(tǒng),在建成網(wǎng)站后,都網(wǎng)站根目錄,默認(rèn)有robots.txt協(xié)議文件。在網(wǎng)站優(yōu)化競(jìng)爭(zhēng)日益加劇的今天,原本設(shè)立之初無(wú)優(yōu)化因素的robots.txt文件也被大化使用,掌握其寫(xiě)法,有備無(wú)患。

一:robots.txt協(xié)議文件有什么用?

搜索引擎訪(fǎng)問(wèn)一個(gè)網(wǎng)站的時(shí)候,最先訪(fǎng)問(wèn)的文件就是robots.txt。她告訴搜索引擎蜘蛛,哪些網(wǎng)站頁(yè)面可以被抓取,哪些禁止抓取。表面來(lái)看,這個(gè)功能作用有限。從搜索引擎優(yōu)化的角度來(lái)看,可以通過(guò)屏蔽頁(yè)面,達(dá)到集中權(quán)重的作用,這,也是優(yōu)化人員最為看重的地方。

以某seo站點(diǎn)為例,其robots.txt文件如圖所示:

二:網(wǎng)站設(shè)置robots.txt的幾個(gè)原因。

1:設(shè)置訪(fǎng)問(wèn)權(quán)限保護(hù)網(wǎng)站安全。

2:禁止搜索引擎爬取無(wú)效頁(yè)面,集中權(quán)值到主要頁(yè)面。

三:怎么用標(biāo)準(zhǔn)寫(xiě)法書(shū)寫(xiě)協(xié)議?

有幾個(gè)概念需掌握。

User-agent表示定義哪個(gè)搜索引擎,如User-agent:Baiduspider,定義百度蜘蛛。

Disallow表示禁止訪(fǎng)問(wèn)。

Allow表示運(yùn)行訪(fǎng)問(wèn)。

通過(guò)以上三個(gè)命令,可以組合多種寫(xiě)法,允許哪個(gè)搜索引擎訪(fǎng)問(wèn)或禁止哪個(gè)頁(yè)面。

四:哪些時(shí)候需要使用該協(xié)議。

1:無(wú)用頁(yè)面,很多網(wǎng)站都有聯(lián)系我們,用戶(hù)協(xié)議等頁(yè)面,這些頁(yè)面相對(duì)于搜索引擎優(yōu)化來(lái)講,作用不大,此時(shí)需要使用Disallow命令禁止這些頁(yè)面被搜索引擎抓取。

2:動(dòng)態(tài)頁(yè)面,企業(yè)類(lèi)型站點(diǎn)屏蔽動(dòng)態(tài)頁(yè)面,有利于網(wǎng)站安全。且多個(gè)網(wǎng)址訪(fǎng)問(wèn)同一頁(yè)面,會(huì)造成權(quán)重分散。因此,一般情況下,屏蔽動(dòng)態(tài)頁(yè)面,保留靜態(tài)或偽靜態(tài)頁(yè)面。

3:網(wǎng)站后臺(tái)頁(yè)面,網(wǎng)站后臺(tái)也可以歸類(lèi)于無(wú)用頁(yè)面,禁止收錄有百益而無(wú)一害。

五:robots.txt文件放在那里?

此文件需放置在網(wǎng)站的根目錄,且對(duì)字母大小有限制,文件名必須為小寫(xiě)字母。所有的命令第一個(gè)字母需大寫(xiě),其余的小寫(xiě)。且命令之后要有一個(gè)英文字符空格。

以上就是robots.txt協(xié)議文件寫(xiě)法的相關(guān)內(nèi)容介紹,希望今天分享內(nèi)容可以幫助大家更加了解robots.txt協(xié)議文件寫(xiě)法。推薦閱讀:學(xué)習(xí)SEO需要知道哪些代碼?

網(wǎng)站名稱(chēng):詳解的robots.txt協(xié)議文件寫(xiě)法
文章網(wǎng)址:http://m.rwnh.cn/news/1615.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供手機(jī)網(wǎng)站建設(shè)外貿(mào)網(wǎng)站建設(shè)、域名注冊(cè)企業(yè)建站、外貿(mào)建站網(wǎng)站內(nèi)鏈

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶(hù)投稿、用戶(hù)轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀(guān)點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話(huà):028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

成都網(wǎng)站建設(shè)
海原县| 玉树县| 鲁山县| 肥西县| 齐齐哈尔市| 保靖县| 望江县| 和平区| 临西县| 镇康县| 运城市| 奉贤区| 库车县| 怀宁县| 尚义县| 安陆市| 确山县| 景泰县| 仁怀市| 灵山县| 灵川县| 攀枝花市| 尼勒克县| 塔河县| 桃江县| 兰西县| 普格县| 东方市| 新建县| 荔波县| 鄂托克旗| 潼关县| 靖西县| 武宁县| 翁牛特旗| 右玉县| 察隅县| 茌平县| 舒城县| 罗江县| 满洲里市|