欧美一级特黄大片做受成人-亚洲成人一区二区电影-激情熟女一区二区三区-日韩专区欧美专区国产专区

詳解的robots.txt協(xié)議文件寫法

2013-06-11    分類: 網(wǎng)站建設(shè)

詳解的robots.txt協(xié)議文件寫法!多建站系統(tǒng),在建成網(wǎng)站后,都網(wǎng)站根目錄,默認(rèn)有robots.txt協(xié)議文件。在網(wǎng)站優(yōu)化競爭日益加劇的今天,原本設(shè)立之初無優(yōu)化因素的robots.txt文件也被大化使用,掌握其寫法,有備無患。

詳解的robots.txt協(xié)議文件寫法

一:robots.txt […]

很多建站系統(tǒng),在建成網(wǎng)站后,都網(wǎng)站根目錄,默認(rèn)有robots.txt協(xié)議文件。在網(wǎng)站優(yōu)化競爭日益加劇的今天,原本設(shè)立之初無優(yōu)化因素的robots.txt文件也被大化使用,掌握其寫法,有備無患。

一:robots.txt協(xié)議文件有什么用?

搜索引擎訪問一個網(wǎng)站的時候,最先訪問的文件就是robots.txt。她告訴搜索引擎蜘蛛,哪些網(wǎng)站頁面可以被抓取,哪些禁止抓取。表面來看,這個功能作用有限。從搜索引擎優(yōu)化的角度來看,可以通過屏蔽頁面,達(dá)到集中權(quán)重的作用,這,也是優(yōu)化人員最為看重的地方。

以某seo站點(diǎn)為例,其robots.txt文件如圖所示:

二:網(wǎng)站設(shè)置robots.txt的幾個原因。

1:設(shè)置訪問權(quán)限保護(hù)網(wǎng)站安全。

2:禁止搜索引擎爬取無效頁面,集中權(quán)值到主要頁面。

三:怎么用標(biāo)準(zhǔn)寫法書寫協(xié)議?

有幾個概念需掌握。

User-agent表示定義哪個搜索引擎,如User-agent:Baiduspider,定義百度蜘蛛。

Disallow表示禁止訪問。

Allow表示運(yùn)行訪問。

通過以上三個命令,可以組合多種寫法,允許哪個搜索引擎訪問或禁止哪個頁面。

四:哪些時候需要使用該協(xié)議。

1:無用頁面,很多網(wǎng)站都有聯(lián)系我們,用戶協(xié)議等頁面,這些頁面相對于搜索引擎優(yōu)化來講,作用不大,此時需要使用Disallow命令禁止這些頁面被搜索引擎抓取。

2:動態(tài)頁面,企業(yè)類型站點(diǎn)屏蔽動態(tài)頁面,有利于網(wǎng)站安全。且多個網(wǎng)址訪問同一頁面,會造成權(quán)重分散。因此,一般情況下,屏蔽動態(tài)頁面,保留靜態(tài)或偽靜態(tài)頁面。

3:網(wǎng)站后臺頁面,網(wǎng)站后臺也可以歸類于無用頁面,禁止收錄有百益而無一害。

五:robots.txt文件放在那里?

此文件需放置在網(wǎng)站的根目錄,且對字母大小有限制,文件名必須為小寫字母。所有的命令第一個字母需大寫,其余的小寫。且命令之后要有一個英文字符空格。

以上就是robots.txt協(xié)議文件寫法的相關(guān)內(nèi)容介紹,希望今天分享內(nèi)容可以幫助大家更加了解robots.txt協(xié)議文件寫法。推薦閱讀:學(xué)習(xí)SEO需要知道哪些代碼?

網(wǎng)站名稱:詳解的robots.txt協(xié)議文件寫法
文章網(wǎng)址:http://www.aaarwkj.com/news/1615.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供手機(jī)網(wǎng)站建設(shè)外貿(mào)網(wǎng)站建設(shè)、域名注冊、企業(yè)建站、外貿(mào)建站、網(wǎng)站內(nèi)鏈

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請盡快告知,我們將會在第一時間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場,如需處理請聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時需注明來源: 創(chuàng)新互聯(lián)

成都網(wǎng)站建設(shè)
欧美日韩中文字幕精品| 亚洲精品在线观看av| 禁区正片免费看完整国产 | 日韩视频专区一区二区| 国产另类极品熟女露脸自拍| 精品一区二区三区推荐| 久久国产精品亚洲av四虎| 成人免费视频国产免费| 国产丝袜美腿一二三区| 2020年最新国产三级网站| 午夜免费视频观看在线| 中文字幕一区二区久久综合| 91国产熟女自拍视频| 性色av人妻中文一区二区| 国产在线观看不卡视频| 持续侵犯人妻中文字幕| 欧美私人影院—区二区日本| 亚洲区一区二区三区亚洲| 精品一二三四五区亚洲乱码| 日本一区二区三区高清| 美国一级二级三级黄片| 中文字幕精品人妻丝袜| 亚洲精品熟女一区二区三区| 一区二区三区在线观看日本视频| 国产丝袜美腿视频亚洲综合| 91欧美一区二区在线视频| 三级精品一区二区三区| 中文在线中文天堂黄色片| 日韩精品一区三区二区| 青青草原在线视频一区| 久久精品资源综合网| 亚洲国产日韩欧美在线| 亚洲各类熟女们中文字幕| 欧美日韩一区二区三区四区在线观看| 九九视频免费在线播放| 日韩精品电影一二三| 婷婷国产成人精品一区二| 国产无套内射三级视频| 国产精品av一区二区在线| 日本久久精品免费网站| 欧美日韩国产精品高清|