您當前的位置是：首頁->做網站知識->做網站

巧用robots.txt來做網站優化

　　現如今人們做網站都是使用的開源的網站程序，而dz或者wp之類的程序或多或少都會有一定的漏洞，合理的解決里面的漏洞會讓我們的網站的收錄提高好幾倍，因為百度給予一個網站的抓取配額是有限的。長沙做網站建議大家巧用robots.txt來做網站優化。

　　站內的動態鏈接

　　靜態頁面一般情況下比動態的頁面好收錄，在排名方面也比較有優勢（唯一的缺點就是占用網站資源較大），像dz程序我們一般都把它設置成偽靜態，那么在這個時候就非常容易出現靜態和動態頁面共存的情況，我們都要把靜態頁面徹底屏蔽掉。

　　在robots協議中有一個命令Disallow:xx，這個命令就是告訴蜘蛛（不分百度和其他搜索引擎）不要抓取我所指定的頁面，對于偽靜態網站來說我們肯定不希望收錄動態的頁面（因為兩種頁面共存，就會導致重復頁面過多，會有降權的風險哦?。覀冊谶@里可以使用Disallow: /*?*命令，這個命令就是指不抓取網站中所有的的動態鏈接。

　　死鏈接或者無用的鏈接

　　如果我們的網站由于失誤導致了很多的死鏈接，雖然我們可以使用百度站長工具把死鏈接刪除掉，但是蜘蛛爬取的路線在短時間內不會改變，這個時候我們可以使用robots來把站內的死鏈接全部屏蔽掉，例如：Disallow: /a/jiaocheng/。

　　robots.txt文件命令大全

　　首先我們必須要在網站的根目錄下面創建一個robots.txt的文件，然后依照命令來寫就可以了。

　　1、允許所有搜索引擎訪問

　　User-agent: *

　　Disallow:

　　或者

　　User-agent: *

　　Allow: /

　　2、禁止所有搜索引擎訪問

　　User-agent: *

　　Disallow: /

　　或者

　　User-agent: *

　　allow:

　　3、禁止所有搜索引擎訪問網站中的幾個部分，在這里我用a、b、c目錄來代替

　　User-agent: *

　　Disallow: /a/

　　Disallow: /b/

　　Disallow: /c/

　　如果是允許，則是

　　Allow: /a/

　　Allow: /b/

　　Allow: /c/

　　4、禁止某個搜索引擎的訪問，我用w來代替

　　User-agent: w

　　Disallow: /

　　或

　　User-agent: w

　　Disallow: /d/*.htm

　　在Disallow:后面加 /d/*.htm的意思是禁止訪問/d/目錄下的所有以”.htm”為后綴的URL，包含子目錄。

　　5、只允許某個搜索引擎的訪問，我用e來代替

　　User-agent: e

　　Disallow:

　　在Disallow：后面不加任何東西，意思是僅允許e訪問該網站。

　　6、使用”$”限制訪問url

　　User-agent: *

　　Allow: .htm$

　　Disallow: /

　　意思是僅允許訪問以”.htm”為后綴的URL

　　7、禁止訪問網站中所有的動態頁面

　　User-agent: *

　　Disallow: /*?*

　　8、禁止搜索引擎F抓取網站上所有圖片

　　User-agent: F

　　Disallow: .jpg$

　　Disallow: .jpeg$

　　Disallow: .gif$

　　Disallow: .png$

　　Disallow: .bmp$

　　意思是只允許引擎抓取網頁，禁止抓取任何圖片（嚴格來說，是禁止抓取jpg、jpeg、gif、png、bmp格式的圖片。）

　　9、只允許搜索引擎E抓取網頁和.gif格式圖片

　　User-agent: E

　　Allow: .gif$

　　Disallow: .jpg$

　　Disallow: .jpeg$

　　Disallow: .png$

　　Disallow: .bmp$

　　意思是只允許抓取網頁和gif格式圖片，不允許抓取其他格式圖片

　　長沙做網站總結：合理的使用robots命令可以使網站更快的展現在搜索引擎中。

最新簽約客戶
最新上線網站

為什么選擇長沙快付公司？

√ 8年專業做網站經驗
幫助您解決各種需求，并得到滿意方案

√ 效果滿意后付款
預付30%定金，效果讓您滿意后，付全款

√ 資深用戶體驗設計師
秉承"一切以用戶價值為依歸"理念，重視用戶體驗，專為企業需求進行定制

√ 采用國際標準結構建站
DIV+CSS國際標準構建網頁，可有效提高網站訪問速度、提高網站頁面的可維護

√ 實現網絡營銷[SEO]最大化
網站程序中融入SEO，有效降低企業成本