潮人地東莞seseo新手面試題o博客小編下面跟大家分享關于seo新手：seo優化中的robots協議文件如何編輯？等問題，希望seo專員在做seo優化的過程中有所幫助，內容僅供參考。
seo優化中的robots協議文件的作用就是為了屏幕一些對網站排名沒有關聯的內容文件，讓搜索引擎蜘蛛抓取更加順暢，不過很多新手seo對robots的設置不是很了解。今天潮人地東莞seo博客就為大家介紹一下seo優化中的robots協議文件怎么編輯？希望對seo教程全集免費新手seo大家有所幫助。
robots協議一般普遍的robots協議書寫如下：
seo博客相關推薦閱讀：seo優化心得：提升新網站收錄的四個技巧
User西藏seo新手快速入門專業實操-agent:*
Disallow:/*?*
robots協議放哪兒呢？robots.txt這一文件名稱是固定不動的，務必那樣寫。無論大家做哪些的網站全是這一名字。robots協議文檔放到網站根目錄，說白了的網站根目錄便是http://網站域名/robots.txt可以立即瀏覽到的。
robots.txt的書寫標準：
Disallow:/*?*禁止訪問網址中全部的動態性網頁頁面。
Disallow:/jpg$嚴禁爬取網頁頁面全部的.jpg格式的照片。
Allow:/tmp這兒界定是容許爬尋tmp的全部文件目錄。
Allow:.htm$僅容許瀏覽以".htm"為后綴名的URL。
Allow:.gif$容許爬取網頁頁面和gif格式照片。
User-agent:*這兒的*意味著的全部的百度搜索引擎類型，*是一個使用通配符,容許搜索引擎蜘蛛瀏覽全部網頁頁面。
Disallow:/admin/這兒界定是嚴禁爬尋admin文件目錄下邊的文件目錄。
Disallow:/require/這兒界定是嚴禁爬尋require文件目錄下邊的文件目錄。
Disallow:/cgi-bin/*.htm禁止訪問/cgi-bin/文件目錄下的全部以".htm"為后綴名的URL(包括根目錄)。
Disallow:/abc/這兒界定是嚴禁爬尋abc全部文件目錄。
以上就是“seo優化中的robots協議文件怎么編輯？”的相關介紹，希望對大家有所幫助。潮人地東莞seo博客會不定期更新網站建設、網站seo優化、seo工具、seo外包、網站優化方案、網絡推廣等方面知識，供大家參考、了解，如果大家還想要了解更多這些方面的知識，可以關注和收藏我們潮人地東莞seo博客。
以上是潮人地東莞seo博客跟大家分享關于seo新手：seo優化中的robots協議文件如何編輯？等問題，希望能對大家有所幫助，若有不足之處，請諒解，我們大家可以一起討論關于網站seo優化排名的技巧，一起學習，以上內容僅供參考。
