WordPress站點Robots.txt的寫法

[重要通告]如您遇疑難雜癥,本站支持知識付費業務,掃右邊二維碼加博主微信,可節省您寶貴時間哦!

做站的客官都知道搜索引擎機器人訪問網站時，首先會尋找站點根目錄有沒有 robots.txt文件，如果有這個文件就根據文件的內容確定收錄范圍，

如果沒有就按默認訪問以及收錄所有頁面。知道Robots協議的作用后，下面具體說一下WordPress站點如何編寫robots.txt文件：

WordPress站點默認在瀏覽器中輸入：http://你的域名/robots.txt，會顯示如下內容：

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

這是WordPress自動生成的，期意告訴搜索引擎不要抓取后臺程序文件的含義；

下面我們來一個全面的，各位客官往下看；

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-content/
Disallow: /wp-includes/
Disallow: /*/comment-page-*
Disallow: /*?replytocom=*
Disallow: /category/*/page/
Disallow: /tag/*/page/
Disallow: /*/trackback
Disallow: /feed
Disallow: /*/feed
Disallow: /comments/feed
Disallow: /?s=*
Disallow: /*/?s=*\
Disallow: /*?*
Disallow: /attachment/

我們來解說一下這些文件的意思：

1、Disallow: /wp-admin/、Disallow: /wp-content/和Disallow: /wp-includes/

用于告訴搜索引擎不要抓取后臺程序文件頁面。

2、Disallow: /*/comment-page-*和Disallow: /*?replytocom=*

禁止搜索引擎抓取評論分頁等相關鏈接。

3、Disallow: /category/*/page/和Disallow: /tag/*/page/

禁止搜索引擎抓取收錄分類和標簽的分頁。

4、Disallow: /*/trackback

禁止搜索引擎抓取收錄trackback等垃圾信息

5、Disallow: /feed、Disallow: /*/feed和Disallow: /comments/feed

禁止搜索引擎抓取收錄feed鏈接，feed只用于訂閱本站，與搜索引擎無關。

6、Disallow: /?s=*和Disallow: /*/?s=*\

禁止搜索引擎抓取站內搜索結果

7、Disallow: /*?*

禁止搜索抓取動態頁面

8、Disallow: /attachment/

禁止搜索引擎抓取附件頁面，比如毫無意義的圖片附件頁面。

還一種寫法就是如下：

User-agent: *
Allow: /wp-content/
Allow: /*.png*
Allow: /*.jpg*
Allow: /*.jpeg*
Allow: /*.gif*
Allow: /*.bmp*
Disallow: /wp-admin/
Disallow: /wp-includes/

1、給圖片取個和主題相關、帶目標關鍵字的文件名。

2、在圖片的alt標簽屬性中加入關鍵字。

3、圖片內容和網頁內容盡量相關，讓用戶一眼看出是他想要的。

4、在圖片周圍增加描述信息，比如在圖片下面加一段描述圖片的文字。

5、最重要的一點，文章得有圖片！