用DEDECMS建站的站長(zhǎng)會(huì)發(fā)現(xiàn)，DEDECMS自帶的robots.txt文件設(shè)置很簡(jiǎn)單(開(kāi)發(fā)者基于每個(gè)網(wǎng)站的目錄結(jié)構(gòu)和優(yōu)化目的不同的考慮)，并不能完全滿(mǎn)足網(wǎng)站的優(yōu)化要求，那怎樣才能結(jié)合自己網(wǎng)站的情況，做好robots.txt優(yōu)化呢?以下介紹一點(diǎn)自己的想法，僅供參考。
適用于未偽靜態(tài)的DEDECMS網(wǎng)站。
User-agent: * Disallow: /dede 管理后臺(tái)目錄，需要改名，具體設(shè)置后面具體講 Disallow: /include 程序核心文件目錄 Disallow: /member 會(huì)員管理目錄，有些文件可以開(kāi)放 Disallow: /plus 插件及輔助功能目錄 ，有些文件可以開(kāi)放，如search.php Disallow: /templets 默認(rèn)模板存放目錄 Disallow: /data 系統(tǒng)緩存或其它可寫(xiě)入數(shù)據(jù)存放目錄 Disallow: /uploads 上傳下載文件保存目錄,不想搜索引擎引用圖片的話，禁止 Disallow: /images 系統(tǒng)默認(rèn)模板圖片存放目錄 Disallow: /index.php 網(wǎng)站默認(rèn)首頁(yè)，靜態(tài)化的話，最好禁止 Disallow: /404.html Allow: /plus/search.php 開(kāi)放禁止目錄里的具體文件 ...
