網(wǎng)站制作企業(yè)酷站科技(www.ttscar.com.cn)：錯誤觀念1.Allow包括的范疇超出Disallow，而且部位在Disallow前邊。
例如有很多人那樣寫：
User-agent: *
Allow: /
Disallow: /mulu/
想讓全部搜索引擎蜘蛛爬取本網(wǎng)站除/mulu/下邊的url以外的全部網(wǎng)頁頁面，嚴(yán)禁爬取/mulu/下邊的全部url。
SEO網(wǎng)址優(yōu)化百度搜索引擎搜索引擎蜘蛛實(shí)行的標(biāo)準(zhǔn)是從上向下，那樣會導(dǎo)致第二句指令無效。換句話說嚴(yán)禁爬取/mulu/文件目錄這條標(biāo)準(zhǔn)是失效的。正確的是Disallow應(yīng)當(dāng)在Allow以上，那樣才會起效。
錯誤觀念2.Disallow指令和Allow指令以后沒有以斜線”/”開始。
這一也非常容易被忽略，例如有些人那樣寫Disallow: 123.html ，這類是沒有實(shí)際效果的。斜線”/”表明的是文檔針對網(wǎng)站根目錄的部位，假如沒有得話，當(dāng)然沒法分辨url是哪個(gè)，因此是不正確的。
恰當(dāng)?shù)膽?yīng)該是Disallow: /123.html，那樣才可以屏蔽掉/123.html這一文檔，這條標(biāo)準(zhǔn)才可以起效。
錯誤觀念3.屏蔽掉的文件目錄后沒有帶斜線”/”。
也就是例如想屏蔽掉爬取/mulu/這一文件目錄，有的人那樣寫Disallow: /mulu。那麼那樣是不是恰當(dāng)呢?
最先那樣寫(Disallow: /mulu)的確能夠 屏蔽掉/mulu/下邊的全部url，但是另外也屏蔽掉相近/mulu123.html這類開始為/mulu的全部網(wǎng)頁頁面，實(shí)際效果相當(dāng)于Disallow: /mulu*。
恰當(dāng)?shù)淖鞣ㄊ牵偃缰粸槠帘蔚粑募夸洠屈N務(wù)必在末尾攜帶斜線”/”。
文中公布于北京市網(wǎng)站制作企業(yè)酷站科技http://www.ttscar.com.cn">
來源于申明：以上內(nèi)容一部分(包括照片、文本)來自互聯(lián)網(wǎng)，若有侵權(quán)行為，請立即與本網(wǎng)站聯(lián)絡(luò)（010-57218159）。
如沒特殊注明，文章均為酷站科技原創(chuàng),轉(zhuǎn)載請注明來自http://www.ttscar.com.cn/jianzhanzhishi/3880.html
服務(wù)熱線
18911184380
