SEO總結(jié)：robots細(xì)節(jié)優(yōu)化都包括哪些地方（二）
2019-03-18 來(lái)源：zijiren.net
前一段在SEO總結(jié)：robots細(xì)節(jié)優(yōu)化都包括哪些地方（一）和大家談了robots細(xì)節(jié)優(yōu)化的幾個(gè)方面，不僅僅讓更多站長(zhǎng)注意到了以前從來(lái)注意過(guò)的問(wèn)題，也讓我自己的SEO水平得到了進(jìn)一步的提高，畢竟SEO水平都是靠一點(diǎn)一滴累積而來(lái)。上篇文章分別與大家介紹了六個(gè)方面，分別是user-agent的數(shù)量問(wèn)題、spider蜘蛛大小寫(xiě)問(wèn)題、allow與disallow順序、反斜杠、#表示注釋、不要出現(xiàn)空格等，今天接著上篇文章把剩下的幾點(diǎn)分享完。
文件目錄大小寫(xiě)問(wèn)題
robots文件名到底對(duì)大小寫(xiě)是否區(qū)分，相信很多站長(zhǎng)也沒(méi)有一個(gè)標(biāo)準(zhǔn)的答案。雖然res標(biāo)準(zhǔn)忽略大小寫(xiě)，但對(duì)于目錄與文件名而言，卻是大小寫(xiě)敏感的。“user-agent”和“Disallow”指令本身用大小寫(xiě)都可以，但對(duì)于其聲明的目錄或文件名卻一定要注意大小寫(xiě)的問(wèn)題。因?yàn)槿绻帘瘟舜髮?xiě)，蜘蛛有可能會(huì)抓小寫(xiě)，對(duì)網(wǎng)站的收錄造成影響，例如：
Disallow: /abc.htm
會(huì)攔截http://www.abc.com/abc.htm
卻允許http://www.abc.com/Abc.htm
所以在一些IIS服務(wù)器可能出現(xiàn)大小寫(xiě)目錄的問(wèn)題時(shí)，可以通過(guò)此方法得到圓滿解決。
包含同類meta問(wèn)題
一個(gè)正常的頁(yè)面如果包含了多個(gè)同類型meta標(biāo)簽，搜索引擎蜘蛛會(huì)累加meta的內(nèi)容進(jìn)行取值。舉個(gè)簡(jiǎn)單的例子，對(duì)下面兩條語(yǔ)句來(lái)說(shuō)：
搜索引擎將會(huì)把兩者合并，最終理解成：
取最強(qiáng)參數(shù)的問(wèn)題
有時(shí)候meta標(biāo)簽里邊的值出現(xiàn)沖突，那么對(duì)于搜索引擎來(lái)說(shuō)就會(huì)采納限制性較強(qiáng)的參數(shù)為最終值，很多時(shí)候這個(gè)問(wèn)題可以避免，但是有時(shí)候不小心寫(xiě)多了meta標(biāo)簽，特別對(duì)于一些大網(wǎng)站，更要注意。舉個(gè)例子，例如下邊的兩個(gè)標(biāo)簽：
那么搜索引擎最終會(huì)會(huì)選擇noindex的取值，因?yàn)樗南拗菩砸鹊诙䝼�(gè)高，這個(gè)類似優(yōu)先級(jí)問(wèn)題。
即有robots又有meta問(wèn)題
如果一個(gè)網(wǎng)站里邊既存在robots.txt文件，同時(shí)頁(yè)面頭部又寫(xiě)了meta標(biāo)簽，而當(dāng)二者存在沖突，那么對(duì)于Googel來(lái)說(shuō)會(huì)服從限制較嚴(yán)的規(guī)則，即在robots.txt中阻止了對(duì)一個(gè)頁(yè)面的檢索，那么Google就不會(huì)爬到這個(gè)頁(yè)面，所以也就不會(huì)讀到這個(gè)頁(yè)面上的meta標(biāo)簽。而如果robots.txt里允許檢索，meta中禁止，那么Goolge會(huì)到達(dá)這個(gè)頁(yè)面，并在讀到meta后停止爬行。
好了，本文就到這里吧，有一些是自己實(shí)實(shí)在在碰到的問(wèn)題，而另外一些則是查閱網(wǎng)上的資料進(jìn)行的總結(jié)，總之，能把robots里邊的小細(xì)節(jié)和大家總結(jié)并分享完，感覺(jué)很有意義。SEO雖然是個(gè)漫長(zhǎng)的過(guò)程，但是認(rèn)真去體會(huì)里邊涉及到的東西，同樣也是一種很高的收獲。
本文來(lái)自深圳網(wǎng)站建設(shè)，網(wǎng)址：http://www.zijiren.net，轉(zhuǎn)載請(qǐng)保留鏈接， 謝謝！
標(biāo)簽： robots文件 SEO優(yōu)化 spider蜘蛛
版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請(qǐng)聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請(qǐng)與原作者聯(lián)系。
