很多做seo的， 經(jīng)常會(huì)問為什么我的頁(yè)面沒有被收錄，為什么我的快照還是上個(gè)星期的，怎么百度還不更新我的站點(diǎn)。這些都是剛?cè)腴T問的問題。做seo的人都知道，知道搜索引擎的規(guī)律很重要。你要知道蜘蛛是否來過你的站點(diǎn)，什么時(shí)候來 過，是哪家蜘蛛。這些都有利于你針對(duì)性的做優(yōu)化。

很多服務(wù)器支持蜘蛛爬行日志，但是大部分站長(zhǎng)都是虛擬機(jī)，有的空間并不支持記錄蜘蛛爬行。這時(shí)候就需要我們編寫代碼來記錄蜘蛛的活動(dòng)規(guī)律。

在網(wǎng)上找了很多的代碼都不能正確使用，或者功能不完善。

只要自己研究起來�？偨Y(jié)出一下一套代碼，百分百保證使用。

<?php

function get_naps_bot()

{

$useragent = strtolower($_SERVER['HTTP_USER_AGENT']);

if (strpos($useragent, ‘googlebot’) !== false){

return ‘Googlebot’;

}

if (strpos($useragent, ‘msnbot’) !== false){

return ‘MSNbot’;

}

if (strpos($useragent, ’slurp’) !== false){

return ‘Yahoobot’;

}

if (strpos($useragent, ‘baiduspider’) !== false){

return ‘Baiduspider’;

}

if (strpos($useragent, ’sohu-search’) !== false){

return ‘Sohubot’;

}

if (strpos($useragent, ‘lycos’) !== false){

return ‘Lycos’;

}

if (strpos($useragent, ‘robozilla’) !== false){

return ‘Robozilla’;

}

return false;

}

function nowtime(){

$date=date(“Y-m-d.G:i:s”);

return $date;

}

$searchbot = get_naps_bot();

if ($searchbot) {

$tlc_thispage = addslashes($_SERVER['HTTP_USER_AGENT']);

$url=$_SERVER['HTTP_REFERER'];

$file=”robotslogs.txt”;

$time=nowtime();

$data=fopen($file,”a”);

$PR=”$_SERVER[REQUEST_URI]“;

fwrite($data,”Time:$time robot:$searchbot URL:$tlc_thispage\n page:$PR\r\n”);

fclose($data);

}

?>

以上代碼比網(wǎng)上流傳的版本多了個(gè)記錄搜索引擎請(qǐng)求頁(yè)面記錄，可以看到蜘蛛每次來爬取的是那個(gè)頁(yè)面。更加利于分析蜘蛛對(duì)網(wǎng)站的權(quán)重以及對(duì)不同欄目和頁(yè) 面的青睞。

Seo最終的是從實(shí)際出發(fā)，用數(shù)據(jù)說話，而不是憑空想象。一切優(yōu)化的基礎(chǔ)都是數(shù)據(jù)，一切優(yōu)化的目的也是為了得到數(shù)據(jù)。

本文出自ceo 風(fēng)向標(biāo) 轉(zhuǎn)載請(qǐng)注明出自http://www.ceologo.com/seo/371.html

標(biāo)簽： 百度 SEO php 

版權(quán)申明：本站文章部分自網(wǎng)絡(luò)，如有侵權(quán)，請(qǐng)聯(lián)系：west999com@outlook.com
特別注意：本站所有轉(zhuǎn)載文章言論不代表本站觀點(diǎn)！
本站所提供的圖片等素材，版權(quán)歸原作者所有，如需使用，請(qǐng)與原作者聯(lián)系。