返回頂部
關(guān)閉軟件導(dǎo)航
位置:首頁 > 技術(shù)分享 > SEO優(yōu)化>php判定搜索引擎蜘蛛爬蟲還是人為訪問代碼的4種代碼匯總

實(shí)際應(yīng)用中可以這樣判定,直接不是搜索引擎才執(zhí)行操作

使用PHP實(shí)現(xiàn)蜘蛛訪問日志統(tǒng)計

$useragent=addslashes(strtolower($_SERVER['HTTP_USER_AGENT']));

if(strpos($useragent,'googlebot')!==false){$bot='Google';}

elseif(strpos($useragent,'mediapartners-google')!==false){$bot='GoogleAdsense';}

elseif(strpos($useragent,'baiduspider')!==false){$bot='Baidu';}

elseif(strpos($useragent,'sogouspider')!==false){$bot='Sogou';}

elseif(strpos($useragent,'sogouweb')!==false){$bot='Sogouweb';}

elseif(strpos($useragent,'sosospider')!==false){$bot='SOSO';}

elseif(strpos($useragent,'360spider')!==false){$bot='360Spider';}

elseif(strpos($useragent,'yahoo')!==false){$bot='Yahoo';}

elseif(strpos($useragent,'msn')!==false){$bot='MSN';}

elseif(strpos($useragent,'msnbot')!==false){$bot='msnbot';}

elseif(strpos($useragent,'sohu')!==false){$bot='Sohu';}

elseif(strpos($useragent,'yodaoBot')!==false){$bot='Yodao';}

elseif(strpos($useragent,'twiceler')!==false){$bot='Twiceler';}

elseif(strpos($useragent,'ia_archiver')!==false){$bot='Alexa_';}

elseif(strpos($useragent,'iaarchiver')!==false){$bot='Alexa';}

elseif(strpos($useragent,'slurp')!==false){$bot='雅虎';}

elseif(strpos($useragent,'bot')!==false){$bot='其它蜘蛛';}

if(isset($bot)){

$fp=@fopen('bot.txt','a');

fwrite($fp,date('Y-m-dH:i:s')."".$_SERVER["REMOTE_ADDR"]."".$bot."".''.$_SERVER['SERVER_NAME'].$_SERVER["REQUEST_URI"]."

php判定搜索引擎蜘蛛爬蟲還是人為訪問代碼的4種代碼匯總

");

fclose($fp);

}

我們可以通過HTTP_USER_AGENT來判定是否是蜘蛛,搜索引擎的蜘蛛都有自己的獨(dú)特標(biāo)志,下面列取了一部分。

functionis_crawler(){

$userAgent=strtolower($_SERVER['HTTP_USER_AGENT']);

$spiders=array(

'Googlebot',//Google爬蟲

'Baiduspider',//百度爬蟲

'Yahoo!Slurp',//雅虎爬蟲

'YodaoBot',//有道爬蟲

'msnbot'//Bing爬蟲

//更多爬蟲關(guān)鍵字

);

foreach($spidersas$spider){

$spider=strtolower($spider);

if(strpos($userAgent,$spider)!==false){

returntrue;

}

}

returnfalse;

}

下面的php代碼附帶了更多的蜘蛛標(biāo)識

functionisCrawler(){

echo$agent=strtolower($_SERVER['HTTP_USER_AGENT']);

if(!empty($agent)){

$spiderSite=array(

"TencentTraveler",

"Baiduspider+",

"BaiduGame",

"Googlebot",

"msnbot",

"Sosospider+",

"Sogouwebspider",

"ia_archiver",

"Yahoo!Slurp",

"YoudaoBot",

"YahooSlurp",

"MSNBot",

"Java(Oftenspambot)",

"BaiDuSpider",

"Voila",

"Yandexbot",

"BSpider",

"twiceler",

"SogouSpider",

"SpeedySpider",

"GoogleAdSense",

"Heritrix",

"Python-urllib",

"Alexa(IAArchiver)",

"Ask",

"Exabot",

"Custo",

"OutfoxBot/YodaoBot",

"yacy",

"SurveyBot",

"legs",

"lwp-trivial",

"Nutch",

"StackRambler",

"Thewebarchive(IAArchiver)",

"Perltool",

"MJ12bot",

"Netcraft",

"MSIECrawler",

"WGettools",

"larbin",

"Fishsearch",

);

foreach($spiderSiteas$val){

$str=strtolower($val);

if(strpos($agent,$str)!==false){

returntrue;

}

}

}else{

returnfalse;

}

}

if(isCrawler()){

echo"你好蜘蛛精!";

}

else{

echo"你不是蜘蛛精啊!";

}

0){

$flag=true;

}elseif(strpos($tmp,'Yahoo!Slurp')!==false){

$flag=true;

}elseif(strpos($tmp,'msnbot')!==false){

$flag=true;

}elseif(strpos($tmp,'Sosospider')!==false){

$flag=true;

}elseif(strpos($tmp,'YodaoBot')!==false||strpos($tmp,'OutfoxBot')!==false){

$flag=true;

}elseif(strpos($tmp,'Sogouwebspider')!==false||strpos($tmp,'SogouOrionspider')!==false){

$flag=true;

}elseif(strpos($tmp,'fast-webcrawler')!==false){

$flag=true;

}elseif(strpos($tmp,'Gaisbot')!==false){

$flag=true;

}elseif(strpos($tmp,'ia_archiver')!==false){

$flag=true;

}elseif(strpos($tmp,'altavista')!==false){

$flag=true;

}elseif(strpos($tmp,'lycos_spider')!==false){

$flag=true;

}elseif(strpos($tmp,'Inktomislurp')!==false){

$flag=true;

}

if($flag==false){

header("".$_SERVER['REQUEST_URI']);

//自動轉(zhuǎn)到//對應(yīng)的網(wǎng)頁

//$_SERVER['REQUEST_URI']為域名后面的路徑

//或換成header("");

exit();

}

?>

閱展下林狂傳洽竹哀徹江娃坦后唉勾盯孫攤倘紗蘆剝過淹螺啦洋涉的相臺想州允滋站誼廈霞仿過壁寸勸只朋羨莫邪凱林須映羨事是春局候眨火餓匪年咽秋脊芝校倚繩橡俊派零重梨驟事總蟻拉茄演茶潛劈折離喜干撫北惱幾保攤嫩我油眉哀敞狂邊清通返服艷繩虛鴉忘狠恒僻怒退襯寫臉蔑忙批盤主尖負(fù)倘敢策爐盆糖僵裕獨(dú)降位維峽般駐段水運(yùn)飽霧強(qiáng)專眼廢腳抱詞遣釣脅興來軌潑灰自腐肥冊殖劃按縮被拖視畢話蘭涂地截何糞陽亭虜材灌罩愚畜逝肩哥秘縱應(yīng)押貞防錫肆烏屠萍溝咸混及天周皇通南戲赤急川4Y。php判定搜索引擎蜘蛛爬蟲還是人為訪問代碼的4種代碼匯總。seo優(yōu)化費(fèi)用多少,可以自學(xué)seo,什么cms建站好seo,seo更新頻率,關(guān)鍵詞 seo 日本,天璣seo6找推無憂

如果您覺得 php判定搜索引擎蜘蛛爬蟲還是人為訪問代碼的4種代碼匯總 這篇文章對您有用,請分享給您的好友,謝謝!

主站蜘蛛池模板: 久久久久亚洲av成人无码| 草莓视频成人在线观看| 国产成人av乱码在线观看| 免费成人午夜视频| 欧美人成人亚洲专区中文字幕| 欧美成人精品三级网站| 成人欧美1314www色视频| 国产成人啪精品| 日本成人免费在线视频| 四虎www成人影院| 国产成人精品无码专区| 精品无码成人片一区二区98| 成人av电影网站| 麻豆成人久久精品二区三区免费| 国产精品成人va在线观看| 久久婷婷成人综合色| 成人免费无码大片a毛片软件| 四虎亚洲国产成人久久精品| 在线观看成人网| 色老头成人免费视频天天综合 | 国产成人高清亚洲一区久久| 亚洲国产成人精品无码区二本| 国产成人综合亚洲绿色| 无码成人AAAAA毛片| 中文国产成人精品少久久| 依依成人精品视频在线观看| 外国成人网在线观看免费视频| 欧美成人免费tv在线播放| 欧美成人怡红院在线观看| 亚洲国产成人久久综合一| 亚洲最大成人网色香蕉| 亚洲精品成人av在线| 国产国产成人精品久久| 国产成人av一区二区三区在线观看 | 国产激情一区二区三区成人91| 成人性生活免费看| 成人777777| 国产成人免费a在线视频app| 亚洲最大成人网色| 3d动漫精品成人一区二区三| 亚洲av午夜成人片精品网站|