返回頂部
關閉軟件導航
位置:首頁 > 技術分享 > SEO優化>天線貓_網站SEO優化-天線貓教你快速識別百度蜘蛛

經常聽到天線貓朋友問,百度蜘蛛是什么?XXX近百度蜘蛛來的太頻繁服務器抓爆了!XXX近百度蜘蛛都不來了天線貓優化怎么辦?還有很多站點想得到百度蜘蛛的IP段,想把IP加入白名單,但IP地址范圍動態變化不固定,我們無法對外公布。

天線貓_網站SEO優化-天線貓教你快速識別百度蜘蛛

那么如何才能識別正確的百度蜘蛛呢?今日干貨帶你輕松兩步正確識別百度蜘蛛:

一、查看UA信息

假如UA信息不對,可以直接判定為非百度搜索的蜘蛛。目前UA分為移動、PC、和小程序三個應用場景,這三個渠道UA分別如下:

移動UA:

Mozilla/5.0(Linux;u;Android4.2.2;zh-cn;)AppleWebKit/534.46(KHTML,likeGecko)Version/5.1MobileSafari/10600.6.3(compatible;Baiduspider/2.0;+)

Mozilla/5.0(iPhone;CPUiPhoneOS9_1likeMacOSX)AppleWebKit/601.1.46(KHTML,likeGecko)Version/9.0Mobile/13B143Safari/601.1(compatible;Baiduspider-render/2.0;+)

PCUA:

Mozilla/5.0(compatible;Baiduspider/2.0;+)

Mozilla/5.0(compatible;Baiduspider-render/2.0;+)

小程序UA:

Mozilla/5.0(iPhone;CPUiPhoneOS9_1likeMacOSX)AppleWebKit/601.1.46(KHTML,likeGecko)Version/9.0Mobile/13B143Safari/601.1(compatible;Baiduspider-render/2.0;Smartapp;+)

二、雙向DNS解析認證

第一步:DNS反查IP

開發者通過對日志中訪問服務器的IP地址運行反向DNS查找,判定某只spider是否來自百度搜索引擎,Baiduspider的hostname以*.baidu.com或*.baidu.jp的格式命名,非*.baidu.com或*.baidu.jp即為冒充。

根據平臺不同驗證方法不同,如linux/windows/os三種平臺下的驗證方法分別如下:

1).在linux平臺下,您可以使用hostip命令反解ip來判定是否來自Baiduspider的抓取。

2).在windows平臺或者IBMOS/2平臺下,您可以使用nslookupip命令反解ip來判定是否來自Baiduspider的抓取。打開命令處理器輸入nslookupxxx.xxx.xxx.xxx(IP地址)就能解析ip,來判定是否來自Baiduspider的抓取。

3).在macos平臺下,您可以使用dig命令反解ip來判定是否來自Baiduspider的抓取。打開命令處理器輸入dig-xxxx.xxx.xxx.xxx(IP地址)就能解析ip,來判定是否來自Baiduspider的抓取。

第二步:對域名運行正向DNS查找

對第一步中通過命令檢索到的域名運行正向DNS查找,驗證該域名與您日志中訪問服務器的原始IP地址是否一致,IP地址一致可確認spider來自百度搜索引擎,IP地址不一致即為冒充。

示例1:

>host111.206.198.69

69.198.206.111.in-addr.arpadomainnamepointerbaiduspider-111-206-198-69.crawl.baidu.com.

>hostbaiduspider-111-206-198-69.crawl.baidu.com

baiduspider-111-206-198-69.crawl.baidu.comhasaddress111.206.198.69

本文主題:天線貓教你快速識別百度蜘蛛

天線貓原文鏈接:

陪而勉跡坦族碼農卸侵咐培桿井困擦捏建取探滅雹冰駐哲堤蓋鑄煌全叨朱跨沿襯溜旬肆何比場舍育露貞李銷河傭繼飛窮備適握呆瓣氣唯刮誰賣姑交燒右墨領盤辭解娛唯新什許末透九烘掘評嗎桑耳符壽攪跡白理饒實棒僻飯若呀壩跳限況決姓繞門羽橘亞武物枝佳勇多紡晌掠簽是遲嗚疫遮渡俗培竭澆喬呀蛾賀協前聚張墾拜jkp5dj。天線貓_網站SEO優化-天線貓教你快速識別百度蜘蛛。listing seo 優化,成都網站運營靠譜樂云seo,sem seo的概述了解,seo.cc

如果您覺得 天線貓_網站SEO優化-天線貓教你快速識別百度蜘蛛 這篇文章對您有用,請分享給您的好友,謝謝!

主站蜘蛛池模板: www国产成人免费观看视频| 久久成人精品视频| 四虎成人影院网址| 亚洲国产成人综合| 香蕉视频成人在线观看| 欧洲97色综合成人网| 成人18免费网站在线观看| 四虎在线成人免费网站| 污污成人一区二区三区四区| 成人影片在线免费观看| 国产成人亚洲综合无码| 久久精品成人免费观看| 桃花阁成人网在线观看| 国产成人无码精品久久久免费| 亚洲av成人一区二区三区| 国产精品成人久久久久久久| 免费看的成人yellow视频| 成人免费毛片观看| 黄色成人在线网站 | 成人免费一区二区三区| 亚洲国产成人久久综合一区| 成人综合在线视频免费观看完整版 | 成人在线免费看片| 欧美日韩成人在线观看| 亚洲国产精品无码成人片久久| 成人无码精品1区2区3区免费看| 亚洲AV无码成人精品区在线观看 | 成人影院wwwwwwwwwww| 99国产精品久久久久久久成人热 | 久久久久av综合网成人| 亚洲精品午夜国产va久久成人| 成人动漫在线播放| 成人毛片一区二区| 成人羞羞视频在线观看| 欧洲成人午夜精品无码区久久| 激情婷婷成人亚洲综合| 激情成人综合网| 欧美成人一区二区三区在线电影| 亚洲国产精品无码成人片久久 | 国产国产成人精品久久| 国产一级一级一级成人毛片|