當(dāng)前位置:首頁(yè) >  站長(zhǎng) >  搜索優(yōu)化 >  正文

從百度蜘蛛IP段爬行日志分析收錄情況是否可信

 2014-01-03 14:43  來(lái)源: 用戶投稿   我來(lái)投稿 撤稿糾錯(cuò)

  域名預(yù)訂/競(jìng)價(jià),好“米”不錯(cuò)過(guò)

筆者近日剛剛上線一個(gè)新站,于是開(kāi)始關(guān)注一些有關(guān)SEO的信息,偶然間搜索到一篇文章,題為:“百度蜘蛛IP段詳解”,內(nèi)容為介紹通過(guò)分析網(wǎng)站日志中百度蜘蛛爬行的IP段來(lái)了解網(wǎng)站首頁(yè)或內(nèi)頁(yè)的收錄放出情況。看后,筆者便親自試驗(yàn)了一下,發(fā)現(xiàn)可能并不可信。

文中曾提到:“220.181.108.95這個(gè)是百度抓取首頁(yè)的專(zhuān)用IP,如是220.181.108段的話,基本來(lái)說(shuō)你的網(wǎng)站會(huì)天天隔夜快照,絕對(duì)錯(cuò)不了的,我保證。”

那么筆者查詢了下日志中,IP為220.181.108.95的蜘蛛爬行日志:“220.181.108.95 - - [31/Dec/2013:12:04:42 +0800] "GET / HTTP/1.1" 400 39 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +)" "-"”,筆者的站地址為:一問(wèn)網(wǎng)日志爬行時(shí)間為2013年12月31日中午12點(diǎn),截止投稿前,首頁(yè)快照還停留在幾個(gè)月以前,并未如文章中所說(shuō)隔夜快照。

此時(shí)筆者便有了疑問(wèn),于是又找了一個(gè)文中作者曾經(jīng)保證過(guò)的另外一個(gè)IP,文中原文為:“220.181.108.*段IP主要是抓取首頁(yè)占80%,內(nèi)頁(yè)占30%,這此爬過(guò)的文章或首頁(yè),絕對(duì)24小時(shí)內(nèi)放出來(lái)和隔夜快照的,這點(diǎn)我可以保證!”

而筆者又查詢了下日志中是否存在此IP,發(fā)現(xiàn)確實(shí)存在,而且還不少:

220.181.108.116 - - [31/Dec/2013:03:17:17 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +)" "-"

220.181.108.112 - - [31/Dec/2013:07:56:58 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +)" "-"

220.181.108.108 - - [31/Dec/2013:08:55:43 +0800] "GET / HTTP/1.1" 200 3652 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +)" "-"

220.181.108.80 - - [31/Dec/2013:09:57:11 +0800] "GET / HTTP/1.1" 400 39 "-" "Mozilla/5.0 (compatible; Baiduspider/2.0; +)" "-"

由于內(nèi)容過(guò)多,便不過(guò)多列舉,像文中作者所保證的("220.181.108.*段IP主要是抓取首頁(yè)占80%,內(nèi)頁(yè)占30%,這此爬過(guò)的文章或首頁(yè),絕對(duì)24小時(shí)內(nèi)放出來(lái)和隔夜快照的"。)結(jié)果并未出現(xiàn),一問(wèn)網(wǎng)www.yiwen.cn,至今距離百度蜘蛛爬過(guò)已經(jīng)過(guò)48小時(shí),并未放出。

由此可見(jiàn),網(wǎng)上所流傳的百度蜘蛛IP段詳解可能并不可信。以上是筆者的一人之見(jiàn),請(qǐng)大家多多批評(píng)指教,歡迎大家找我討論,郵箱:z#yiwen.cn(請(qǐng)把#換成@)。

申請(qǐng)創(chuàng)業(yè)報(bào)道,分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處,共同探討創(chuàng)業(yè)新機(jī)遇!

相關(guān)文章

  • 超干貨 百度蜘蛛ip段大全分析

    百度蜘蛛ip段大全分析,會(huì)看蜘蛛日志的人才來(lái)看這篇文章哦,不會(huì)看的人就自動(dòng)過(guò)濾這篇文章吧,對(duì)你沒(méi)卵用,完全是聽(tīng)天書(shū)了。

    標(biāo)簽:
    百度蜘蛛ip
    百度蜘蛛
  • 關(guān)注百度蜘蛛IP 近距離了解站點(diǎn)收錄情況

    眾所周知,百度蜘蛛,是百度搜索引擎的一個(gè)自動(dòng)程序,它的作用是訪問(wèn)收集整理互聯(lián)網(wǎng)上的網(wǎng)頁(yè)、圖片、視頻等內(nèi)容,然后分門(mén)別類(lèi)建立索引數(shù)據(jù)庫(kù),使用戶能在百度搜索引擎中搜索到您網(wǎng)站的網(wǎng)頁(yè)、圖片、視頻等內(nèi)容。分析和了解百度蜘蛛你可以很直觀的掌握自己站點(diǎn)收錄情況,當(dāng)你了解百度蜘蛛以及其對(duì)應(yīng)蜘蛛IP的含義后,你再也

    標(biāo)簽:
    百度蜘蛛ip
  • 詳解123.125.71.*百度蜘蛛IP段

    今天在我的一個(gè)網(wǎng)站日志中看到了這么一個(gè)ip,當(dāng)時(shí)是比較緊張的,之前百度一位工程師說(shuō)過(guò)這是屬于降權(quán)蜘蛛,后來(lái)我問(wèn)了很多朋友也查了大量的資料,證實(shí)這不是百度降權(quán)蜘蛛,但仍然比較危險(xiǎn),這個(gè)百度蜘蛛為考察期的百度蜘蛛。

    標(biāo)簽:
    百度蜘蛛ip

熱門(mén)排行

信息推薦