當(dāng)前位置：首頁(yè) >  站長(zhǎng) >  建站經(jīng)驗(yàn) >  正文

談?wù)勗趺蠢梅?wù)器日志來(lái)分析我們頁(yè)面為什么不被收錄

 2014-07-11 19:59  來(lái)源： 用戶投稿   我來(lái)投稿 撤稿糾錯(cuò)

　 域名預(yù)訂/競(jìng)價(jià)，好“米”不錯(cuò)過(guò)

很多人都在說(shuō)原創(chuàng)，每天去采集，然后修改后，重新發(fā)到自己的網(wǎng)站上，但是不知道你木有想過(guò)一個(gè)問(wèn)題，我們發(fā)的文章有沒(méi)有意義，為什么不被收錄，蜘蛛怎么去認(rèn)為我們發(fā)的文章有沒(méi)有意義。

在這之前，我們得知道服務(wù)器日志在哪里尋找，服務(wù)器日志一般存在于FTP空間一個(gè)Log的文件夾下，并且是tor后綴結(jié)尾。將他下載后，解壓后我們得到倆個(gè)文件，將有大小文件后綴名更改為域名.txt 然后打開(kāi)。我們會(huì)得到一大串文字字符，不要擔(dān)心從何看起，我們一條條的分析。但是我們首先得知道那些IP所代表的意思。下面我都列出來(lái)了。

Baiduspider=Baiduspider蜘蛛

Googlebot=Googlebot蜘蛛

Sogou=Sogou蜘蛛

Yahoo=Yahoo蜘蛛

360Spider=360Spider蜘蛛

123.125.68.=123.125.68沙盒

220.181.68.=220.181.68沙盒

220.181.7.=220.181.7預(yù)備抓取

123.125.66.=123.125.66預(yù)備抓取

121.14.89.=121.14.89新站考察

203.208.60.=203.208.60網(wǎng)站異常

210.72.225.=210.72.225巡邏

123.125.71.106=123.125.71.106低權(quán)重

123.125.71.95=123.125.71.95低權(quán)重

123.125.71.97=123.125.71.97低權(quán)重

123.125.71.117=123.125.71.117低權(quán)重

123.125.71.=123.125.71低權(quán)重匯總

220.181.108.95=220.181.108.95隔日快照

220.181.108.92=220.181.108.92權(quán)重抓取

220.181.108.91=220.181.108.91綜合權(quán)重

220.181.108.75=220.181.108.75內(nèi)頁(yè)權(quán)重

220.181.108.86=220.181.108.86權(quán)重首頁(yè)

220.181.108.89=220.181.108.89權(quán)重首頁(yè)

220.181.108.94=220.181.108.94權(quán)重首頁(yè)

220.181.108.97=220.181.108.97權(quán)重首頁(yè)

220.181.108.80=220.181.108.80權(quán)重首頁(yè)

220.181.108.77=220.181.108.77權(quán)重首頁(yè)

220.181.108.83=220.181.108.83權(quán)重首頁(yè)

220.181.108.=220.181.108權(quán)重蜘蛛?yún)R總

我們就其中一條分析

123.125.68.45 - - [24/Jun/2014 15:12:04 +0800] 'GET /xingyexinwen/129.html HTTP/1.1' 200 9107 '-' 'Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.12) Gecko/20101026 Firefox/3.6.12 QQDownload/1.7'

根據(jù)上面的定義分析：

123.125.68.45 - - [24/Jun/2014 15:12:04 +0800] 'GET /xingyexinwen/129.html這句話代表的意思是谷歌蜘蛛在2014年6月24號(hào)，15:12:04來(lái)我的網(wǎng)站抓取了xingyexinwen/129.html 這么一條URL，然后將其放到沙盒中(123.125.68.45 代表沙盒蜘蛛。)

HTTP/1.1' 200 9107 '-' 'Mozilla/5.0 (Windows; U; Windows NT 5.1; zh-CN; rv:1.9.2.12) '至于這個(gè)，其中的200是返回碼，代表是正常，當(dāng)然返回碼還有301、404、302、304等等一些，可以去查一下代表的意思。其他代表是它訪問(wèn)電腦的屬性，swindows操作系統(tǒng)等等。

不知道看了這些，你暈了沒(méi)有，當(dāng)然我們一般習(xí)慣用exec表格去分析日志，將txt文件導(dǎo)入表格中，能夠幫助我們更直觀的去分析日志，知道蜘蛛在我們網(wǎng)站上抓取了哪些內(nèi)容，然后將內(nèi)容定義為什么。當(dāng)然還可以利用日志分析軟件來(lái)分析。

關(guān)于更多，也可以搜索MOON蟲(chóng)博客www.croelhui.com，需要我介紹什么，歡迎大家給我留言。

申請(qǐng)創(chuàng)業(yè)報(bào)道，分享創(chuàng)業(yè)好點(diǎn)子。點(diǎn)擊此處，共同探討創(chuàng)業(yè)新機(jī)遇！

相關(guān)標(biāo)簽
服務(wù)器日志

相關(guān)文章

  • 如何進(jìn)行服務(wù)器日志分析

    網(wǎng)站服務(wù)器日志分析對(duì)網(wǎng)站優(yōu)化是很有好處的，網(wǎng)站服務(wù)器日志完整的記錄了蜘蛛爬蟲(chóng)抓取網(wǎng)站的情況以及訪問(wèn)狀態(tài)，可以通過(guò)網(wǎng)站日志來(lái)了解我們網(wǎng)站的收錄量以及流量等數(shù)據(jù)。

  • 服務(wù)器日志能夠給優(yōu)化傳遞的什么信息

    導(dǎo)讀：對(duì)于服務(wù)器日志，相信好SEO新手不是很懂，甚至都沒(méi)聽(tīng)過(guò)，別說(shuō)可以去看懂一個(gè)服務(wù)器日志，要想做好優(yōu)化服務(wù)器日志是非常重要的，通過(guò)服務(wù)器日志展現(xiàn)的信息，我們可以清楚的了解到營(yíng)銷網(wǎng)站優(yōu)化的動(dòng)向，還有哪些地方需要修改的，總之，對(duì)于營(yíng)銷網(wǎng)站的優(yōu)化有著重要的作用及意義，那么那么營(yíng)銷網(wǎng)站服務(wù)器日志怎么看呢?

    標(biāo)簽：
    服務(wù)器日志

  • 服務(wù)器日志能給SEOer傳遞哪些信息？

    互聯(lián)網(wǎng)靠的就是大量的信息，做SEO優(yōu)化推廣更是離不開(kāi)信息，其中最重要的信息就是服務(wù)器日志，服務(wù)器日志的存在不僅使我們這些做SEO的站長(zhǎng)能夠看出很當(dāng)名堂，同時(shí)對(duì)網(wǎng)站的優(yōu)化有著重要的作用及意義。那么服務(wù)器日志能給SEO站長(zhǎng)傳遞哪些有利的信息呢?服務(wù)器日志能給SEOer傳遞哪些信息?服務(wù)器日志能給SEOe

    標(biāo)簽：
    seo診斷
    服務(wù)器日志

  • 讀懂服務(wù)器日志快速超越競(jìng)爭(zhēng)對(duì)手

    很多站長(zhǎng)很重視網(wǎng)站后臺(tái)數(shù)據(jù)分析，分析后臺(tái)數(shù)據(jù)來(lái)微調(diào)網(wǎng)站，而往往忽視網(wǎng)站服務(wù)器日志分析，有的站長(zhǎng)認(rèn)為服務(wù)器日志分析不重要，有的是不會(huì)分析，這是因?yàn)椴恢婪?wù)器日志分析可以提升網(wǎng)排名，今天太原seo學(xué)習(xí)網(wǎng)就來(lái)爆料讀懂服務(wù)器日志快速超越競(jìng)爭(zhēng)對(duì)手：一、用戶訪問(wèn)情況1、用戶的ip地址2、訪問(wèn)時(shí)間3、用什么瀏覽

  • 實(shí)例解析如何分析服務(wù)器日志

    網(wǎng)站服務(wù)器日志分析對(duì)于一個(gè)網(wǎng)站具有比較重要的作用，通過(guò)分析該日志，我們可以知道搜索引擎爬行記錄，這有利于我們針對(duì)搜索引擎的習(xí)慣進(jìn)行交換。那么，今天我們便以SEO教程網(wǎng)為例，告訴大家怎么來(lái)分析網(wǎng)站日志吧：1，我們到哪去找服務(wù)器日志？一般我們使用的虛擬

    標(biāo)簽：
    服務(wù)器日志
加載更多

熱門(mén)排行

信息推薦