著(zhù)名的“Google Dance”
如果你想寫(xiě)封信去參加在Google總部的年度更新過(guò)程，那么你可能希望繼續讀到GooglePlex這篇文章，從中了解Google數據庫和搜索引擎機器人是何如工作的。關(guān)于Google每月周期性的更新過(guò)程有很多的文檔記錄。而在過(guò)去整整一年，Google的這種每個(gè)月的周期性更新(如今人們親切稱(chēng)之為“Google Dance”)對那些焦慮等待的網(wǎng)站所有者和網(wǎng)站管理員來(lái)說(shuō)，都變得愈加復雜和不可琢磨。
每次的更新都是從Google的一個(gè)主要的深層次的爬蟲(chóng)開(kāi)始的。我們先把它叫做爬蟲(chóng)A。它是如何索引到整個(gè)網(wǎng)站中至少三四十億的網(wǎng)頁(yè)的呢？Google使用了15000多臺位于不同數據中心的計算機，來(lái)索引全世界范圍內的站點(diǎn)。當Googlebot來(lái)搜索數據庫中現有站點(diǎn)時(shí)，同時(shí)也會(huì )搜索到最新的網(wǎng)站。一旦Google完成了爬蟲(chóng)A這個(gè)過(guò)程，就會(huì )為下一步的更新有效地搜索到所有的網(wǎng)頁(yè)，然后便是兩個(gè)星期后的第二次更新過(guò)程。
最后，Google會(huì )更新整個(gè)數據庫，在www2.google.com和www3.google.com這兩個(gè)站點(diǎn)上可以看到最新的更新結果。在更新的同時(shí)，其結果會(huì )很快的連接在主要數據庫和第二、第三個(gè)數據庫之間。由于Google使用的服務(wù)器有15000臺之多，因此在整個(gè)更新結束之前，不同地方的人們所得到的搜索結果是不同的。“Google Dance”會(huì )持續好幾天，但是不會(huì )超過(guò)一個(gè)星期。除非Google要改變一些主要的規則，比如2003年4月份的更新。
無(wú)論是在Google的每個(gè)數據庫更新的時(shí)候還是在更新之后 只要其中一個(gè)數據庫進(jìn)行更新，Google又會(huì )開(kāi)始新一輪的“全面”檢索。我們把它稱(chēng)做爬蟲(chóng)B。這次檢索仍然包括數據庫中所有已被收錄站點(diǎn)和一些新發(fā)布的網(wǎng)站。GoogleBot的這次檢索完成之后，就是Google下一輪更新的起點(diǎn)，意味著(zhù)下個(gè)月的更新又全面開(kāi)始了。
在完美時(shí)間“捕捉”Googlebot
為了得到包括Google數據庫在內的任何網(wǎng)站，或是數據庫中有效反映更新的網(wǎng)站，一個(gè)有經(jīng)驗的網(wǎng)站管理員需要事先作認真的計劃，并準備好一切。這樣他才能在能每月特定的更新過(guò)程中“抓住”Googlebot，以取得一個(gè)好的排名。多數好的搜索引擎優(yōu)化專(zhuān)家都知道Googlebot一開(kāi)始的索引都是在月初進(jìn)行的，而深層次的索引是在更新之后開(kāi)始的。
如果一個(gè)網(wǎng)站管理員希望在Google的數據庫中收錄一個(gè)新站點(diǎn)，那么問(wèn)題是，會(huì )不會(huì )有一個(gè)爬蟲(chóng)來(lái)保證收錄呢？根據我們對其每月更新的經(jīng)驗來(lái)判斷，并不總是這樣的。毫無(wú)疑問(wèn)，如果一個(gè)網(wǎng)站在月初就被索引的話(huà)，那么在這個(gè)月的更新過(guò)程中，就不會(huì )被收錄。如果是在這個(gè)月的第二次索引中提交的話(huà)，就有可能被重新訪(fǎng)問(wèn)，并且在下次的更新時(shí)被收錄。
在其他情況下，Google只是簡(jiǎn)單瀏覽一下新提交的站點(diǎn)，記下主頁(yè)和Robots.txt文檔。像這種行為通常是一個(gè)好的指示，Googlebot會(huì )在下次主要索引期間再次回來(lái)。所以站點(diǎn)通常會(huì )在第二次索引更新時(shí)被收錄。對一個(gè)新的網(wǎng)站來(lái)說(shuō)，被收錄到Google的數據庫中，要被在Googlebot那里訪(fǎng)問(wèn)兩次。雖然有些例外的情況，但多數情況下是這樣的。
為了確?？焖俦皇珍浀目赡?，一個(gè)有經(jīng)驗的網(wǎng)站管理員需要做一些工作。如果網(wǎng)站被Googlebot第一次更新后索引的話(huà)，這其實(shí)是一個(gè)很好的跡象，很有可能會(huì )在Google下個(gè)月的更新中被收錄。如果這次沒(méi)有被索引的話(huà)，網(wǎng)站管理員就要為再次的索引等待更長(cháng)的時(shí)間。
根據這一點(diǎn)，一個(gè)網(wǎng)站管理員如果要想讓他的網(wǎng)站在Google更新時(shí)的這個(gè)非常時(shí)期得到索引，那么他一般應該怎么做呢？他完全可以做些必要的準備工作。如果有被Google已經(jīng)收錄的網(wǎng)站，那么可以通過(guò)這些網(wǎng)站的變化來(lái)觀(guān)察整個(gè)檢索過(guò)程和所有更新日期 然后據此仔細規劃新網(wǎng)站的發(fā)布。此外，如果沒(méi)有已經(jīng)為Google收錄的網(wǎng)站，也不要緊，可以常訪(fǎng)www.google.com來(lái)觀(guān)察它的更新過(guò)程。
然而，實(shí)際生活中幾乎不可能100%的確定任何網(wǎng)站都可以部分的或是全部的被索引，為了能使您的網(wǎng)站被Googlebot索引到，網(wǎng)站管理員需要做一些工作。第一，要和那些頁(yè)面等級高的站點(diǎn)交換連接。因為這些網(wǎng)站會(huì )經(jīng)常被Google索引和更新。也就是說(shuō)，如果和他們做連接的話(huà)，你的站點(diǎn)也會(huì )被經(jīng)常地索引和更新。但要注意的是一定要有相關(guān)性：如果一個(gè)網(wǎng)站是做家具零售的，那就要和其相似的公司，比如家具制作或銷(xiāo)售的站點(diǎn)做連接。這樣做Google會(huì )給你一個(gè)較高的等級；反之，和那些無(wú)關(guān)的網(wǎng)站做連接則不會(huì )得到一個(gè)高的等級。第二，你也可以直接向Google做提交。雖然這不是最好的方法，但也是值得去做的。第三，網(wǎng)站管理員可以安裝一個(gè)Google工具欄，通過(guò)這個(gè)工具欄可以訪(fǎng)問(wèn)到其它站點(diǎn)。自2002年中期起，就有很多關(guān)于網(wǎng)站被Google數據庫收錄和通過(guò)Google工具欄訪(fǎng)問(wèn)二者直接關(guān)系的報告。
你也可以選擇Yahoo的有償收錄服務(wù)，這樣可以保證在七天內被Yahoo收錄。一旦為Yahoo收錄，你的網(wǎng)站就會(huì )很快被Google收錄了。當然你不用每年都花299美元。還有一個(gè)不用花錢(qián)的方法，就是把你的網(wǎng)站提交到DMOZ。雖然它的服務(wù)器有時(shí)會(huì )出現問(wèn)題，而且被DMOZ收錄可能要花很長(cháng)的時(shí)間。但這確是一個(gè)能讓您的網(wǎng)站被Google收錄的好方法。
結論：
所有可以提供給網(wǎng)站管理員和搜索引擎優(yōu)化專(zhuān)家的技術(shù)信息，都是從Google爬蟲(chóng)和更新模式那里得到的。它們會(huì )對搜索引擎優(yōu)化的計劃和實(shí)施有很大幫助。其中最主要的是有助于我們安排計劃，因為新的提高和更新需要一個(gè)被收錄到搜索引擎數據庫的特定時(shí)間和日期。由于Google決定了大部分的目標搜索引擎訪(fǎng)問(wèn)量，所以讓你的網(wǎng)站為Google收錄是十分有必要的。
聯(lián)系客服
