| 文章來(lái)源：91自學(xué)網(wǎng) www.91zixue.com |
一百度篇
什么是baiduspider？
baiduspider是百度搜索引擎的一個(gè)自動(dòng)程序。它的作用是訪(fǎng)問(wèn)互聯(lián)網(wǎng)上的html網(wǎng)頁(yè)，建立索引數據庫，使用戶(hù)能在百度搜索引擎中搜索到您網(wǎng)站的網(wǎng)頁(yè)。
baiduspider對一個(gè)網(wǎng)站服務(wù)器造成的訪(fǎng)問(wèn)壓力如何？
baiduspider會(huì )自動(dòng)根據服務(wù)器的負載能力調節訪(fǎng)問(wèn)密度。在連續訪(fǎng)問(wèn)一段時(shí)間后，baiduspider會(huì )暫停一會(huì )，以防止增大服務(wù)器的訪(fǎng)問(wèn)壓力。所以在一般情況下，baiduspider對您網(wǎng)站的服務(wù)器不會(huì )造成過(guò)大壓力。
為什么baiduspider不停的抓取我的網(wǎng)站？
對于您網(wǎng)站上新產(chǎn)生的或者持續更新的頁(yè)面，baiduspider會(huì )持續抓取。此外，您也可以檢查網(wǎng)站訪(fǎng)問(wèn)日志中baiduspider的訪(fǎng)問(wèn)是否正常，以防止有人惡意冒充baiduspider來(lái)頻繁抓取您的網(wǎng)站。 如果您發(fā)現baiduspider非正常抓取您的網(wǎng)站，請反饋至webmaster@baidu.com，并請盡量給出baiduspider對貴站的訪(fǎng)問(wèn)日志，以便于我們跟蹤處理。
我不想我的網(wǎng)站被baiduspider訪(fǎng)問(wèn)，我該怎么做？
baiduspider遵守互聯(lián)網(wǎng)robots協(xié)議。您可以利用robots.txt文件完全禁止baiduspider訪(fǎng)問(wèn)您的網(wǎng)站，或者禁止baiduspider訪(fǎng)問(wèn)您網(wǎng)站上的部分文件。 注意：禁止baiduspider訪(fǎng)問(wèn)您的網(wǎng)站，將使您的網(wǎng)站上的網(wǎng)頁(yè)，在百度搜索引擎以及所有百度提供搜索引擎服務(wù)的搜索引擎中無(wú)法被搜索到。
關(guān)于robots.txt的寫(xiě)作方法，請參看我們的介紹：robots.txt寫(xiě)作方法
為什么我的網(wǎng)站已經(jīng)加了robots.txt，還能在百度搜索出來(lái)？
因為搜索引擎索引數據庫的更新需要時(shí)間。雖然baiduspider已經(jīng)停止訪(fǎng)問(wèn)您網(wǎng)站上的網(wǎng)頁(yè)，但百度搜索引擎數據庫中已經(jīng)建立的網(wǎng)頁(yè)索引信息，可能需要二至四周才會(huì )清除。 另外也請檢查您的robots配置是否正確。
我希望我的網(wǎng)站內容被百度索引但不被保存快照，我該怎么做？
baiduspider遵守互聯(lián)網(wǎng)meta robots協(xié)議。您可以利用網(wǎng)頁(yè)meta的設置，使百度顯示只對該網(wǎng)頁(yè)建索引，但并不在搜索結果中顯示該網(wǎng)頁(yè)的快照。
和robots的更新一樣，因為搜索引擎索引數據庫的更新需要時(shí)間，所以雖然您已經(jīng)在網(wǎng)頁(yè)中通過(guò)meta禁止了百度在搜索結果中顯示該網(wǎng)頁(yè)的快照，但百度搜索引擎數據庫中如果已經(jīng)建立了網(wǎng)頁(yè)索引信息，可能需要二至四周才會(huì )在線(xiàn)上生效。
百度蜘蛛在robots.txt中的名字是什么？
“Baiduspider” 首字母B大寫(xiě)，其余為小寫(xiě)。
baiduspider多長(cháng)時(shí)間之后會(huì )重新抓取我的網(wǎng)頁(yè)？
百度搜索引擎每周更新，網(wǎng)頁(yè)視重要性有不同的更新率，頻率在幾天至一月之間，baiduspider會(huì )重新訪(fǎng)問(wèn)和更新一個(gè)網(wǎng)頁(yè)。
baiduspider抓取造成的帶寬堵塞？
baiduspider的正常抓取并不會(huì )造成您網(wǎng)站的帶寬堵塞，造成此現象可能是由于有人冒充baidu的spider惡意抓取。如果發(fā)現有名為Baiduspider的agent抓取并且造成帶寬堵塞，請盡快和我們聯(lián)系?？梢詫⑿畔⒎答佒羨ebmaster@baidu.com，如果能夠提供您網(wǎng)站該時(shí)段的訪(fǎng)問(wèn)日志將更加有利于我們的分析。
二谷歌篇
1什么是沙盒
所謂的“沙盒效應（Sandbox Effect）”對于許多網(wǎng)站管理員來(lái)說(shuō)不像游樂(lè )場(chǎng)，倒更像流沙。
由最主要的搜索引擎Google所決定的搜索引擎結果頁(yè)面（搜索結果）中，新發(fā)布的網(wǎng)站排名越來(lái)越低。這一現象被稱(chēng)為“沙盒效應”，而它著(zhù)實(shí)讓很多站長(cháng)頭疼。當一個(gè)新的網(wǎng)站被Google列入索引之后，它通常會(huì )獲得被許多觀(guān)察員認為的對“新網(wǎng)站”的獎勵。這個(gè)嶄新的網(wǎng)站將在搜索結果列表中飛速上升至頂部，然而卻是曇花一現，隨后，排名就會(huì )不斷下降。
在最重要的關(guān)鍵字搜索排名前列的數日風(fēng)光之后，這些網(wǎng)站就會(huì )被雪藏于Google搜索結果底部，好像根本不存在一樣。即使該網(wǎng)站可能具有很高的Google網(wǎng)頁(yè)級別（PR值），擁有很多強有力并且主題相關(guān)的引入鏈接和豐富的內容，它還是會(huì )遭遇到令人沮喪的“沙盒效應（Sandbox）”的影響。
當網(wǎng)頁(yè)在Google的沙盒中深埋的時(shí)候，對于同一個(gè)關(guān)鍵詞，它卻可能在Yahoo（雅虎）和MSN的搜索結果中獲得很高的排名?？磥?lái)，“沙盒效應”是Google的獨特事件。
你需要考慮怎樣才能從沙盒效應中擺脫出來(lái)。當抑制因素排除時(shí)，你在沙盒懲罰期間所做的工作可以使你的網(wǎng)站重新出現在搜索結果中。
沙盒效應作為Google使用的搜索排名阻尼過(guò)濾器（search ranking damping filter），是用于網(wǎng)站首次發(fā)布后的頭兩個(gè)月至4個(gè)月內獲得“新站獎勵（fresh site bonus）”的網(wǎng)站。這個(gè)給予新網(wǎng)站的獎勵是指短時(shí)間內在搜索結果中獲得非常高的排名，因為Google偏愛(ài)新內容。在沙盒期間，新站應該不斷完善各方面SEO，沙盒效應過(guò)后，一般會(huì )有不錯的排名。
由于原來(lái)的新內容變得稍微成舊，沙盒過(guò)濾器開(kāi)始起作用。這就是沙盒效應。一個(gè)網(wǎng)站陷入沙盒的平均時(shí)間長(cháng)度大約為90天，但是很少在沙盒中持續呆4個(gè)月。
大多數網(wǎng)站按照關(guān)鍵字的類(lèi)型分享阻尼下降效應（damping down effect）。沙盒過(guò)濾器適用于所有網(wǎng)站，而不管它們是否有很多引入鏈接，即使有相關(guān)性很強的鏈接也沒(méi)什么區別。內容豐富的網(wǎng)站也同樣會(huì )陷入流沙。沙盒效應必然是Google的算法之一，因為它最近很普遍。
沙盒效應的意圖是什么？
很多觀(guān)察者都認為，沙盒過(guò)濾器的目的是勸阻不擇手段的WEB站點(diǎn)管理員不要使用違反Google站點(diǎn)管理員指南的做法。Google試圖瓦解一些手法，如使用垃圾站點(diǎn)建立初期的流量，購買(mǎi)過(guò)期的域名以獲得其之前存在的Google網(wǎng)頁(yè)等級作為跳躍的起點(diǎn)。
除非建立更長(cháng)久的鏈接，否則短期的鏈接租用和放置對一個(gè)新網(wǎng)站來(lái)說(shuō)并沒(méi)有什么好處。也存在這種可能性：即Google在索引一個(gè)網(wǎng)站后的最初幾個(gè)月中，并不會(huì )給予其全部的網(wǎng)頁(yè)等級（PageRank）。阻尼效應（dampening effect）造成的缺乏信用的網(wǎng)頁(yè)等級（PageRank）會(huì )降低過(guò)期域名引入鏈接的價(jià)值。
從這種情況可以推斷出Google是否試圖在阻止普遍的購買(mǎi)過(guò)期域名的行為。例如，Google工具欄可能顯示為PR7，但是算法可能賦予其網(wǎng)站搜索排名的PR值為零。當然，這種情況下也有可能導致相當高的Google排名。
Google可能打擊的另一個(gè)方法是垃圾站點(diǎn)。如果一個(gè)純粹的垃圾站點(diǎn)制造者（spammer）在網(wǎng)站運行后的頭幾個(gè)月中不能獲得好的排名，他們可能會(huì )關(guān)閉他們的垃圾站點(diǎn)。打擊spammer是Google的長(cháng)期目標。
然而，Google方面聲稱(chēng)的任何良好的意圖都間接打擊了那些沒(méi)有違反任何規則的網(wǎng)站。許多WEB站點(diǎn)管理員，尤其是那些完全不知道SEO整體情況的站長(cháng)，通常對于所發(fā)生的事情非常困惑。例如，他們在Yahoo 和MSN的搜索結果中排名很好，但卻不知道為什么不在Google的索引目錄中。還有很多人錯誤地認為他們無(wú)意中觸發(fā)了Google的懲罰。
Google打擊的另一個(gè)行為是購買(mǎi)鏈接獲得初始的網(wǎng)頁(yè)等級（PageRank）。Google公司的人可能認為一個(gè)網(wǎng)站應該隨著(zhù)時(shí)間的過(guò)去而自然獲得鏈接。他們認為購買(mǎi)的鏈接不是網(wǎng)站自然發(fā)展的表現。但是，只有少數幾個(gè)自然鏈接的網(wǎng)站，也遭遇了同樣的沙盒阻尼效應（dampening effect）。
這種情況也完全有可能發(fā)生：即一個(gè)網(wǎng)站沒(méi)有被放在沙盒中，但是它的鏈接正在被監測。算法可能會(huì )考慮其鏈接的時(shí)間，它們的鏈接站點(diǎn)，Internet服務(wù)商擁有的鏈接范圍，以及通常情況下整個(gè)鏈接的多樣性。
如果你的網(wǎng)站正好進(jìn)入沙盒，最好不要驚慌。Google并沒(méi)有懲罰你的網(wǎng)站。你也知道你的網(wǎng)站已經(jīng)被Google索引。相反，這只是一個(gè)正常的現象，是Google算法有些令人困惑的和苦惱的地方。如果網(wǎng)站由于“新站獎勵效果”而在搜索結果中獲得很高的排名，則很有可能會(huì )嘗到苦果。
2什么是Google Dance？
Google dance是指Google搜索引擎數據庫每月一次的大規模升級。
在升級期間，新的網(wǎng)頁(yè)被加入，無(wú)效網(wǎng)頁(yè)被刪除，對收錄網(wǎng)站進(jìn)行全面深度檢索，也可能在這期間調整算法。Goolge搜索結果顯示出劇烈的排名波動(dòng)，同時(shí)被索引網(wǎng)站的外部鏈接也獲得更新。每個(gè)季度更新一次的網(wǎng)頁(yè)級別（Page Rank）也發(fā)生在Google dance期間。Dance一般持續幾天時(shí)間，Dance結束后，Google搜索結果和網(wǎng)站外部鏈接數量趨于穩定，直至下一個(gè)周期的Google dance到來(lái)。
Google Dance 是Google定期更新它的索引的活動(dòng)，給人感覺(jué)就像是跳舞一樣。在這個(gè)Dance的過(guò)程中，Google所儲存的索引都被重新更新，網(wǎng)站的排名會(huì )發(fā)生劇烈變化，有的網(wǎng)站在Google上的排名一夜之間消失，有的網(wǎng)站則名列首位。Google Dance通常在月末的那周開(kāi)始，新結果在月初幾天可以看到，大概是每36天一次或者一年10次。
Google Dance相關(guān)背景
佛羅里達風(fēng)暴和奧斯汀風(fēng)暴
2003年11月上旬Google開(kāi)始的對排名算法的劇烈更新。這個(gè)更新，猶如颶風(fēng)，一夜之間讓千萬(wàn)個(gè)網(wǎng)站從搜索引擎中消失或者從前10名降級到100頁(yè)以后，使很多網(wǎng)站在即將到來(lái)的圣誕節購物黃金季節失去大量的客源。因為，Google的這次更新是以位于佛羅里達的Google數據中心為主的，因此稱(chēng)為“佛羅里達風(fēng)暴”。
佛羅里達風(fēng)暴之后不久，也就是2004年的一月，Google又進(jìn)行了一次巨大的算法更新。因為這次更新是從位于得克薩斯州的奧斯?。ˋustin）的Google數據中心開(kāi)始的，所以這次更新被冠以“奧斯汀風(fēng)暴”。奧斯汀風(fēng)暴被看作是佛羅里達風(fēng)暴的余震。
Google dance存在的意義
Google dance 是Google完善自己的算法、反對垃圾泛濫的努力。Google dance出現之后，使許多SEO從業(yè)者開(kāi)始反思如何正確地使用技術(shù)來(lái)優(yōu)化網(wǎng)站。只要你的網(wǎng)站沒(méi)有作弊或者使用什么不好的技術(shù)，那就不怕Google Dance，所以，即使有一天你突然發(fā)現你的網(wǎng)站排名突然后退很多或者在Google上找不到了，也不要太擔心，因為可能是Google在翩翩起舞。
聯(lián)系客服
