我們公司有個網(wǎng)站,是8年前做的,不論是視覺設(shè)計效果還是網(wǎng)站功能配置都已經(jīng)無法滿足公司的發(fā)展需要了。逼不得已,對網(wǎng)站進行全面改版,而舊網(wǎng)站中的內(nèi)容僅保留約30%左右,而且至少占到40%的網(wǎng)頁地址也發(fā)生了變化。更要命的是網(wǎng)站之前是沒有備案的,現(xiàn)在需要改為企業(yè)名義備案。而廣東備案要求在備案期間網(wǎng)站必須關(guān)閉,也給網(wǎng)站改版造成了一定的困難。筆者為了測試網(wǎng)站改版對搜索引擎的影響,特地把整個過程以實例方式全部記錄下來,在此次網(wǎng)站改版中獲得了非常多的數(shù)據(jù)、經(jīng)驗和教訓(xùn),希望能幫到一些急需要網(wǎng)站改版的朋友。
5-15 開始重新備案,網(wǎng)站關(guān)閉。
5-16 百度抓取錯誤頁增多。
5-21 百度抓取錯誤頁達到新高,共36頁。
5-22 網(wǎng)站備案成功,上傳新網(wǎng)站,開始進行純原創(chuàng)文章上傳,每天三篇,分別安排在早中晚。
5-23 百度抓取錯誤頁成幾何倍增,達64頁,繼續(xù)按例上傳原創(chuàng)文章。百度的抓取頻次壓力程直線上升,從改版前的33上最終上升到5-27的133,這說明百度發(fā)現(xiàn)了網(wǎng)站大范圍的地址更改和頁面內(nèi)容的更改,于是加大了對網(wǎng)站的審查力度。這個時候,有心理準(zhǔn)備了,迎接百度的大降權(quán)吧。
5-24 百度抓取錯誤頁持續(xù)上升,達98頁,繼續(xù)按例上傳原創(chuàng)文章。
5-25 百度抓取錯誤頁達117頁,繼續(xù)按例上傳原創(chuàng)文章。百度快照更新。
5-26 百度抓取錯誤頁達最高值158頁,百度索引量開始慢慢減少為264頁。繼續(xù)按例上傳原創(chuàng)文章。
5-27 工程師開始分析原因,由于網(wǎng)站改版幅極大,僅保留了文章最多的數(shù)據(jù)表及連接不變??紤]到由于其它頁的地址和內(nèi)容皆發(fā)生變化,于是對服務(wù)器做了URL類404錯誤頁處理。同時將之前舊站中權(quán)重較高的頁做了301永久重定向。同時,百度索引量進一步減少到247頁,我們意識到,暴風(fēng)雨就要來了。繼續(xù)按例上傳原創(chuàng)文章。
5-28 由于前一天做了301永久重定向,錯誤頁有了明顯改善,減少到84頁,但是最大的隱患由于SEO工程師的失誤(之前做的301重定向并未返回301狀態(tài)碼,這是很致命的),危險正在醞釀中。果然不出所料,百度索引量從前一天的247頁銳減到69頁,伴隨而來的是大量的降權(quán),幾個關(guān)鍵詞之前排名前十,現(xiàn)在已經(jīng)被推出百名以外,問題越來越嚴(yán)重了。繼續(xù)按例上傳原創(chuàng)文章,同時發(fā)現(xiàn)部分原創(chuàng)文章已被收錄。為了安全,向百度提交了改版請求,也不知道做法是否正確(后來證明是正確的,至少可以告訴百度網(wǎng)站是因為改版才這樣,并不是出了什么大問題),或許是心虛,希望百度明白網(wǎng)頁的波動是因為公司需要正在改版,并不是其它不可原諒的異常。下面是百度提交改版請求的說明:
使用說明
在您提交改版范圍前,請確保您的網(wǎng)站已設(shè)置好301跳轉(zhuǎn),以及在站長平臺已驗證新舊網(wǎng)站的權(quán)限
此工具主要是針對百度網(wǎng)頁庫中的新舊鏈接的處理,并不包含前端搜索結(jié)果頁面的處理,原則上網(wǎng)頁庫處理完畢后一個月左右,前端效果會有明顯改善,具體可參考百度索引量工具對比分析
5-29 首頁已經(jīng)不見了,說明網(wǎng)站里發(fā)生了嚴(yán)重的問題。同時發(fā)現(xiàn)錯誤頁減少到0,一看到這個數(shù)字,就有莫名的恐慌。因為這不可能,網(wǎng)站里40%以上的鏈接都已經(jīng)不是以前的鏈接了,怎么可能是0,于是進一步分析。通過HTTP狀態(tài)查詢,之前的錯誤鏈接返回的都是200碼,我滴個神啊,意識到危險即將降臨了。趕緊進行測試,在程序中增加了404代碼推送,通過HTTP狀態(tài)再次查詢,正確返回了404碼。
下午時分,首頁出現(xiàn)了,但未回復(fù)到改版前的水平,排名仍然在百名以外,說明權(quán)重仍然被降。這么大幅度的改版,降權(quán)是意料之中、在所難免的,這個倒是一點也不意外,關(guān)鍵在于如何快速扭轉(zhuǎn)這個狀態(tài)。錯誤頁也降到35頁,嗯,看來301和404處理的效果開始顯現(xiàn)了,這個應(yīng)該是正常的范圍,畢竟改版幅度很大。索引量又回升到179頁,這說明百度已經(jīng)開始對新網(wǎng)站中的新網(wǎng)頁進行收錄了。抓取壓力開始回降為118,有兩個可能,第一,百度開始慢慢接受新網(wǎng)站,從大量抓取新頁轉(zhuǎn)向正常有順抓??;第二,對網(wǎng)站更多內(nèi)容失去了興趣;這個難以判斷,需要接著觀察。特別地發(fā)現(xiàn),網(wǎng)站部分關(guān)鍵詞仍然強勁,更驚奇的是,連新收錄的頁面也獲得了較好的排名。如果首頁權(quán)重恢復(fù)的話,相信排名會更好,可憐現(xiàn)在首頁還被降權(quán)中,痛苦…??傊?,這些都是一個好消息,心中暗喜。原創(chuàng)的高質(zhì)量文章持續(xù)地上傳著,同時進一步完善網(wǎng)站程序和功能,坐等明天的情況。
5-30 上午百度快照達354頁,說明百度正在大量收錄網(wǎng)站的新內(nèi)容頁。然而,首頁仍處于降權(quán)狀態(tài)。但相對于29號的32位已回升到21位,說明首頁權(quán)重隨著網(wǎng)站慢慢趨向正常而慢慢回升。
下午查看索引量減少到176頁,較昨天減少了3頁,可能是百度在收錄新網(wǎng)站頁面的同時也在刪除舊網(wǎng)站的失效頁面。
晚上查看快照更新到5-27,為什么不不是當(dāng)天?這顯然還是不那么正常。不過,快照增加了,達384頁,首頁權(quán)重終于恢復(fù)第一!但排名仍未恢復(fù),這個不值得高興,這種波動很正常。抓取壓力進一步降到87,看來,網(wǎng)站得加強內(nèi)容更新頻率。百度抓取異常記錄再度回到0,看上去對舊的無法打開的鏈接已經(jīng)失去信心了,趕緊的,給我把那些打不開的舊鏈接索引給我刪除了吧。
5-31 索引上升到182頁,404錯誤頁保持0。搜索幾個關(guān)鍵詞已經(jīng)能看到排名了,不過很靠后,說明權(quán)重未恢復(fù)完成??煺諟p少為365頁,百度持續(xù)刪除舊網(wǎng)站失效鏈接,但新上傳的文章鏈接開始加速抓取。
6-1 索引上升到246頁,快照上升到394頁,并發(fā)現(xiàn)一個有趣的情況,新收錄的內(nèi)頁文章排名都很好。404頁持續(xù)保持0,說明已基本穩(wěn)定。抓取壓力回升到102,這個應(yīng)該跟這幾天連續(xù)寫的幾十篇純原創(chuàng)高質(zhì)量文章有關(guān)。
6-2 抓取壓力保持102,404頁保持0,快照達411頁。今天更新了12篇純原創(chuàng)文章,估計明天新頁會有大量增加,但舊頁仍然會持續(xù)刪除。
下面談?wù)勥@幾天來其它各大搜索引擎的情況:
360搜索在經(jīng)歷3天大低谷后強勢回升,相應(yīng)關(guān)鍵詞均排名在第一頁,隨著網(wǎng)站更新幅度加大,還會獲得進一步提升,略過不講。
在本次改版后,由于首頁標(biāo)題、關(guān)鍵司和描述改動太大,GOOGLE自動采用了DMOZ目錄的名稱,標(biāo)題被強制修改成了“藝瓊網(wǎng)絡(luò)”,后通過<meta>標(biāo)簽的處理,請求各大搜索引擎用網(wǎng)站本身的真實內(nèi)容。估計需要一段時間后才會生效,生效后前端展示應(yīng)該會有明顯提升。但GOOGLE收錄非常正常,新文章幾乎每天都有收錄,這個勢頭很好。
搜狗也太不給力了,一直不肯收錄更多內(nèi)容??磥?,狗狗還在生我的氣呢~
必應(yīng),太強勢了,一夜之間收錄300多頁,首頁的標(biāo)題之前變成了域名,現(xiàn)在回復(fù)正常。大量重要關(guān)鍵詞均在前5位,必應(yīng)雖然不是本次的主角,但在百度漫長的等待中來點小興奮,正好給我打打氣。
6-3 抓取壓力保持102,404頁保持0,索引回落到204頁,快照減少到392頁。權(quán)重仍處于未恢復(fù)狀態(tài)。
6-4 抓取壓力大幅度降到21,404頁增加了4個,都是以前不用的地址。索引上升到206頁,快照回落到283個(什么情況?如果快速的回落很怪異。)
6-19 近半個月沒接著寫了跟蹤情況了,考慮到中間可能只會有較小的落差,所以就沒寫了。在這半個月時間里,每天至少上傳3篇純原創(chuàng)高質(zhì)量的文章,從沒中斷過。所有新寫的文章幾乎都是當(dāng)天就收錄了,并且都獲得了非常好的排名??上У氖?,首頁權(quán)重一直都沒有恢復(fù)過來,元氣大傷啊。不過,新網(wǎng)站在除百度外的其它搜索引擎里表面都十分優(yōu)秀,快照幾乎每天更新,各主要關(guān)鍵詞排名也非常的好,算是比較滿意的結(jié)果了。
這半個月里發(fā)生了許多事情,針對網(wǎng)站進一步做了優(yōu)化,比如增加文章內(nèi)鏈,比如增加友情鏈接。收錄和索引都在緩慢地增加。網(wǎng)站中的死鏈逐步被百度剔除干凈,這個越早越好,以免影響新網(wǎng)站的競爭力。隨著網(wǎng)站新網(wǎng)頁收錄逐步穩(wěn)定,百度抓取壓力也回落到一個相對正常的的水平。下面統(tǒng)計一下當(dāng)前的真實數(shù)據(jù)。
百度收錄508頁,索引322頁,抓取壓力32,抓取錯誤0??煺找恢蓖T?014-05-27,不過,今天最大的喜訊是之前提交的改版顯示“已完成”,歷時22天,這意味快照很快就會得到更新,網(wǎng)站前端表現(xiàn)也將在未來一個月逐步回升并重新獲得競爭優(yōu)勢。仍然不可懈怠,未來一個月繼續(xù)持續(xù)每天至少3篇純原創(chuàng)。如果此次大規(guī)模改版在百度中的表現(xiàn)不低于改版前,那么,目的也就達到了。這次改版完全是迫不得已,舊網(wǎng)站還是8年前做的,各種視覺效果和技術(shù)都無法滿足現(xiàn)在的需要了。
6-27 網(wǎng)站權(quán)重部分恢復(fù),但并沒有完全恢復(fù),所有關(guān)鍵詞都有極大提升。與改版前已相差無幾。但首頁仍然沒有更新,如果不出意外,首頁將在未來不久更新,屆時網(wǎng)站的前端表現(xiàn)將有更大的提升。隨之而來的是網(wǎng)站全面進行正常狀態(tài),并保持持續(xù)的快照更新。一個多月啊,終于等到了這一天。讓我們繼續(xù)期待百度權(quán)重的再一次提升吧。下面是網(wǎng)站今天的SEO數(shù)據(jù)。
百度收錄527頁,索引316頁,404錯誤0頁,BR1,快照2014-05-27。各關(guān)鍵詞排名基本恢復(fù),但未恢復(fù)完全。首頁未即時更新。
谷歌收錄533頁,索引367頁,404錯誤,PR0,首頁被強行改成“藝瓊網(wǎng)絡(luò)”,無排名,無流量,估計得等谷歌下次更新時收錄、權(quán)重、排名才會恢復(fù)。
360收錄502頁,索引461頁,404錯誤0頁,快照。2014-06-26??煺崭籼旄拢刻於加惺珍?,各關(guān)鍵詞排名保持良好。
Bing收錄189頁,各主要關(guān)鍵詞排名在第1-3頁,非常好,只是收錄太少了,期待Bing的大更新。
搜狗收錄83頁,索引83頁,主要關(guān)鍵詞未獲好排名,部分長尾關(guān)鍵詞排名佳。搜狗更新太慢了,揪心。
7-4 內(nèi)流滿面,首頁快照終于更新了,百度收錄達614頁,百度索引達383頁。最主要的一個關(guān)鍵詞排名第一位,另外還有4個次要的關(guān)鍵詞排名在第二頁和第三頁。滿滿的收獲啊,而且發(fā)展空間巨大。未來一個月要著重優(yōu)化其它幾個關(guān)鍵詞,爭取都做到第一頁。
7-5 網(wǎng)站權(quán)重幾乎全部恢復(fù),已經(jīng)有2個最重要的關(guān)鍵詞排名第一了,而且還有近10個關(guān)鍵詞排名在第1-3頁。不過,隱隱感覺網(wǎng)站還有很大的提升空間,主要是感覺權(quán)重還沒有100%恢復(fù),也就百分之八九十的樣子。百度收錄現(xiàn)在很勤快了,3天更新一次快照,許多新上傳的文章排名表現(xiàn)非常好。下一階段需要優(yōu)化其它的關(guān)鍵詞了,本次改版到這里也就差不多完成了。
本次改版基本結(jié)束并獲得成功。總共歷時一個半月。通過本次改版,獲得了一些經(jīng)驗教訓(xùn),也探索了一些新的網(wǎng)站優(yōu)化方法和技巧:
1、 改版前應(yīng)做好十成準(zhǔn)備,九成都不行。把各種可能的因素都考慮進去以減少網(wǎng)站改版造成的影響。
2、 盡量保留舊網(wǎng)站的內(nèi)容。
3、 盡量減少地址變更。當(dāng)然,大范圍改版無法避免地刪除一些舊網(wǎng)頁,一定要做好404頁,注意測試404頁是否正確返回404代碼。不僅可以引導(dǎo)蜘蛛繼續(xù)抓取,還能獲得更好的用戶體驗。
4、 改版前考慮新舊內(nèi)容替換,如果涉及地址變更,一定要做好301永久重定向,切記做好后一定要測試是否正確返回301碼,不然后果嚴(yán)重。
5、 既然改版,那就把服務(wù)器也一并優(yōu)化,開啟GZIP壓縮,提高網(wǎng)站打開速度,提高百度蜘蛛抓取效率。
6、 堅持網(wǎng)站原創(chuàng)內(nèi)容更新,特別是改版恢復(fù)期間,杜絕抄襲內(nèi)容。保持一個數(shù)量,每天更新。
7、 保持良好的心態(tài),等,一定要等,改版期間排名下降是正常現(xiàn)象。百度官方說明是,改版更新完成后一個月后前端展示會獲得改觀。