網(wǎng)站死鏈怎么辦? 一、大量死鏈對搜索引擎來(lái)講,有什么影響? 1、死鏈率過(guò)高,會(huì )影響搜索引擎對網(wǎng)站的評分。 2、搜索引擎對每個(gè)網(wǎng)站每天抓取的頻次是限額的,若網(wǎng)站存在大量死鏈,會(huì )浪費掉抓取配額并影響其他正常頁(yè)面的抓取。 3、過(guò)多死鏈對網(wǎng)站用戶(hù)來(lái)講也是體驗不好的表現。 二、死鏈接是如何產(chǎn)生的? 1、網(wǎng)站內部添加了錯誤的內部鏈接 編輯失誤或者程序員大意讓頁(yè)面產(chǎn)生了不存在的頁(yè)面。 2、網(wǎng)站短暫無(wú)法訪(fǎng)問(wèn) 因為服務(wù)器、空間或程序問(wèn)題導致網(wǎng)站短暫無(wú)法訪(fǎng)問(wèn),產(chǎn)生大量返回碼為5開(kāi)頭的服務(wù)器錯誤頁(yè)面。 3、外部鏈接錯誤 用戶(hù)或者站長(cháng)在站外發(fā)布了錯誤URL;別的網(wǎng)站復制或采集了你們含有錯誤鏈接的頁(yè)面。 4、爬蟲(chóng)提取了不完整的URL 個(gè)別爬蟲(chóng)在提取頁(yè)面URL的時(shí)候,因為URL中有不規則字符或者URL與后邊的文字鏈接起來(lái),導致URL失效。 5、網(wǎng)站改版 如果你的網(wǎng)站已經(jīng)改版或者將要改版,一定要注意死鏈問(wèn)題,很多網(wǎng)站改版后,之前的老頁(yè)面直接刪除,導致了大量的死鏈接。 6、管理員刪除頁(yè)面 網(wǎng)站管理員刪除被黑、廣告、過(guò)時(shí)、被灌水頁(yè)面導致很多死鏈接。 三、如何發(fā)現網(wǎng)站中存在的死鏈接? 1、百度站長(cháng)工具中的抓取異常工具可以查看最近一個(gè)月產(chǎn)生的各種死鏈,并支持導出功能。 2、使用相關(guān)爬蟲(chóng)軟件,比如Xenu,此類(lèi)工具可以爬取全站所有鏈接并分析頁(yè)面狀態(tài),分析完成后,支持導出功能,提取死鏈接即可。 3、在網(wǎng)站運營(yíng)中,特別是論壇,經(jīng)常需要刪除某些頁(yè)面,在刪除頁(yè)面時(shí)一定要記錄對應的Url以便后期提交死鏈。 4、site:域名。雖然笨,但是也是一種查詢(xún)方式。 通過(guò)上述兩種辦法提取的死鏈列表,一定要經(jīng)過(guò)刪重和驗證,比如用wps表格進(jìn)行刪除重復鏈接,然后再使用Http狀態(tài)批量查詢(xún)工具驗證下是否確實(shí)是死鏈接。 四、如何避免和處理死鏈接? 1、網(wǎng)站改版最容易產(chǎn)生死鏈的 改版之前的頁(yè)面如果有價(jià)值盡量不要刪除和修改Url,若需要更換域名或Url分配規則,那一定要將之前的url進(jìn)行301跳轉到對應的Url;若老的數據必須刪除,那刪除的所有頁(yè)面Url要進(jìn)行整理和提交死鏈。 2、對發(fā)現的死鏈接如何處理 將收集好的所有死鏈接粘貼到網(wǎng)站根目錄的一個(gè)文檔中,再把文檔地址提交到 百度站長(cháng)工具–網(wǎng)頁(yè)抓取–死鏈提交–添加新數據–填寫(xiě)死鏈文件地址;若大量死鏈具有一定的規則,如某個(gè)目錄下全部為死鏈接,可提交規則死鏈。(注:關(guān)于這點(diǎn),可以進(jìn)百度站長(cháng)工具死鏈提交里面查看,里面有詳細的教程,很詳細。) 相關(guān)注意事項: 1、在百度站長(cháng)工具中提交死鏈前,一定要確保提交的死鏈數據不存在活鏈接。一旦存在活鏈,會(huì )顯示提交失敗導致無(wú)法刪除。 2、由于很多網(wǎng)站程序問(wèn)題,很多打不開(kāi)的頁(yè)面返回碼并非404,這是一個(gè)大問(wèn)題,比如明明是打不開(kāi)的頁(yè)面返回碼是301、200、500,如果是200的話(huà),會(huì )導致網(wǎng)站中出現不同URL獲取相同內容。比如我的一個(gè)站,社區的帖子刪除后,返回碼卻是500,后期發(fā)現了,立馬進(jìn)行了處理。大家盡量找出所有錯誤URL格式,并設置HTTP狀態(tài)碼為404。 3、把所有的錯誤頁(yè)面找到后,一定要尋找此類(lèi)頁(yè)面URL相同特征,并且和正常頁(yè)面的特征有區分,寫(xiě)對應規則到robots文件中,禁止蜘蛛抓取,就算你已經(jīng)在站長(cháng)工具中提交了死鏈,也建議robots封禁抓取。 4、robots只能解決蜘蛛不再抓取此類(lèi)頁(yè)面,但解決不了已經(jīng)收錄頁(yè)面的快照刪除問(wèn)題,若你的網(wǎng)站被黑,刪除了被黑頁(yè)面,除了robots封禁被黑頁(yè)面外,還應該將這些頁(yè)面提交死鏈。提交死鏈是刪除被黑頁(yè)面快照的最快辦法。 |
嘉興雷鳥(niǎo)是一家集企業(yè)軟件開(kāi)發(fā),WEB網(wǎng)站建設,移動(dòng)APP制作等綜合型的互聯(lián)網(wǎng)公司,為嘉興顧客提供一站式的企業(yè)軟件開(kāi)發(fā),安卓app開(kāi)發(fā),ios開(kāi)發(fā)服務(wù),同時(shí)為嘉興企業(yè)提供全面移動(dòng)互聯(lián)軟件技術(shù)解決方案,是嘉興知名的綜合型APP軟件外包開(kāi)發(fā)公司。根據前期調研方案和客戶(hù)實(shí)際需求,以專(zhuān)業(yè)獨到的設計理念、精益求精的技術(shù)精神、嚴格完善的品控系統,為嘉興每一位客戶(hù)提供專(zhuān)屬的移動(dòng)互聯(lián)軟件技術(shù)解決方案。經(jīng)過(guò)不斷積累,嘉興雷鳥(niǎo)陸續推出視頻直播APP、電商商城APP、P2P網(wǎng)貸APP、智能硬件APP開(kāi)發(fā)、移動(dòng)APP開(kāi)發(fā)、微信公眾平臺開(kāi)發(fā)、一元購APP、智慧社區服務(wù)APP、生活服務(wù)O2O系統APP等各類(lèi)APP產(chǎn)品,為嘉興各行企業(yè)向移動(dòng)互聯(lián)網(wǎng)轉型奠定了堅實(shí)基礎。在激烈的市場(chǎng)競爭中,嘉興雷鳥(niǎo)創(chuàng )造了嘉興軟件定制開(kāi)發(fā)行業(yè)的卓越口碑,是具有更高品質(zhì)的移動(dòng)互聯(lián)網(wǎng)軟件技術(shù)定制服務(wù)商。