亚洲精品一区二区二三区-日韩一区二区二区在线-亚洲欧洲色黄a大片-亚洲激情av一区二区

網(wǎng)絡(luò)營(yíng)銷
對(duì)頁(yè)面抓取異常的原因及分析
發(fā)布時(shí)間:2017-10-26  /  瀏覽數(shù)量:

1,效勞器銜接反常
效勞器銜接反常會(huì)有兩種狀況:一種是站點(diǎn)不穩(wěn)定,Baiduspider測(cè)驗(yàn)銜接您網(wǎng)站的效勞器時(shí)呈現(xiàn)暫時(shí)無(wú)法銜接的狀況;一種是Baiduspider一向無(wú)法銜接上您網(wǎng)站的效勞器。

形成效勞器銜接反常的因素通常是您的網(wǎng)站效勞器過(guò)大,超負(fù)荷運(yùn)轉(zhuǎn)。也有也許是您的網(wǎng)站運(yùn)轉(zhuǎn)不正常,請(qǐng)查看網(wǎng)站的web效勞器(如apache、iis)是不是裝置且正常運(yùn)轉(zhuǎn),并運(yùn)用瀏覽器查看首要頁(yè)面能否正常拜訪。您的網(wǎng)站和主機(jī)還也許阻撓了Baiduspider的拜訪,您需求查看網(wǎng)站和主機(jī)的防火墻。

2,網(wǎng)絡(luò)運(yùn)營(yíng)商反常:網(wǎng)絡(luò)運(yùn)營(yíng)商分電信和聯(lián)通兩種,Baiduspider經(jīng)過(guò)電信或網(wǎng)通無(wú)法拜訪您的網(wǎng)站。假如呈現(xiàn)這種狀況,您需求與網(wǎng)絡(luò)效勞運(yùn)營(yíng)商進(jìn)行聯(lián)絡(luò),或許采購(gòu)具有雙線效勞的空間或許采購(gòu)cdn效勞。

3,DNS反常:當(dāng)Baiduspider無(wú)法解析您網(wǎng)站的IP時(shí),會(huì)呈現(xiàn)DNS反常。也許是您的網(wǎng)站IP地址過(guò)錯(cuò),或許域名效勞商把Baiduspider封禁。請(qǐng)運(yùn)用WHOIS或許host查詢自己網(wǎng)站IP地址是不是準(zhǔn)確且可解析,假如不準(zhǔn)確或無(wú)法解析,請(qǐng)與域名注冊(cè)商聯(lián)絡(luò),更新您的IP地址。

4,IP封禁:IP封禁為:限制網(wǎng)絡(luò)的出口IP地址,制止該IP段的運(yùn)用者進(jìn)行內(nèi)容拜訪,在這里特指封禁了BaiduspiderIP。當(dāng)您的網(wǎng)站不期望Baiduspider拜訪時(shí),才需求該設(shè)置,假如您期望Baiduspider拜訪您的網(wǎng)站,請(qǐng)查看有關(guān)設(shè)置中是不是誤添加了BaiduspiderIP。也有也許是您網(wǎng)站地點(diǎn)的空間效勞商把baiduIP進(jìn)行了封禁,這時(shí)您需求聯(lián)絡(luò)效勞商更改設(shè)置。

5,UA封禁:UA即為用戶署理(User-Agent),效勞器經(jīng)過(guò)UA辨認(rèn)拜訪者的身份。當(dāng)網(wǎng)站關(guān)于指定UA的拜訪,回來(lái)反常頁(yè)面(如403,500)或跳轉(zhuǎn)到別的頁(yè)面的狀況,即為UA封禁。當(dāng)您的網(wǎng)站不期望Baiduspider拜訪時(shí),才需求該設(shè)置,假如您期望Baiduspider拜訪您的網(wǎng)站,useragent有關(guān)的設(shè)置中是不是有Baiduspider UA,并及時(shí)修正。

6,死鏈:頁(yè)面現(xiàn)已無(wú)效,無(wú)法對(duì)用戶供給任何有價(jià)值信息的頁(yè)面即是死連接,包含協(xié)議死鏈和內(nèi)容死鏈兩種形式:

協(xié)議死鏈:頁(yè)面的TCP協(xié)議狀況/HTTP協(xié)議狀況清晰表明的死鏈,多見(jiàn)的如404、403、503狀況等。

內(nèi)容死鏈:效勞器回來(lái)狀況是正常的,但內(nèi)容現(xiàn)已變更為不存在、已刪去或需求權(quán)限等與原內(nèi)容無(wú)關(guān)的信息頁(yè)面。
關(guān)于死鏈,我們主張站點(diǎn)運(yùn)用協(xié)議死鏈,并經(jīng)過(guò)baidu站長(zhǎng)平臺(tái)–死鏈東西向baidu提交,以便baidu更快地發(fā)現(xiàn)死鏈,削減死鏈對(duì)用戶以及查找引擎形成的負(fù)面影響。

7,反常跳轉(zhuǎn):將網(wǎng)絡(luò)懇求重新指向別的方位即為跳轉(zhuǎn)。反常跳轉(zhuǎn)指的是以下幾種狀況:
1)當(dāng)前該頁(yè)面為無(wú)效頁(yè)面(內(nèi)容已刪去、死鏈等),直接跳轉(zhuǎn)到前一目錄或許主頁(yè),baidu主張站長(zhǎng)將該無(wú)效頁(yè)面的進(jìn)口超連接刪去掉
2)跳轉(zhuǎn)到犯錯(cuò)或許無(wú)效頁(yè)面
留意:關(guān)于長(zhǎng)期跳轉(zhuǎn)到別的域名的狀況,如網(wǎng)站替換域名,baidu主張運(yùn)用301跳轉(zhuǎn)協(xié)議進(jìn)行設(shè)置。

8,別的反常:
1)關(guān)于baidurefer的反常:頁(yè)面關(guān)于來(lái)自baidu的refer回來(lái)不同于正常內(nèi)容的做法。
2)關(guān)于baiduua的反常:頁(yè)面對(duì)baiduUA回來(lái)不同于頁(yè)面原內(nèi)容的做法。
3)JS跳轉(zhuǎn)反常:頁(yè)面加載了baidu無(wú)法辨認(rèn)的JS跳轉(zhuǎn)代碼,使得用戶經(jīng)過(guò)查找成果進(jìn)入頁(yè)面后發(fā)生了跳轉(zhuǎn)的狀況。
4)壓力過(guò)大導(dǎo)致的偶爾封禁:baidu會(huì)依據(jù)站點(diǎn)的規(guī)劃、拜訪量等信息,自動(dòng)設(shè)定一個(gè)合理的抓取壓力。但是在反常狀況下,如壓力操控異常時(shí),效勞器會(huì)依據(jù)自身負(fù)荷進(jìn)行保護(hù)性的偶爾封禁。這種狀況下,請(qǐng)?jiān)诨貋?lái)碼中回來(lái)503(其意義是“Service Unavailable”),這樣Baiduspider會(huì)過(guò)段時(shí)間再來(lái)測(cè)驗(yàn)抓取這個(gè)連接,假如網(wǎng)站已閑暇,則會(huì)被成功抓取。





上一條: 百度只抓取網(wǎng)站首頁(yè)如何解決
下一條: 網(wǎng)站SEO是不是網(wǎng)站建設(shè)中的一部分?
相關(guān)熱門(mén)資訊  News
一二三客戶案例

  123 NETWORK

合作共贏,助您打開(kāi)網(wǎng)絡(luò)營(yíng)銷財(cái)富之間!

sh-klkm.com

聯(lián)系方式

地址:湖南省長(zhǎng)沙市天心區(qū)韶山南路248號(hào)南園503室

電話:13637482004    0731-88571521

網(wǎng)址:http://sh-klkm.com/

郵箱:123@123007.com

微信咨詢

掃一掃進(jìn)移動(dòng)端

版權(quán)所有 © 長(zhǎng)沙一二三網(wǎng)絡(luò)技術(shù)有限公司    統(tǒng)一社會(huì)信用代碼:91430103MACCH7984M    網(wǎng)站ICP備案號(hào):湘ICP備2023006748號(hào)     湘公網(wǎng)安備 43010302001803號(hào)        
亚洲另类激情人妻少妇| 人妻少妇视频一区二区三区| 亚欧乱色精品免费观看| 欧美亚洲综合一区二区三区| 中文有码人妻免费在线| 亚洲中文字幕乱码久久| 日本一区二区三区免费高清| 亚洲av一二三四又爽又色| 色综合五月婷婷六月丁香| 日本综合在线一区二区| 色哟哟网站入口在线观看| 亚洲综合另类欧美久久| 永久免费的成年视频网| 国产精品欧美日韩另类| 国产成人午夜视频在线观看视频| 国产传媒高清视频在线观看| 中文字幕一区日韩精品| 成人精品久久一区二区| 国产精品欧美一区二区| 国产三级视频一区二区| 日韩国产av一区二区| 国产成人av精品区一区二区三| 麻豆映画视频在线观看| 久久国产日韩精品一区二区| 五月婷婷丁香免费视频| 蜜桃成熟时在线免费观看视频| 粗大挺进尤物人妻身体的视频| 成人伊人亚洲综合久久网| 亚洲女同一区二区中文字幕| 亚洲乱码av毛片在线观看| 欧美色片在线免费观看| 日韩欧美人妻精品一区二区| 欧美又长又粗又硬又爽| 亚洲国产一区二区三区视频| 九九久久精品欧美日韩中文| 超碰观看在线免费观看| 白丝美女被强视频网站| 成人免费一级黄色激情网| 欧美日韩亚洲国产成人| 中文字幕日韩欧美乱码| 亚洲女同一区二区中文字幕|