您現(xiàn)在的位置:首頁 >> 抓取 >> 列表
抓取
  • [頂]我設(shè)置了301跳轉(zhuǎn),多久可以生效? 2014-10-18 點擊:404
  • 目前百度無法承諾301跳轉(zhuǎn)的生效時間,因為站長感受到的生效時間會受多因素影響,比如Baiduspider再次抓取這個頁面發(fā)現(xiàn)其設(shè)置了301的時間、網(wǎng)頁的重要程度以及自身質(zhì)量等。...
  • [頂]PC端指向移動站的外鏈是否有效? 2014-03-22 點擊:292
  • 答: 有一定效果。我們認為外鏈(內(nèi)鏈)是一種推薦行為,建議站長在做外鏈的同時,也做好內(nèi)鏈建設(shè),移動站合理的內(nèi)鏈建設(shè)對抓取及站內(nèi)推薦都有一定幫助。...
  • [頂]移動站內(nèi)容和PC站是一樣的,這樣需不需要屏蔽百度的PC搜索蜘蛛? 2014-03-22 點擊:443
  • 答:由于百度的PC搜索和移動搜索共用同一個spider,都帶有baidu標示,不要進行屏蔽。Spider在抓取時會對頁面進行識別,自動判斷是PC頁還是mobile頁,因此建議站長使...
  • [頂]Baiduspider抓取造成的帶寬堵塞 2014-03-22 點擊:350
  • Baiduspider的正常抓取并不會造成您網(wǎng)站的帶寬堵塞,造成此現(xiàn)象可能是由于有人冒充Baiduspider惡意抓取。如果您發(fā)現(xiàn)有名為Baiduspider的agent抓取并且造...
  • [頂]為什么Baiduspider不停的抓取我的網(wǎng)站? 2014-03-22 點擊:208
  • 對于您網(wǎng)站上新產(chǎn)生的或者持續(xù)更新的頁面,Baiduspider會持續(xù)抓取。此外,您也可以檢查網(wǎng)站訪問日志中Baiduspider的訪問是否正常,以防止有人惡意冒充Baiduspid...
  • [頂]Baiduspider對一個網(wǎng)站服務(wù)器造成的訪問壓力如何? 2014-03-22 點擊:506
  • 為了達到對目標資源較好的檢索效果,Baiduspider需要對您的網(wǎng)站保持一定量的抓取。我們盡量不給網(wǎng)站帶來不合理的負擔,并會根據(jù)服務(wù)器承 受能力,網(wǎng)站質(zhì)量,網(wǎng)站更新等綜合因素來進...
  • [頂]快照時間為什么會倒退? 2014-03-16 點擊:3955
  • 一個重要網(wǎng)頁的快照往往會在搜索引擎數(shù)據(jù)庫中保存有多份網(wǎng)頁快照,這些快照的抓取時間并不相同。在一些極特殊情況下,搜索引擎系統(tǒng)可能會選擇不同于當前搜索結(jié)果中的快照版本,導致出現(xiàn)快照時間...
  • [頂]百度快照為什么會更新? 2014-03-16 點擊:10523
  • 百度快照為什么會更新?首先,需要澄清一下網(wǎng)頁的抓取頻率和快照的更新頻率是完全不同的兩個概念。每一個被百度收錄的網(wǎng)站,baiduspider都會根據(jù)其網(wǎng)站內(nèi)容更新的頻率不斷的檢查有無...
  • [頂]網(wǎng)站的gzip壓縮對網(wǎng)站的收錄和權(quán)重有沒有影響? 2014-03-15 點擊:354
  • 官方回復:gzip對收錄和權(quán)重沒有影響。對搜索引擎唯一的影響,是抓取速度會快一些。相反在當前是被提倡的,速度快的網(wǎng)站更能獲得用戶和搜索引擎的好感,并且在站長平臺網(wǎng)站優(yōu)化建議中也提倡...
  • [頂]如何判斷是否冒充Baiduspider的抓取? 2014-03-15 點擊:271
  • 描述:220.181.51.* 這個ip段是百度蜘蛛嗎?官方回復:如何判斷是否冒充Baiduspider的抓。吭趌inux平臺下,您可以使用host ip命令反解ip來判斷是否來...