1、Baiduspider能不能找到所有網頁
3、Baiduspider能否順利提取網頁內容
4、Baiduspider能否在網頁中提煉有用信息
下面講的內容便是解決前兩個問題的：
一、友好的網站結構
1、扁平or樹型：一說到網站結構，大家都會提到扁平結構和樹型結構，言必稱“結構扁平化”，這些指的是物理結構，即基于內容聚合的目錄及文件位置決定的結構。其實對于百度搜索引擎來說，只要結構合理、有邏輯性、內容有規(guī)律可循都可以，都是友好的。
2、 鏈接結構：相對于物理結構，就要說到邏輯結構：即通過內部鏈接形成的鏈接結構，邏輯結構才是搜索引擎最關注的。對于一個網站來說，網頁僅僅可以通過首頁——目錄1——目錄2一層一層follow到是遠遠不夠的，一個優(yōu)秀的鏈接結構應該是網狀的。
1）首頁鏈接應該鏈向重要的頻道頁，頻道頁再鏈向下面的節(jié)點頁或普通頁面。同時，頻道頁、節(jié)點頁和普通頁面都應該可以鏈回到首頁
2）無論哪些頁面之間互相鏈接，都需要一個描述恰當的錨文本
3）鏈接不要放在JS、FLASH等搜索引擎不可見的位置，使用圖片做鏈接入口應該完善alt標簽
*百度搜索引擎目前僅支持對部分JS和FLASH進行解析，絕大多數放在JS和FLASH里的鏈接都是獲取不到的
4）為重要頁面留更多入口。百度搜索引擎認為，獲得更多內部投票的網頁相對來說更加重要
5） “離首頁越近”的網頁，越容易受到百度重視。這個“近”指的是頁面離首頁的點擊距離。即使URL所在目錄層級較深，只要在首頁有入口，百度也認為這是一個非常重要的頁面。
6）不要產生可怕的孤島頁面。雖然百度在提交入口、社會化挖掘方面做了許多工作，但鏈接抓取依然是百度獲得新頁面的最重要渠道
二、通過導航讓百度更好地認識站點
對于用戶，導航要解決的問題是：我在網站的什么位置，我想看上一級、甚至上上一級更多內容的入口在哪里；對于spider，導航要解決的問題是：這個頁面屬于哪個領域，要表達的主題是什么。所以說，清晰的導航系統(tǒng)不僅有助于提高用戶體驗，對SEO的意義也是重大的，所有SEO做得出色的網站基本都擁有清晰明確的導航。
1、導航內容搜索引擎可見：有網站的導航對用戶來說美觀友好，對百度來說卻是不可見的。目前百度還不能搞定所有的JS和FLASH，保險起見，還是使用HTML的好。圖片雖然美麗，作為導航也是對搜索引擎不友好的行為。
2、導航穩(wěn)定：導航內容應該是相對固定的，不要讓導航成為“滾動條”。
3、重要網頁盡可能地在導航處可以follow到：百度認為主導航中出現的鏈接，其重要性僅次于網站首頁，所以應該盡量將站內的頁面在主導航中安排個位置。當然，主導航上也不可能放過多的內容，哪些鏈接可以上主導航還需要SEO人員進行平衡。
4、巧用面包屑導航：上面說到，導航對于用戶來說，解決了“想看上一級、甚至上上一級更多內容”的問題，這個導航指的就是面包屑導航。面包屑導航可以使結構復雜龐大的大中型網站變得清晰輕盈，在spider進行頁面解析時會著重查看面包屑導航內容，強烈建議使用。
三、合理的domain結構
除了在網站建設的時候站長會思考到底使用二級域名還是子目錄，在網站運營的過程中，也會考慮是否要把子目錄的內容拆分成二級域名。因為很多SEO人員認為二級域名相對獨立，其首頁會得到百度的重視，能獲得更好的排位——其實這是一個片面的錯誤觀點，百度會通過很多指標對同domain下的二級域名和子目錄進行重要程度判斷，并沒有武斷地認為誰天生就會比誰強一些。
當SEO認為站內結構已經阻礙了網站高速發(fā)展就會考慮改版，最常見的改版便是將子目錄移出主站點、單獨形成二級域名。但大家都知道，改版肯定會對站點的收錄排名和流量造成影響，一定要謹慎。那么在什么情況下才真的需要將子目錄換成二級域名呢？其實只有一點：即子目錄的內容足夠豐富，且與主域的主題關聯(lián)性不強！
四、url結構很重要
1、url結構規(guī)律化：同一個網頁有不同url，會造成多個url同時被用戶推薦導致權值分散；同時百度最終選擇展現的那個url不一定符合你的預期。站點應該盡量不把sessionid和統(tǒng)計代碼等不必要的內容放在url，如果一定要這樣做可以通過robots禁止百度抓取這些非規(guī)范url
2、最好能讓用戶從url即可判斷出網頁內容，便于蜘蛛解析的同時便于用戶間傳播
3、url盡量短
●蜘蛛喜歡：http://tieba.baidu.com.com/f?kw=百度 ●蜘蛛不喜歡：http://tieba.baidu.com/f?ct=&tn=&rn=&ln=&cn=0&kw=百度&rs2=&un=&rs1=&rs5=&sn=&rs6=&nvselectvalue=0&oword=百度&tb=cn
4、不要添加蜘蛛難以解析的字符，如
http://mp3.xxx.com/albumlist/234254;;;;;;;%B9&CE%EDWF%.html http://news.xxx.com/1233,242,111,0.shtml
5、動態(tài)參數不要太多太復雜，目前百度對動態(tài)url已經有了很好的處理，但是參數過多過復雜的url有可能被蜘蛛認為不重要而拋棄
轉載請保留原文地址: http://www.biwz.cn/show-517.html