編者按：前兩周簡要介紹了搜索和捕獲系統的工作原理。根據工作原理，我們簡要介紹如何根據搜索引擎爬行系統建立網站。

1.簡單直接的網站結構

蜘蛛爬行相當于遍歷Web的有向圖，因此簡單而清晰的網站結構絕對是它所喜歡的，并嘗試確保蜘蛛的可讀性。

（1）樹結構的結構是“頁面 - 頻道 - 詳細信息頁面”;

（2）平面頁面到詳細頁面的級別盡可能小，對爬行和良好都很友好。

（3）網格保證每個頁面至少有一個文本鏈接指向，這樣可以盡可能全面地捕獲和收集網站，內鏈結構也可以對排序產生積極影響。

（4）導航為每個頁面添加導航以方便用戶知道路徑。

（5）子域名和目錄選擇我認為有大量網站管理員對此表示懷疑。我們認為，當內容較小且內容相關性較高時，建議以目錄的形式實現，這有利于權重的繼承和收斂。當內容很大并且與主站的相關性稍差時，建議以子域的形式實現它。

2，簡單而美觀的網址規則

（1）性別網站中的相同內容頁面僅對應一個網址，過多的網址形式會分散網頁的權重，目標網址可能會在系統中被過濾;

（2）盡量減少動態參數，確保網址盡可能短;

（3）美學使用戶和機器能夠通過URL確定頁面內容的內容;

我們建議使用以下形式的url：url盡可能短且易于閱讀，以便用戶可以快速理解，例如，使用拼音作為目錄名稱;系統中相同的內容只生成對應的url，刪除無意義的參數;如果網址無法保證性別，請嘗試將不同形式的url301設為目標網址;防止用戶將錯誤的備用域名301輸入主域名。

3.其他說明

（1）不要忽視不幸的機器人文件。默認情況下，搜索引擎會阻止某些系統機械手。創建網站時，請及時檢查并寫入相應的機器人文件。 網站還應注意日常維護中的定期檢查; p>

（2）創建一個網站sitemap文件，一個死鏈文件，并通過百度網站管理員平臺及時提交;

（3）一些電子商務網站存在地理跳躍問題。建議貨物缺貨并制成單頁。該頁面標記為缺貨。如果此區域中沒有商品，請勿返回無效頁面。由于蜘蛛的出口有限。性別將導致正常頁面不公開。

（4）網站管理員平臺提供的機器人，站點地圖，索引量，爬行壓力，死鏈提交，網站修訂等的合理使用。