1.過多的內容顯示在圖片和腳本上
　　蜘蛛爬蟲不是如我們一樣可以眼觀六路，耳聽八方。他們就是一些虛擬的工具，只能簡單的辯解以文本和腳本為基礎的內容，而一些優秀圖片、動畫是無法被評估的。這也是一些網站網絡提高VI設計而絞盡腦汁設計一大堆高質量的圖片，到頭來卻無濟于事，白忙活一場。
　　而最簡單的解決方案就是轉換內容形式為一種可識別的載體。同時借助一些搜索引擎模擬器觀察爬蟲到你網站時的反映，如果有過多的內容丟失，或一些信息被屏蔽，那傳遞的信息就是我們需要重新設置向導來引導。
　　2. 復雜導航 VS 簡單導航
　　許多網站設計師一開始頭痛的就是向導的設置太復雜，因為爬蟲是在內容和連接間瀏覽的緣故。如果搜索引擎過于復雜，那爬蟲就會經過層層的點擊、連接篩選而到你所指向的內容。說句諷刺的話，或許你是在和爬蟲的耐性打賭，在和用戶較勁，很明白是雞蛋碰石頭的對抗，后果不言而喻。
　　最直接的解決方案就是設計一個簡單的導航結構，確保用戶在兩只三步就可獲得自己期望的。 可以在主導航條下面設置子挑選條件，或者是增加一些內部連接。
　　3. 不連貫的連接操作
　　在建立連接的同時，我們必須小心的思考如何命名他們，搜索引擎是不可能和我們一樣有判斷的標準，爬蟲更多的是以URLs為評判標準，有時兩段不同的連接代碼卻同時指向一片內容，這是爬蟲可能開始迷糊了，雖然我們明白其中的邏輯。但考慮到寄人籬下的緣故，我們還必須讓爬蟲也明白。
　　為了避免指示信息的錯誤，我們必須有連貫的連接。如果你的網站有這樣類似的疏忽，就使用301跳轉重新定義新的內容，讓爬蟲明白你的連接代碼。深圳網站建設就選深圳俊網天下網絡技術。
　　4. 錯誤的重定向
　　當它涉及到301重定向，就是簡單的在你網站間網頁的轉換。你是否需要重命名他們，或者將這個網站內容引導到一個新的地點保證你能準確的指向那個方向。如果導引錯誤將會減少你千辛萬苦設計的導入鏈接的效果，還可能導致搜索引擎排名的降低。我們應該認真的思考這個問題，在此我也不再累贅。
　　5. 錯誤的站內地圖
　　如果想提高站內結構的準入門檻，建立一個簡單的站內地圖無疑會事倍功半，這個功能會讓爬蟲更有傾向性的瀏覽你的網站網頁，但是要確保指示準確