一、網站評估期
站長都知道,大多數搜索引擎都有一個針對新網站的審查期,稱為沙箱效應。一般來說,審查期是1-6個月左右,其中一些甚至不收錄網站的第一頁,在一定的時間后才開始收錄。因此,如果新網站收錄了主頁沒有收錄內部頁面,則很可能網站處于評估期,在評估期之后,內部頁面將自然釋放,并開始收錄。
二、空間服務器問題
服務器是決定網站打開速度的重要指標之一。如果我們網站的空間服務器的穩定性存在一定的波動和問題的話,那么這樣會給蜘蛛留下不好的印象的,盡管他仍然會再次光臨,但是多次爬行失敗后,蜘蛛便不會再來了。因此,站點空間的穩定性是站點正常發展的基礎,不穩定的空間會給站點的建設帶來相當大的危害。
三、文章質量
一般來說,具有一定價值的頁面會被搜索引擎收錄,即使不及時被搜索引擎收錄,也經過一段時間后會被收錄。但如果我們的網頁的價值很小,所以即使搜索引擎收錄了,很快就會被遺棄,搜索引擎的設計就是為了給用戶提供有價值的有用信息,所以收集無用的網頁是無意義的。
四、網站結構
如果網站設計出現問題,如使用許多搜索引擎不友好的 Javascript、Flash、iframe 來設計網站,這可能導致搜索引擎不被收錄。因為 Spider 不能讀取 Javascript、Flash 和 iframe的內容,我們不能追求站點的美麗而忽略站點的可用性。有些技術可以用 DIV+CSS 代替。另一點是新網站,可能是由于網站管理員的疏忽,在robots.txt中寫了限制性聲明。尤其是那些對網站結構不太確定的人,很容易犯這樣的錯誤。
五、 網站外鏈建設
新網站不收錄內部頁面,也可能與外部鏈有一定的關系,蜘蛛跟著URL進入我們的網站,當外鏈建設太少時,蜘蛛很難找到我們的網站,即使發現也得通過評估期。所以,這需要良好的外鏈建設,每天告訴蜘蛛在這里有吃的,蜘蛛會再次訪問你的網站,并且網絡爬行的次數會更頻繁。做好內部鏈的建設,還可以增加蜘蛛爬行網頁的數量,有利于收集新的網頁。