在搜尋外的問答上，看到一個朋友吐槽，說他在什麼地方買了蜘蛛池，結果他的網站沒有加蜘蛛爬行，然後說這個平臺垃圾。在這裡，筆者沒有討論這個蜘蛛池是怎麼樣的，而是想說對於新站來說，蜘蛛池並不能促進爬行和包容。
我們不妨看看搜尋引擎是如何工作的，搜尋引擎蜘蛛在一個頁面，將提取內部的連結，並返回到連結庫，然後決定繼續抓取。對於新站，搜尋引擎有一個特定的演算法，我們都應該有經驗，就是說，新站將很少爬行。為什麼這麼少？這是新站點機制的搜尋引擎。
搜尋引擎對於抓取新的網站是很謹慎的，就像我們第一次遇到某人，或者只是簡單的寒暄幾句，我們不會有很高的信任度。這裡還要注意的是，搜尋引擎蜘蛛並沒有停止前往新站，而是更多的是觀察而不是直接抓取。
蜘蛛池的作用是讓目標企業網站的某些產品連結進行更多的被提取，但這不等於說蜘蛛就會去抓取分析這些資訊連結，對於新站，蜘蛛可能我們會去爬行，但不一定會抓取。大家自己應該都知道新站有個考察期，這期間中國無論是抓取頻次還是沒有其他管理方面的資料，都不會得到很好。
這裡有一個新的問題，但是我們也很關心這個問題，就是蜘蛛沒有抓住網站的內容，我們怎麼知道網站的具體情況？
其實答案很簡單。我們分析網站日誌，或者看百度搜索資源平臺，看到的都是抓取的資料！請注意，這個抓取資料意味著蜘蛛成功抓取了頁面內容，並將內容儲存在搜尋引擎的資料庫中，同時返回了200個程式碼。如果蜘蛛只是爬行而不抓取，我們就無法很好地看到這些資料。換句話說，雖然我們看到了這些成功抓取的資料，但實際上搜索引擎可能同時抓取了頁面和識別了內容，但並沒有根據策略進行抓取。
透過前面的內容解釋，比較大家可以瞭解蜘蛛爬行和抓取之間的關係。讓我們回到文章的主題。為什麼蜘蛛池不能直接促進蜘蛛捕捉和包容？顯而易見的答案是，目標 url 可以透過 spider pool 捕獲，但這只是提取 url。搜尋引擎蜘蛛也可以抓取這些網站，但是是否抓取和包含網頁，與網站本身有很大的關係。對於新站來說，通常蜘蛛不會直接捕獲和包含，而是需要經過一段時間的檢查！
同時也說明了一個問題，就是打鐵需要硬。如果網站內容不夠，使用者體驗差，即使使用蜘蛛池，網站收藏等資料也不會很好。所以，筆者還是建議大家要真正做到內容為王，這絕對是網站最佳化的基礎和根基。沒有高質量的內容，其他工作只能事半功倍。
作者：星宇SEO
著作權歸作者所有。商務轉載請聯絡作者獲得授權，非商業轉載請註明出處
