為什么我們需要了解搜索引擎工作原理呢？因為只有我們對搜索引擎工作原理熟悉了我們的網站才會有好的收錄，那么我們的網站更新文章搜索引擎它是怎么知道？
這個就需要搜索蜘蛛來爬取了，它是負責搜集、更新環節，它像蜘蛛一樣在網絡間爬來爬去，因此通常會被叫做“spider”為了不讓更多網站的頁面給迷戀住，各大搜索引擎的蜘蛛都只能通過網站的源代碼來評價一個網站質量度。
代碼越精簡文字內容這樣的形式蜘蛛是非常喜歡的。圖片加上ait屬性也很受蜘蛛口味的！
蜘蛛最不喜歡的就是 flash js 網站盡量少用。
工作原理：一、網頁抓取
蜘蛛會通過超鏈接的方式進行頁面抓取，可以從這個頁面爬取到另外一個頁面，只要超鏈接的存在它就能順利的爬取。
抓取偏好一般是從上往下，從左往右的這種形式。我們重要的內容就一定要在網站最上方進行顯示，方便蜘蛛在第一時間發現。
二、網頁的處理并建立索引
蜘蛛抓取的網頁后，還需做大量的處理工作。將抓取回來的內容進行技術過濾是否數據庫里已經存在大量重復內容并判斷是否有價值。
最重要的就是建立索引了，有了索引網頁內容才可能有排名。
三、提供檢索服務
經過網頁重復去除，中文分詞分析超鏈接、網頁的重要度及內容豐富度這些的過濾后才會展示給我們的用戶。
我們怎么知道搜索引擎的蜘蛛有沒有來我們的網站抓取內容呢？
這個時候我們就需要看我們空間里面的iis日志了，里面記錄蜘蛛抓取的每一條記錄。
通過iis日志我們可以看出很多重要的東西與問題。
關注北京小牛seo博客，更多有價值的信息與您一起分享。
閱讀文本的人還閱讀了：
