監控系統

日常監控系統主要包括流量監控系統、關鍵詞排名監控系統、收錄監控系統、外鏈監控系統、競爭監控系統。

        日常分析系統包括內容分析系統和抓取分析系統。流量監控系統能自動檢測網站的流量信息，特別是可以分離出SEO和SEM的數據。

        關鍵詞排名監控系統即用于監控關鍵詞排名的系統，主要包括關鍵詞管理模塊和排名數據模塊。
其中，關鍵詞管理模塊需要滿足SEO人員對于關鍵詞的批量管理、增量錄入和刪除的需求，讓SEO人員能夠比較好地完成關鍵詞的日常管理。排名數據模塊能將關鍵詞批量、定期地發送到搜索引擎進行檢素，并將排名信息提取回來。

        所以，在整個監控系統中，需要有一個蜘蛛程序能將關鍵詞發送到搜索引擎(比如百度)進行查詢，并且將其排名信息提取回來，然后分析結果頁面的信息，如排名、網站URL等。

        通過關鍵詞排名監控系統，除了能得到本網站的關鍵詞信息以外，也獲得了競爭對手的SEO數據，因為根據提取回來的排名數據，可以分析競爭對手的信息。

        關鍵詞排名監控系統需要面對的一個難題是如何將排名信息解析出來。因為部分搜索引擎的結果頁的數據實際是加密的，需要對數據進行解密才能提取到對應的信息。

        收錄監控一般的做法是管理網站的URL列表，通過程序自動發送URL列表到百度搜索框，去查詢對應頁面是否顯示被收錄，這個數據是準確的。但是大型網站的URL數量非常多，針對重要頻道頁面進行查詢即可，對非流量關鍵頁面可以不做監控。

        關鍵詞排名監控系統和收錄監控系統大的問題是如何向搜索引擎發起查詢，因為同一個時間點大批量地發起查詢，很容易引起搜索引擎的警惕，很有可能屏蔽掉蜘蛛程序。為了能持續查詢數據，好的解決辦法是多準備蜘蛛程序，同時分散、小批量地進行查詢。

        因為網站是縱深的結構，一次性查看所有收錄詳情可能不現實，可以逐級展開，定位到對應頻道，再顯示下級收錄數據，這是一種更可行的方式。

        外鏈監控系統是按天監控網站的外鏈網站數量和外鏈網頁數量變化。

競爭監控系統監控自身網站和競爭對手網站的數據變化。競爭監控同樣可以區分為關鍵詞競爭監控、收錄競爭監控、外鏈競爭監控，一般采用 量量對比分析的模型。

        關鍵詞排名監控的模型是基于本身網站的關鍵詞列表，在抓取關鍵詞排名信息的時候，如果遇到競爭對手的排名信息，也要解析出來，和自己網站的關鍵詞排名信息進行對比。