祁勁松的博客文章

　　10月23日到上海去參加了Google公司組織的Think with DoubleClick會議，在與其他幾位AdSense發布商交流的時候，得知他們好些都改用百度聯盟，而我這兩年側重與外文網站，很少關注百度，對百度聯盟的印象還停留在幾年前廣告價值很低的階段

　　Google Webmaster Tools我們很早就在用，去年也開始使用其API，寫過一篇記錄《調用Google Webmaster Data API批量提交sitemap》，Bing和Yahoo的類似Webmaster工具我們也很早就注冊、嘗試過，後來Yahoo搜索并入Bing後，我們也沒有多關注。

　　上個月接到微軟必應搜索部門客戶經理的郵件，推薦使用Bing Toolbox Webmaster，想到我們現在的網站以外文、國外浏覽者為主要發展方向，而Bing在美國的市場占有率也達到20%多，還是有必要去多了解、利用的，而且Bing去年也推出了新的API便于批量操

　　對于持久化專業運營網站來說，對網站的監控必不可少，以我們自己的理解，網站監控需要做的兩件基本事情：

1. 監控網站健康狀态，當網站出現故障的時候，及時發現并報警；
2. 監控網站性能表現，獲取網站訪問速度，利于用數據來分析優化。

　　說到網站監控，以我們的了解，可以采取的辦法有以下幾種：

1. 使用現成的網上監控服務，例如site24x7.com提供收費和免費的專業服務；
2. 自己安裝現成的監控軟件，例如radar website mo

　　以前在設置MediaWiki網站的時候，是把一些共用的修改放在CommonSettings.php中，然後LocalSettings.php中最後加入一行：

require_once( "/usr/local/apache2/htdocs/common/CommonSettings.php" );

　　就可以讓一系列的網站都共用CommonSettings.php這個文件中的設置，比較簡單、方便，我們一直在采用。

　　在Drupal的網站中，因為需要在settings.php中做的修改不算多，所以以前就沒

　　以前嘗試過《Drupal系列網站用robotstxt模塊生成獨立robots.txt》，可以實現多站點的每個站點都有不同的robots.txt，但缺點是需要逐個編輯，當子站數量多、修改次數多的時候，依然顯得麻煩。

　　後來也嘗試過程序動态生成robots.txt，但一直沒有成功，昨天還嘗試了在自定義module中編寫，但顯示的内容包含在html.tpl.php, page.tpl.php等模闆之中，也不行。

　　再多查了一些網上的資料并反複測試，終于是可以實現了，步驟如下：

1. 删除原來的robots.txt；

　　這個統計其實很簡單，就一行，把批量循環也記下來：

　　lines.sh

!/bin/bash

# 51 us states
DB=(ak al ar az ca co ct dc de fl ga hi ia id il in ks ky la ma md me mi mn mo ms mt nc nd ne nh nj nm nv ny oh ok or pa ri sc sd tn tx ut va vt wa wi wv wy)

for i in "${DB[@]}";do
echo ---------