祁劲松的博客文章

　　10月23日到上海去参加了Google公司组织的Think with DoubleClick会议，在与其他几位AdSense发布商交流的时候，得知他们好些都改用百度联盟，而我这两年侧重与外文网站，很少关注百度，对百度联盟的印象还停留在几年前广告价值很低的阶段

　　Google Webmaster Tools我们很早就在用，去年也开始使用其API，写过一篇记录《调用Google Webmaster Data API批量提交sitemap》，Bing和Yahoo的类似Webmaster工具我们也很早就注册、尝试过，后来Yahoo搜索并入Bing后，我们也没有多关注。

　　上个月接到微软必应搜索部门客户经理的邮件，推荐使用Bing Toolbox Webmaster，想到我们现在的网站以外文、国外浏览者为主要发展方向，而Bing在美国的市场占有率也达到20%多，还是有必要去多了解、利用的，而且Bing去年也推出了新的API便于批量操

　　对于持久化专业运营网站来说，对网站的监控必不可少，以我们自己的理解，网站监控需要做的两件基本事情：

1. 监控网站健康状态，当网站出现故障的时候，及时发现并报警；
2. 监控网站性能表现，获取网站访问速度，利于用数据来分析优化。

　　说到网站监控，以我们的了解，可以采取的办法有以下几种：

1. 使用现成的网上监控服务，例如site24x7.com提供收费和免费的专业服务；
2. 自己安装现成的监控软件，例如radar website mo

　　以前在设置MediaWiki网站的时候，是把一些共用的修改放在CommonSettings.php中，然后LocalSettings.php中最后加入一行：

require_once( "/usr/local/apache2/htdocs/common/CommonSettings.php" );

　　就可以让一系列的网站都共用CommonSettings.php这个文件中的设置，比较简单、方便，我们一直在采用。

　　在Drupal的网站中，因为需要在settings.php中做的修改不算多，所以以前就没

　　以前尝试过《Drupal系列网站用robotstxt模块生成独立robots.txt》，可以实现多站点的每个站点都有不同的robots.txt，但缺点是需要逐个编辑，当子站数量多、修改次数多的时候，依然显得麻烦。

　　后来也尝试过程序动态生成robots.txt，但一直没有成功，昨天还尝试了在自定义module中编写，但显示的内容包含在html.tpl.php, page.tpl.php等模板之中，也不行。

　　再多查了一些网上的资料并反复测试，终于是可以实现了，步骤如下：

1. 删除原来的robots.txt；

　　这个统计其实很简单，就一行，把批量循环也记下来：

　　lines.sh

!/bin/bash

# 51 us states
DB=(ak al ar az ca co ct dc de fl ga hi ia id il in ks ky la ma md me mi mn mo ms mt nc nd ne nh nj nm nv ny oh ok or pa ri sc sd tn tx ut va vt wa wi wv wy)

for i in "${DB[@]}";do
echo ---------