URL

　　在向百度站长平台提交MIP (Mobile Instant Page - 移动网页加速器) 网址的时候，我们采用了《百度MIP版本链接的批量提交》一文中的办法，这样确实可以定时自动提交，不过要整理出需要提交的网址文本这个过程很耗时，特别是我们一些站点的网址数量庞大，用浏览器一页一页访问sitemap页面、保存、合并、替换、上传等每个环节都需要手工操作并苦苦等待。

　　今天下午干脆花了一些时间来编写了一个PHP程序，设置一些参数后，自动读取预设的sitemap网址、下载数据并进行替换、合并、保存到指定文件名下，整个过程无需手工操作，即使读取sitemap网址依然比较

　　只要是建有数据量比较多的网站，几乎不可避免采集的情况，这方面我们已经有多年的对付经验，主要是通过分析Web访问日志，找到采集的规律，相应来设置屏蔽IP地址或者URL网址来解决。

　　国内的Linux服务器上我们都安装了Squid作为Apache的前端缓存，所以我们遇到采集的情况就分析Squid的日志，在squid.conf文件中进行设置屏蔽，然后重启Squid服务就可以。

　　近期租用的国外Linux服务器上默认是没有Squid的，我们也就只用了Apache作为Web服务器，修改了httpd.conf来让Apache的日志文件显示更详细的虚拟主机域名、

　　去年在使用Drupal 6的时候，就发现用Pathauto自动生成的URL网站中，部分特殊字符会导致页面找不到，当时找到了解决办法，记录在这篇博文中《Drupal的Pathauto模块生成带有单引号、双引号、反斜杠URL问题及解决》。

　　最近在使用Drupal 7的时候又遇到类似问题，这次不是单引号、双引号或者反斜杠，而是+（加号）和&（and符号）出了问题，自动的编码变成了%2B和%26，在浏览器中无法找到。如果手工修改为%252B和%2526则可以访问。

　　我在网上搜索了很多资料，找到Drupal 6的includes/common.i

　　前一阵子导入的美国企业名录中有不少标题都带有单引号，例如：A J's Ribs A-Go-Go，用Drupal中的Pathauto模块生成的URL为：

http://ak.mingluji.com/business_directory/A_J%27s_Ribs_A-Go-Go

　　可我却无法打开这个页面，报错page not found。我让同事专门把Pathauto设置中的各种字符都测试了一遍，单引号、双引号、反斜杠这3种无法正常显示，而其他的几十个（例如逗号、中

　　为了网站SEO的需要，我在Drupal中安装了第三方模块pathauto，用于在页面生成时自动产生一个带有关键词的URL别名。不过前一阵子导入数据的时候，pathauto的事先设置没有做好，必须在设置好了以后将前面不符合规范的别名都