URL

　　在向百度站長平台提交MIP (Mobile Instant Page - 移動網頁加速器) 網址的時候，我們采用了《百度MIP版本鍊接的批量提交》一文中的辦法，這樣确實可以定時自動提交，不過要整理出需要提交的網址文本這個過程很耗時，特别是我們一些站點的網址數量龐大，用浏覽器一頁一頁訪問sitemap頁面、保存、合并、替換、上傳等每個環節都需要手工操作并苦苦等待。

　　今天下午幹脆花了一些時間來編寫了一個PHP程序，設置一些參數後，自動讀取預設的sitemap網址、下載數據并進行替換、合并、保存到指定文件名下，整個過程無需手工操作，即使讀取sitemap網址依然比較

　　隻要是建有數據量比較多的網站，幾乎不可避免采集的情況，這方面我們已經有多年的對付經驗，主要是通過分析Web訪問日志，找到采集的規律，相應來設置屏蔽IP地址或者URL網址來解決。

　　國内的Linux服務器上我們都安裝了Squid作為Apache的前端緩存，所以我們遇到采集的情況就分析Squid的日志，在squid.conf文件中進行設置屏蔽，然後重啟Squid服務就可以。

　　近期租用的國外Linux服務器上默認是沒有Squid的，我們也就隻用了Apache作為Web服務器，修改了httpd.conf來讓Apache的日志文件顯示更詳細的虛拟主機域名、

　　去年在使用Drupal 6的時候，就發現用Pathauto自動生成的URL網站中，部分特殊字符會導緻頁面找不到，當時找到了解決辦法，記錄在這篇博文中《Drupal的Pathauto模塊生成帶有單引号、雙引号、反斜杠URL問題及解決》。

　　最近在使用Drupal 7的時候又遇到類似問題，這次不是單引号、雙引号或者反斜杠，而是+（加号）和&（and符号）出了問題，自動的編碼變成了%2B和%26，在浏覽器中無法找到。如果手工修改為%252B和%2526則可以訪問。

　　我在網上搜索了很多資料，找到Drupal 6的includes/common.i

　　前一陣子導入的美國企業名錄中有不少标題都帶有單引号，例如：A J's Ribs A-Go-Go，用Drupal中的Pathauto模塊生成的URL為：

http://ak.mingluji.com/business_directory/A_J%27s_Ribs_A-Go-Go

　　可我卻無法打開這個頁面，報錯page not found。我讓同事專門把Pathauto設置中的各種字符都測試了一遍，單引号、雙引号、反斜杠這3種無法正常顯示，而其他的幾十個（例如逗号、中

　　為了網站SEO的需要，我在Drupal中安裝了第三方模塊pathauto，用于在頁面生成時自動産生一個帶有關鍵詞的URL别名。不過前一陣子導入數據的時候，pathauto的事先設置沒有做好，必須在設置好了以後将前面不符合規範的别名都