前段時間更換服務器後,将各種限制都打開了,讓各種爬蟲也都自由訪問,包括各種搜索引擎或者采集軟件。但這兩天發現新服務器都不堪重負,同事在Squid的日志中找到大量來自1.202.218.*, 1.202.219.*, 1.202.220.*, 1.202.221.*的訪問,查看User-Agent信息是gosospider Mozilla/5.0 (compatible; GosoSpider; +http://www.goso.cn/aboutus.html),原來是偉大、光榮、正确的“狗搜”來訪,雖然有受寵若驚的感覺,但也讓我們服務器的鴨梨過大。