假冒搜索引擎爬虫的识别 标明访问者属性的User Agent是可以由软件进行修改的，所以有很多采集者为了防止自己被屏蔽，就把User Agent改为搜索引擎爬虫的特征，例如：自由标签: 搜索引擎爬虫假冒 查看更多 about 假冒搜索引擎爬虫的识别 James Qi的博客 4 则评论
