同事发现我们对一些采集爬虫进行限制后，给出的403拒绝状态也会被CDN缓存起来，造成后续正常用户访问的时候也被拒绝，于是详细了解了各CDN对http/https访问报错状态的缓存处理。
首先是看Cloudflare，其文档 Configuring cache TTL by status code 中有明确说明，如果在没有设置Cache Control的情况下：
- HTTP 200, 301: 120分钟
- HTTP 302: 20分钟
- HTTP 404: 10分钟
- HTT
404
这是 404 分类的页面，点击下面标题查看详细文章内容：
由 James Qi, 2017年12月9日
以前在翻看Drupal的Performance & Scalability插件的时候留意过有一个Fast 404模块，知道是专门处理404报错页面，如果网站有很多404，这个模块可以降低负载，但没有详细了解。
最近还在不断尝试降低MySQL服务器的负载，今天干脆把这个模块安装试了试，英文的说明看起来比较复杂，我就把README.txt中的内容把一些要点对照翻译如下吧：
Fast_404 is Super Fast and Super Amazing. It is also very aggressive
由 James Qi, 2015年5月13日
两年前写过一篇博文《Drupal中对404错误进行判断、重定向》，当时是在一个系列网站中采用自定义模块，在Module文件中构建了一个404错误的页面，在页面中对错误进行判断并302重定向到合适的内部页面。在博文下方及留言中也写了使用.htaccess进行错误处理的办法和例子。
除了站内的这种报错、跳转以外，也有站间的报错需要处理，例如http://chahaoba.com/ 这个站的最新日志信息中类似 http://chahaoba.com/1330719 这样的报错很多，其实正确的网址应该是http://www.chahaoba.com/1330719 ，也不知道
由 James Qi, 2013年5月6日
Drupal网站在Site information的设置中有一个404错误页面可以定制到自己希望的网址，如果你在日志中发现大量404错误，而其中很多都是同一个类型可以引导到对用户更有帮助的内容页面，那么就可以在这个定制的404错误网址中进行判断、导向。
我做的例子是http://ak.postcodebase.com/not_found ，因为来自外部网站的链接中，有一部分是这个站内找不到或者错误的邮编，就可以根据URI进行判断：
- 如果访问9位邮编页面不存在但前面5位邮编分类页面存在，则转到5位邮编分类页面；