CDN

同事發現我們對一些采集爬蟲進行限制後，給出的403拒絕狀态也會被CDN緩存起來，造成後續正常用戶訪問的時候也被拒絕，于是詳細了解了各CDN對http/https訪問報錯狀态的緩存處理。

去年就開始使用CloudFlare為網站加速，因為當時那個網站與訪問者IP地址關系不大，所以沒有特别處理CDN代理IP和訪問者真實IP。今年添加的一個網站在做爬蟲屏蔽的時候與用戶真實IP有關，臨時可以用簡易的方式在PHP程序中獲取：

去年我們将EmojiAll網站接入了CloudFlare，這個網站是用Drupal來搭建的，也遇到一些清除緩存等小問題，都是同事們逐步發現、逐步解決。

去年10月我們在 www.emojiall.com 開啟了CloudFlare的緩存和防護功能，當時用的免費到，直到今年才改為了付費的專業版，中間也摸索了很多地方。

CDN是一個很老的概念了，印象中是很貴、隻有大型網站負擔得起，國内也有一些服務商提供免費的試用，很久前用過國内一個不知名的免費CDN（名字都忘記了），後來也用過阿裡雲的CDN免費試用，然後轉成收費的（隻用了一個很小的網站，流量很低，所以收費也很少）。