James Qi的博客

同事在使用工具对网站进行检查的时候遇到这种报错：

查看对应网页的html代码类似如下：

最近用Google Search Console中的URL检测查看我们的网站，发现一些问题，一些站的首页使用的是Drupal中的node/1，在没有设置别名网址（alias path）或者别名网址不是/的情况（例如下图中的/page/首页_(Home)）下，规范网址（canonical url）就成了node/1本身或者其它别名网址（例如/page/首页_(Home)），而Google选择的

近期我们发现Apache日志中2a06:98c0:3600::103这个IPv6地址出现非常多，User Agent一般都是显示的googlebot，我们刚开始以为是Google爬虫使用了IPv6地址，但有些User Agent又不是googlebot，所以有点迷惑，因为这是来自Cloudflare的访问，所以我们想可能是一个反向代理IP，想获取其背后真实访问者的IP地址。🤔️

去年以来我们的Apache日志中总看到一个奇怪的IP地址：253.102.157.193，查询归属地是一个E类保留地址，查询

上一篇博客《有人恶意刷百度关键词陷害我们网站

一、问题的发现

去年11月份的时候，我们陆续有几个网站发现流量大幅减少，一开始还以为是正常波动或其它常规原因而没有引起重视，直到几周后来自百度搜索的流量持续大幅下降、好几个网站都情况类似，才去深入检查原因。🕵️

二、问题的检查

结果在百度资源平台中发现"流量与关键词"的热门关键词里面有些明显异常的数据，例如：

最近几天我们国内的两个网站都遇到访问困难，检查发现是百度爬虫抓取量大增，是以前正常情况的很多倍，导致Web服务器CPU、带宽以及数据库服务器都难以应付。Googlebot也曾经出现类似情况。

Google的Core Web Vitals（网站核心指标）指标推出后我们也一直在关注，但最主要是关注LCP（Largest Contentful Paint 显示最大内容元素所需时间），对于FID（First Input Delay 首次输入延迟/封锁时间总计）和CLS（Cumulative Layout Shift 累计版面配置转移）没有非常在意。

IPSHU网站最开始各种IP地址都用相同的格式显示信息，都是显示的IP地址的地理位置信息，但实际上内网IP和一些特殊IP地址是没有地理位置信息的，几年前将IP地址划分为外网IP地址、内网IP地址和保留IP地址展示不同的信息，重点修改了内网IP地址的显示内容，改为用户更关心的路由器方面常见问答，效果应该是明显的。