最近登陆谷歌google网站管理员工具发现一个网站Increased 404 crawl errors,404抓取错误增多,让我感觉有点疑惑,自己管理网站一向很小心谨慎的,怎么会出现这么多404抓取错误,于是查看邮件详情,得到提示:在试图抓取您的网站,我们已经注意到在返回404错误(找不到网页)的网址数量的增加。下面是一些示例页面,返回此错误:

于是查看详细抓取错误信息,发现网址错误中找不到和其他占了各有几十个页面,而下面前1000个存在错误的网页网址更是让我匪夷所思,如下图所示,这些url一看就知道是DZ论坛的url,可是我这个站是新上线的,怎么会跟DZ论坛扯上关系呢?

谷歌抓取错误的网址

好大一会好反应过来,想了下,这个域名是去年注册的,因为已经备案,域名暂时并没有用上,为了避免因为空壳域名而被注销,我把域名临时解析到了一位网友的论坛上,由于他这个论坛没有用绝对路径,所以我这个域名也能正常访问很多页面,在这一段时间谷歌已经收录了很多页面,这样大约有一个月之后我停止了解析。离现在已经有半年时间了,以前的收录早就删除了,没想到最近网站刚上线没几天谷歌却又抓取以前的页面了,所以产生了这么多的404错误。

不过遇到这种问题也不要过于担心,google也是在尝试找回以前的页面,过一段时间就反应过来了,这些404抓取错误也就自然而然消失了。