这就是您不小心将网站从Google删除索引时发生的情况

[ad_1]

阅读该标题是否会使您感到恐慌?

经过标题所暗示的一切,我可以保证您完全可以放心。

如果您想与我重温我的噩梦(也许同时宣泄和进行SEO研究),我们将按时间顺序进行。

你准备好了吗?

2019年8月4日

那是星期天的早晨。我喝咖啡,像往常一样拧紧我们的SEO工具,没想到该死的事情。然后……BAM!

什么。的。地狱?

作为SEO,我们都习惯于看到排名的自然波动。波动,而不是消失。

步骤1:拒绝

我立刻想到一个地方:这是一个错误。因此,我跳入其他工具来确认Ahrefs是否失去理智。

Google Analytics(分析)也显示出相应的流量下降,这肯定是肯定的。因此,作为SEO,我自然会认为最糟糕的事情……

步骤2:Algo恐慌

算法更新。拜托,请不要让它成为算法更新。

我跳入梭子鱼的Panguin工具,看看我们的问题是否与确认的更新同时发生。

没有更新。 ew

步骤3:诊断

没有人清楚地思考自己的爬行动物何时活动。您会感到恐慌,您会不合理地思考,并且会做出错误的决定。零寒。

我终于聚集了一些头脑,清楚地思考发生了什么:关键字排名完全消失是非常不寻常的。它必须是技术性的。

它必须是索引。

Google快速搜索了失去关键字排名的网页,事实证明这些网页实际上已经消失了。 Search Console报告了相同的内容:

请注意底部的警告:

否:在“机器人”元标记中检测到“ noindex”

现在我们到了某个地方。接下来,是时候在源代码中确认这一发现了。

我们的页面被标记为取消索引。但是,到目前为止,实际上有多少页面被取消索引了?

步骤4:调查损害

他们全部。在向我们的开发人员发送了一些疯狂的笔记后,他确认在将近三天前的周四晚上(2019年8月1日)部署的sprint意外地将代码推送到了每个页面上。

但是整个网站都被索引了吗?

这种情况极不可能发生,因为要做到这一点,Google必须在三天内抓取网站的每个页面才能找到“ noindex”标记。 Search Console在这方面将无济于事,因为它的数据将始终滞后,并且可能永远都不会在更改之前得到修改。

即使现在回头看,我们发现Search Console最多只能拾取249个受影响的页面,超过8,000个被索引。考虑到事件解决后整个一周的搜索量减少了三分之一,因此这是不可能的。

注意:我永远无法确定Google中有多少页面被完全索引了,但是我知道每个页面都有“ noindex”标记,我隐约记得Googling的“ site:brafton.com”,大约看到了一个我们的第八页被索引了。确实希望我有屏幕截图。抱歉。

步骤1:解决问题

一旦发现问题,我们的开发人员便回滚了该更新,并将该网站按“ noindex”标记之前的状态发布。接下来是重新索引我们的内容的问题。

步骤2:尽快重新整理该网站

我删除了旧站点地图,构建了一个新站点地图,然后将其重新上传到Search Console。我还抓住了我们大部分的核心产品目标网页,并手动要求重新编制索引(自从最近的SC更新以来,我不完全相信会做任何事情)。

步骤3:等待

此时,除了等待,我们别无选择。有很多问题:

  • 页面的排名是否会与以前相同?
  • 他们会排名相同吗?
  • Google是否会以某种方式“惩罚”页面以使其短暂消失?

只有时间会证明一切。

2019年8月8日(一周)-搜索量下降33%

在评估损坏时,我将使用错误代码已完全部署并在活动页面(8月2日)上填充的日期作为零地面。因此,第一次测量将在8月2日到8月8日完成7天。

Search Console可能会给我最好的指示,说明我们在搜索中遭受了多少损失。

我们损失了约33.2%的搜索流量。哎哟。

幸运的是,这将标志着我们在整个磨难中经历的最高伤害水平。

2019年8月15日(两周)-流量下降23%

在此期间,我一直关注两件事:搜索流量和索引页面。尽管重新提交了我的站点地图并在Search Console中手动获取了页面,但许多页面仍未编入索引-甚至是核心登录页面。这将成为整个时间表的主题。

由于我们仍有未编入索引的页面,因此我们的访问量仍在遭受损失。

事件发生两周后,我们的流量仍然下降了8%,尽管流量增加,但我们的创收转化率却随着流量的下降而下降。

2019年8月22日(三周)-流量下降13%

我们的页面仍在缓慢索引。当我看着我的商业目标从地板上掉下来时,我感到非常痛苦。

至少很明显,我们的搜索正在恢复。但是如何恢复才是我特别感兴趣的。

是否所有页面都重新编制了索引,但搜索量减少了?

只是部分页面被完全恢复的搜索状态重新索引了吗?

为了回答这个问题,我研究了分别被取消索引和重新索引的页面。这是其中一个页面的示例:

这是一个页面在较短时间内被取消索引的示例:

在我能找到的每个实例中,每个页面都已完全还原到其原始搜索状态。因此,似乎与页面是否恢复无关,而与何时重新建立索引有关。

说到这,Search Console具有一项新功能,它将“验证”错误页面。我于8月26日开始了此过程。在此之后,SC慢慢重新爬网(我认为)这些页面,每周大约10页。这比正常计划的爬网还要快吗? SC中的这些工具甚至还能做什么?

我可以确定的是,三周后仍有许多页面被索引不足,包括我依靠这些页面来吸引访问量。以后再说。

2019年8月29日(四周)-流量下降9%

此时,我感到非常沮丧,因为只有大约150页需要重新编制索引,而且无论我在Search Console中检查并请求重新编制索引的次数为多少,都无法正常工作。

这些页面完全能够被索引(由SC URL检查报告),但是不会被抓取。结果,在将近一个月后,我们仍比基准低9%。

一个特定的页面只是拒绝重新索引。这是我希望获得转化的高商业价值产品页面。

为了强制重新索引,我尝试了:

  • URL检查和请求索引编制(每月15次)。
  • 更新发布日期,然后请求索引。
  • 更新内容和发布日期,然后请求索引。
  • 将站点地图重新提交给SC。

没事。该页面不会重新编制索引。一百多个其他对商业影响较小的URL也存在同样的情况。

注意:直到取消索引两个月后的10月1日,此页面才会重新索引。

顺便说一下,这是我们四个星期后的整体恢复进度:

2019年9月5日(五周)-流量下降10.4%

大高原。至此,我们已经重新索引了所有页面的索引,除了大约150个据称已被“验证”的页面。

他们不是。而且它们也没有被重新爬上。

看来我们可能会完全康复,但时机掌握在Google手中,我无能为力。

2019年9月12日(六周)-流量增长5.3%

我们花了大约六个星期的时间才能完全恢复流量。

但实际上,我们仍然无法完全恢复流量,因为某些内容的效果超标,并对许多尚未编入索引的页面进行了过度补偿。值得注意的是,我们的产品页面在另外约2.5周内都不会被索引。

总体而言,六周后,我们的搜索量恢复了。但是,直到解决问题八周后,我们的内容才被完全重新编入索引。

结论

对于初学者,绝对不要因意外,实验或任何其他原因而对您的网站取消索引。刺痛。我估计我们清除了所有有机流量的12%,相当于商业转化的下降比例相同。

我们学到了什么?

重新索引页面后,就可以完全恢复搜索范围。最大的问题是让它们重新编制索引。

我们通过这次意外实验回答了一些主要问题:

我们恢复了吗?

是的,我们已完全恢复,并且所有URL似乎都具有相同的搜索可见性。

它花了多少时间?

六周后,搜索可见性恢复到基线。大约八到九周后,所有页面都重新编制了索引。

相关文章