谷歌的移动友好测试不遵循Robots.txt规则

[ad_1]
谷歌的移动友好测试不遵循Robots.txt规则

谷歌的John Mueller最近建议该公司的移动友好测试不遵循robots.txt文件中的规则。

此主题出现在Google网站管理员中心视频群聊中,询问有关适合移动设备的测试及其与抓取和编制索引的关系。

这是提交的问题:

“如果我可以在Google的移动设备友好测试中看到我的文字,我是否可以确保Google在阅读和索引我的内容和网页时没有问题?”

作为回应,Mueller表示,如果移动设备友好的测试能够呈现页面,那么这是正确的,那么它就可以被抓取并被编入索引。

需要注意的一件事是robots.txt文件,这对于适合移动设备的测试没有响应。这意味着它不会告诉您页面的服务器响应,或者是否阻止任何JavaScript文件。

因此,除了适合移动设备的测试外,网站所有者还应使用Search Console中的inspect URL工具确保一切正常运行。

在下面的视频中听到Mueller的完整回复,从28:36开始:

“在大多数情况下 – 是的,这是正确的。 JavaScript可能存在微妙的问题,但一般来说,适合移动设备的测试使用我们用于Googlebot的新铬设置。因此,如果(网页)在适合移动设备的测试中工作,它也应该用于索引。

这里要注意的一件事是移动友好测试 – 据我所知 – 不遵循robots.txt规则。

因此,您可能希望在Search Console中使用Inspect URL工具来确保实际上您的JavaScript文件和服务器响应,以及所有这些从这个角度来看都很有效。“

相关文章