谷歌约翰Mueller 最近表示该公司的移动友好性测试不遵循 robots.txt 文件中的规则。
该主题出现在 Google 网站管理员中心的环聊中，询问有关移动设备友好性测试及其与抓取和索引编制的关系。
这里是提交的问题：
“如果我能在 Google 的移动友好性测试中看到我的文字，我能确定 Google 正在阅读和索引吗？我的内容和页面有问题吗？”
作为回应，Mueller 表示，如果移动设备友好测试正确呈现页面，那么它就可以被抓取并被索引。
需要注意的一件事是 robots.txt 文件，它对移动友好测试没有响应。这意味着它不会告诉您页面的服务器响应，或者是否有任何 JavaScript 文件被阻止。
因此，除了适合移动设备的测试之外，网站所有者还应使用 Search Console 中的检查 URL 工具来确保一切正常。
从 28:36 开始，在下面的视频中听到 Mueller 的完整回应：
“在大多数情况下——是的，它是正确的。可能会有微妙的javascript 的问题，但一般来说，适合移动设备的测试使用我们用于 Googlebot 的新 chrome 设置。因此，如果（网页）在适合移动设备的测试中工作，它也应该与索引一起工作。
一个这里要注意的是，据我所知，移动设备友好性测试不遵循 robots.txt 规则。
因此您可能希望使用检查 URL 工具来确保您的 javascript文件和服务器响应，从这个角度来看，所有这些都是有效的。”
