并不是每个拥有 WordPress 网站的人都希望出现在 Google 的第一页上。事实上，许多用户宁愿他们的网站根本不出现在谷歌或任何搜索引擎上。
如果情况确实如此，当前的 WordPress 版本允许您通过从 WordPress 仪表板设置 > 阅读中选中“阻止搜索引擎索引此站点”选项来执行此操作。
不过，有一个免责声明：
搜索引擎可能会尊重此请求。
因此，尽管这是迄今为止阻止搜索引擎抓取您的网站的简单方法，但您的网站始终有可能最终出现在搜索结果中。
WordPress 5.3 将解决这个问题
新的 WordPress 版本将改变阻止搜索引擎索引网站的方式。 5.3 版将删除 robots.txt 方法并添加更新的机器人元标记，以防止您的网站被列入搜索引擎：
当然，这个新的元标记是防止您的站点被编入索引或被抓取的更明确的方法。
Jono Alderson 在 trac ticket 上很好地总结了 robo.txt 方法中的当前问题，以及他提出的解决方案：
阅读设置推断它旨在阻止搜索引擎索引内容，而不是抓取内容。但是，机器人抑制规则的存在会阻止搜索引擎发现 noindex 指令，因此它们可能会索引“片段”（索引时没有内容的页面）。
谷歌最近宣布他们正在努力防止碎片化索引。但直到它存在（我不确定它是否会；它有时仍然是必要/正确的解决方案），我们应该修复当前的行为。我们删除了 robots.txt 禁止规则并允许 Google（和其他人）抓取网站。
希望这个新的元标记能更好地让您的开发网站（或个人网站）远离搜索引擎。
您认为这是对 WordPress 5.3 的一个受欢迎的补充吗？在下面的评论部分让我们知道，我们可以详细讨论！
帖子 WordPress 5.3：用于更好地防止搜索引擎抓取的机器人元标记首先出现在 WPblog 上。
