我一直使用robots.txt文件阻止谷歌索引我的网站。最近,我读到了一篇来自谷歌员工的文章,他说你应该使用meta标签来做这件事。这是否意味着Robots.txt不再起作用?由于我正在使用CMS,我的选项非常有限,使用robots.txt文件要容易得多。我的问题是如果我继续使用robots.txt文件而不是meta标签,最糟糕的情况会是什么。
我一直使用robots.txt文件阻止谷歌索引我的网站。最近,我读到了一篇来自谷歌员工的文章,他说你应该使用meta标签来做这件事。这是否意味着Robots.txt不再起作用?由于我正在使用CMS,我的选项非常有限,使用robots.txt文件要容易得多。我的问题是如果我继续使用robots.txt文件而不是meta标签,最糟糕的情况会是什么。
<meta name="robots" content="noindex,follow"/>
事实上,有GoogleBot的机会可以使用:
但是根据GoogleBlog-News的报道,从2019年9月开始,他们将不再支持这些(仅占0.001%使用率)命令。因此,为了确保未来的安全性,您应该只在页面上使用meta标签。