新手站长建站初期必知！如何在网站中屏蔽搜索引擎？

新手站长建站初期必知！如何在网站中屏蔽搜索引擎？

在建立网站初期，由于站点结构和初始内容尚未准备就绪，网站处于测试阶段。此时开放搜索引擎收录并不明智，因为如果搜索引擎收录了大量无用页面，将不利于后续优化工作。因此，在网站初建阶段，禁止搜索引擎的行为显得尤为必要。在本教程中，我们将介绍如何在WordPress中实现禁止搜索引擎的操作。

一、Robots.txt文件是什么？

Robots.txt是一个存放在站点根目录下的纯文本文件。虽然设置简单，却功能强大。它可以指定搜索引擎蜘蛛只抓取指定内容，或者禁止搜索引擎蜘蛛抓取网站的部分或全部内容。

一般来说，站长们会使用Robots.txt文件来禁止搜索引擎的访问，但大多数系统并不内置此功能，需要自行编写规则并上传。

WordPress具有内置的robots.txt文件，位于网站根目录。例如，WP主题站的robots文件位于：

https://codernav.com/robots.txt

虽然在网站文件中看不到，但通过浏览器可以访问到。

熟悉robots规则的用户可以看到，默认情况下没有屏蔽任何搜索引擎，只是屏蔽了默认的管理界面/wp-admin。

二、设置WordPress禁止搜索引擎收录

若您的WordPress网站仍在建设或改版中，强烈建议临时禁用搜索引擎收录。

下面是在WordPress中设置的步骤：

1. 打开WordPress后台，依次选择 设置 – 阅读 – 对搜索引擎可见性。

2. 勾选建议搜索引擎不索引站点。

3. 最后记得保存设置。

这样一来，表示我们已经不希望搜索引擎收录。

您可以再次访问robots文件，发现新增了一条语句Disallow:/，此设置表示禁止任何搜索引擎抓取网站。

另外，一旦启用禁用收录选项，WordPress后台会出现警告文字，提醒您正在禁用搜索引擎。

这是为了防止忘记开启收录而设置的提醒。如果需要搜索引擎收录，随时取消勾选，开放收录即可。

三、禁用搜索引擎需注意事项

尽管禁用搜索引擎仅是一个简单的功能，但仍有一些需要注意的事项：

1. 禁用搜索引擎通常只是临时措施，网站完成后务必开启收录。

2. 禁用搜索引擎并不能阻止其他人访问您的网站。如有不希望公开的内容，应使用WordPress加密插件或密码文章等方式禁止访问。

3. 如果只是想让某篇文章不被搜索引擎收录，无需禁用整个网站，WordPress提供指定文章禁止收录的方法。