内部优化的基础站点页面索引

ravode4851@jtho

内部优化的基础。站点页面索引。
2014 年 8 月 20 日  奥克萨娜·曼楚瓦 1313
在他的文章内容优化基础知识：不伤害！» 我回顾了页面内容优化的基本原则，这是内部网站优化的重要组成部分。但是，与内容无关的因素（我们称其为非内容因素）在内部优化中起着一定的作用。这些因素之一是网站页面的正确索引。

页面包含在索引中的必要（但不充分！）条件如下：
提供给搜索引擎索引机器人的页面 HTTP 状态值必须为 200 OK；
没有禁止索引此页面；
页面的 URL 必须为搜索引擎所知。
您可以通过索引机器人的“眼睛”检查页面的 HTTP 状态，在Yandex.Webmaster的“检查服务器 电话号码清单 响应”部分的 robots.txt 文件中是否禁止其索引，这种检查是仅对那些在您的帐户中确认其权利的站点执行。在谷歌网站站长工具中，为了检查站点的特定页面是否可用于索引，您可以使用“站点内容”部分中的“查看为 Googlebot”模式。有几种方法可以禁用页面索引：
使用 robots.txt 文件
在页面代码的 HTML 标记中使用特殊指令
通过更改 Google 网站站长工具的“抓取”部分中的 URL 参数工具的设置。
在 robots.txt 文件中，这可以使用 Disallow 和 Clean-param 指令来完成。在 Yandex 网站管理员帮助的“使用 robots.txt ”部分和Google 帮助的“使用 robots.txt 文件阻止 URL ”部分中可以找到关于编译 robots.txt 文件规则的足够详细的帮助。

您可以在 Yandex 网站管理员办公室的“ Robots.txt 分析”部分检查 robots.txt 文件的正确性（此外，这可以对任何网站进行，而不仅仅是那些已确认权利的网站）和“用于检查 robots.txt 文件的工具”部分 Google 网站管理员工具（仅适用于经过验证的网站）。