首页 / SEO book / 技术 SEO / 可索引性是什么、怎么优化

可索引性(Indexability)是什么?

可索引性是什么、怎么优化技术 SEO

可索引性指网页被搜索引擎索引的能力。只有可索引的页面才可能出现在搜索结果中。

什么是可索引性?

可索引性(Indexability)指网页被搜索引擎索引的能力。只有可索引的页面才能出现在搜索结果中。

要索引一个网页,搜索引擎(如 Google)必须:

  1. 发现该页面的 URL
  2. 抓取它(下载其内容)
  3. 处理它(理解并从已抓取的页面中提取关键信息)

只有完成这些步骤,页面才能出现在搜索结果中。

如果网络爬虫无法正常工作、抓取不了你网站上的某个页面,这个页面就无法被恰当地索引。没有被索引,网站的页面就无法带来任何搜索流量,因为它对搜索引擎始终是隐形的。

为什么可索引性很重要?

可索引性让搜索引擎能够在 SERP 中展示你网站的页面。没有索引,你就无法为网站带来任何自然搜索流量。

有时,让某些页面不可索引反而更合理。例如落地页、低质量页面或“感谢订阅”页面,人们更希望它们不可索引。毕竟,你不会希望这些页面出现在搜索结果中。

假设你希望这些 URL 获得排名,就应确保这些页面既可抓取又可索引。

什么让页面可被索引?

要被视作“可索引”,页面必须满足以下条件:

1. 页面必须可抓取

网页要被索引,搜索引擎的爬虫必须先能访问并抓取其内容。直接影响网页“可抓取性”的一个因素是 robots.txt 文件。

对不太了解 SEO “技术”一面的人来说,robots.txt 文件是位于网站根目录下的一个小文件。

它为网络爬虫提供指令,告诉它们网站上哪些页面不得被抓取。否则,爬虫会抓取网站上能找到的任何页面;默认情况下它们就是这么做的。

在某些情况下,设置这类“限制”是合理的。但务必确认你没有在不知情的情况下屏蔽想要被索引的页面。

2. 页面不得带有“noindex”标签

“noindex”标签是一种页面内指令,会指示搜索引擎不要索引某个特定页面。它基本上会阻止页面出现在 SERP 中。

有时,对某些页面设置“noindex”是明智的——例如落地页、登录页、单薄或低质量的页面,或“感谢”页面——让它们保持“私密”。

不过,误用这个指令,或忘记从想要索引的页面上移除它,就会损失自然搜索流量。

你可以用 Ahrefs Webmaster Tools 抓取网站,确保想要索引的页面都没有“noindex”标签。

3. 页面必须是规范版本

页面代码中的规范标签(rel=“canonical”)为重复、近似重复和相似的页面定义了主要版本。也就是说,只有规范页面会被索引,非规范版本将被排除在外。

除非你在页面上添加规范标签,否则 Google 会依赖内链和外链、XML 站点地图、重定向等信号,决定由哪个 URL 在索引中“代表”这一簇页面。

若想让自己的页面出现在搜索结果中,它就不能声明任何其他页面为它的规范版本。良好的 SEO 实践是为可索引页面设置指向自身的规范标签(self-referencing canonical)。

如何帮助 Google 索引你的页面?

以下是你可以采取的做法,帮助 Google 索引网站的页面:

1. 向 Google 提交站点地图

站点地图(sitemap)本质上是一份包含网站上所有页面的列表(通常为 XML 格式)。

站点地图的作用是告诉 Google 你希望网站上哪些页面被索引。

提交站点地图之前,先检查它是否反映了网站的当前状态,并修复其中的任何错误——例如死链、孤立页面等。

你可以使用 Google Search Console 工具提交站点地图给 Google。

2. 通过 URL 检查工具提交单个页面

如果你只想请求几个单独 URL 的索引或重新索引,可以使用 Google Search Console 中的 URL 检查工具(URL Inspection Tool)。

URL 检查工具是 Google Search Console 中的诊断工具,能让你了解 Google 为你的网页建立的索引版本,还允许你实时测试 URL、查看页面的渲染版本等。

它还允许你向 Google 提交单个页面。

如果你想请求索引一个新 URL——或重新抓取并重新索引已更新的 URL——可以通过选择“请求编入索引(Request Indexing)”按钮来让 Google 执行。若实时 URL 没有错误,Google 就会把你的页面加入抓取队列。

不过请注意,每天可请求索引的 URL 数量是有限的。

3. 提供内链以实现更好、更快的可发现性

使用内链,也能促进抓取、加快网站索引速度。

Google 的爬虫游走互联网时,会沿着链接形成的路径前进。你网站上的一个页面链接到另一个页面时,这些爬虫就会顺着已有的路径前进,并发现新内容。

没有任何内链的页面被称为“孤立页面(orphan pages)”。

因此,务必确保最重要的页面之间有往来的内链。构建一个组织良好的网站时,这通常会自然发生。

检查一下网站上是否存在孤立页面——也就是没有任何内链指向它们的页面——也不无好处。你可以用 Site Audit 工具来完成。

你应当确保这些指向可索引页面的内链不带 “nofollow”标签,因为 Google 不会抓取 nofollow 链接。