让您的网站被 Google 索引的 10 个有效 SEO 技巧
已发表: 2021-01-29未编入索引的网站就好像它不存在一样，因为它不会出现在搜索查询中，也不会获得自然流量。 这就是为什么我们不能让谷歌不索引我们的网站。 不幸的是，这是一个相当普遍的问题。
不要惊慌！ 在这篇文章中，我们将解释让您的网站被 Google 索引的主要技术。
谷歌索引是如何工作的？
谷歌基于有些复杂的算法，但它为页面编制索引的过程很简单。 搜索引擎依赖于一系列我们称为网络蜘蛛、爬虫或机器人的代码。
这些蜘蛛检查网页以查找新的和更新的内容。 这可以是现有网站上的新页面，也可以是全新的网站。 机器人程序首先爬取几个网页，然后跟随这些网页的链接寻找新的 URL 。
不久前，Google SERP 很容易“操纵”，我们可以让 Google 基本上通过其关键字和链接来索引网站。
今天的情况完全不同。 尽管这些关键词仍然很重要，但谷歌也非常重视用户在搜索背后的体验和意图。 我们可以说蜘蛛现在更聪明了。
谷歌索引是指蜘蛛在抓取页面时如何处理在页面上找到的数据。
如何快速让您的网站被 Google 索引
正如我们所说，谷歌不索引页面是很常见的，但原因通常是相同的。
您可以通过应用以下解决方案来解决它们：
验证您是否拥有正确的 robots.txt 指令
Google 可能未将您的网站编入索引的原因可能是 robots.txt 文件中给出的指令。
要查看它，请访问 yourdomain.com/robots.txt，然后查找以下两个代码中的任何一个：
User-agent: Googlebot Disallow: / User-agent: * Disallow: /两者都向 GoogleBot 表明它不应抓取网站的任何页面。 您需要立即删除它们以解决问题。
删除 noindex 标签
如果您告诉它不要这样做，Google 将不会索引您的页面。 这对于维护某些网页的隐私可能很有用。
有两种方法可以告诉搜索引擎不要索引网站：
元标签
Google 不会在 HTML 的 <head> 中为具有以下任何元标记的页面编制索引：
<meta name=“robots” content=“noindex”> <meta name=“googlebot” content=“noindex”>您需要删除位于您希望 Google 索引的页面中的“noindex”标签。 为此，您可以使用诸如 FandangoSEO 之类的 SEO Crawler 快速识别所有带有 noindex 标签的页面。
X-Robots-标签
GoogleBot 还遵守 X-Robots 标签指令。 您可以使用 Google Search Console 中的 URL 检查工具检查 Google 是否由于此指令而无法抓取页面。
您应该要求您的开发人员排除您想要索引的页面，这样他们就不会返回此标头。
使用 Google 的 Indexing API 或 GSC
页面很多但内容很少（广告、工作机会等）的网站可以使用Google 的 Indexing API 自动请求新内容和内容更改以进行抓取和索引。
API 允许提交单个 URL。 谷歌可以使您的页面索引保持最新是有益的。 借助此 API，您将能够：
- 更新 URL ：通知 Google 要抓取的新 URL 或更新的 URL。
- 删除 URL：通知搜索引擎一个过时的页面已从站点中删除。
- 检查请求状态：查看 GoogleBot 上次抓取网址的时间。
这也是 FandangoSEO 可以做的事情。 该工具允许您一次请求 Google 最多 200 个 URL 进行索引。
另一种加速网页索引的方法是通过 Google Search Console。 使用GSC URL 检查工具要求 Google 重新抓取您的网页。 这对于请求抓取单个 URL 很有用。 它每天最多允许提交 12 个 URL，因此如果您需要提交更多，最好使用 XML 站点地图。
首先，您需要通过 URL 检查工具检查 URL。 然后选择请求索引。 该工具将首先检查您是否有任何索引问题。 如果不是这种情况，则 URL 将排队等待抓取。
消除不正确的规范标签
规范标签告诉 Google 哪个版本的页面是优先的。 大多数页面不包含它，因此搜索引擎假设他们应该索引它们。 但是，如果您的网页包含不正确的规范标签，则可能会通过通知 Google 不存在的首选版本而导致错误。
如果您想查看网站上的规范标签，请使用 Google URL Inspection Tool 或 SEO Crawler。 如果您检测到任何不应包含规范标签的页面，请从中删除该标签。
在您的站点地图中包含相关页面
您的站点地图会告诉 Google 哪些页面是必不可少的，哪些不是。 因此，向 Google 提供站点地图的重要性。
事实是，搜索引擎应该能够在您的网站上找到页面，无论它们是否在站点地图上，但包含它们是一个好主意，因为它“让谷歌更容易”。
您可以使用 GSC 的 URL 检查工具来检查页面是否包含在站点地图中。
检测孤立页面
孤立页面是没有内部链接的页面。 谷歌在抓取网络时会发现新内容，但从逻辑上讲，如果没有指向它的链接，它就无法找到孤立页面。 网站访问者也不能。
您可以使用 SEO Crawler 检测网站上是否存在孤立页面。 在我们的孤立页面指南中了解更多信息。
修复包含 nofollow 属性的内部链接
Nofollow 链接是那些包含 rel=”nofollow” 标签的链接，用于防止将 PageRank 转移到目标 URL。 Google 直到 2020 年 3 月 1 日的 Nofollow 更新才跟踪此类链接，当时他们表示此属性现在仅用作提示。
您应该查看您的内部链接以识别那些包含 nofollow 属性的链接。 如果您希望目标页面被索引，则需要删除 nofollow 指南。
添加强大的内部链接
如果您希望 Google 快速索引一个页面，您可以通过为其提供大量链接汁（或权限）来显示该页面的价值。 您可以通过将页面链接到尽可能靠近您的主页来做到这一点。 该页面的链接数量也显示了它在您网站上的权重。
在我们的指南中详细了解如何创建强大的内部链接。
避免重复内容
如果有重复的内容，谷歌机器人会感到困惑。 搜索引擎最初只为每组独特的内容建立一个 URL 索引，因此类似的内容使他们难以决定要索引哪个版本。
由于相似的内容页面相互“竞争”，会对所有页面的性能产生负面影响。 这就是为什么您必须避免重复内容。
确保您的页面有价值
谷歌不太可能将低质量的页面编入索引，因为它们不会为用户提供价值。 因此，如果没有解释索引失败的技术问题，原因可能是缺乏内容价值。
问问自己该页面是否有价值以及是否值得点击。 如果没有，则有必要改进其内容。 始终牢记用户意图。
如您所见，重点是检查是否没有技术问题阻碍页面的索引。 而一旦排除了这一点，你就需要看看它是否为用户提供了价值。