使用 BrightData SERP API 解锁 SERP 洞察力 - 免费的 Google Colab

已发表: 2023-03-11

了解来自搜索引擎结果页面 (SERP) 的数据对于任何企业主或SEO 专业人员都很重要。 您是否想知道您的网站在 SERP 中的表现如何? 您是否想知道与竞争对手相比您的排名如何? 手动跟踪 SERP 数据可能是一个耗时的过程。 让我们看一下代理网络,它可以帮助您在几秒钟内收集有关网站性能的信息。

成绩单:

嘿,怎么了。 欢迎来到破解我的成长。 在今天的视频中,我们将了解一种新的网络抓取工具,它在我们分析搜索结果时非常有用。 我们最近开始探索代理网络Bright Data以及网络爬虫,它们使我们能够获得一些非常酷的信息,这将有助于规划搜索营销或 SEO 策略。

我们需要做的第一件事是查看搜索结果。

当我们在寻找一个术语时,我们需要做的一件事就是始终查看搜索结果。 在这种情况下,假设我想定位术语“SERP 分析”。 我们需要做的第一件事是查看搜索结果本身。 现在,我喜欢使用很多小部件来帮助我更好地理解搜索结果,但我也总是需要向下滚动才能理解,以便更好地了解正在发生的事情。 谁的排名? 什么类型的内容排名? 他们为什么排名? 页面上有哪些不同的元素? 我们在此页面上找到的相关搜索查询是什么? 这可能需要一些时间,而且是重要的一步,因此我们需要查看搜索结果以了解它。

但同样有用的是,我们能够提取信息,然后自行处理以获得更多见解。 我们开始将它与其他数据分层,这将有助于(至少在我的情况下)建立一个行之有效的策略。

使用明亮的数据来解释搜索结果

有时从搜索结果中提取数据可能非常困难,而这正是 API 可以派上用场的地方。很棒的是您不必成为程序员。 我不认为自己是程序员。 我认为自己很擅长复制和粘贴。

在 Bright Data 的帮助下,我们可以从搜索结果中提取大量很酷的数据,并将其与其他一些数据分层。 这让我们对搜索结果有了更深入的了解,因此我们可以制定更好的策略。 如果您想观看此视频,请注册一个帐户。 如果没有,您可以稍后注册并试用。 为了获得您想要的数据,这是一项合理的服务。 他们也有免费试用,所以请继续尝试。

仪表板

当你在你的仪表板中并且你想开始玩这个时,你可以转到这里的地图图标并单击它,然后我们可以看到我在这里有一个 SERP API。 现在,您将看到配置设置,这将允许我连接许多东西,但我也可以查看 SERP API Playground。 现在您将需要此访问权限才能在这里玩耍,因为您将拥有自己的主机名。

SERP API 游乐场

如果你想先做 playground 看看你能构建什么,点击 Access Parameters 选项卡下的 SERP API Playground。 现在,我将使用输入到 Google 搜索中的相同查询“SERP 分析”,并将其放在此处。 有许多不同的设置。 您可以选择要查看的搜索结果 - Google、Bing、Yandex、Duck Duck Go。 对我来说,我们主要针对谷歌,因为它是大男孩。 然后我们可以选择是进行搜索、地图、趋势还是评论。 您可以在此处勾选许多不同的设置。

现在对我来说,我在 Python 中工作,我总是将它切换到 Python,然后很酷的是我还可以通过这个查询看到 HTML 和 JSON 输出。 当我点击搜索时,它会做一些很酷的事情。 它为我提供了我需要用来调用它的实际 Python。 但随后我看到了下面的结果,我可以单击这些元素中的每一个,它会为我把它拉到一边。 我可以看到不同的元素。 我可以看到“People Also Ask”部分,我可以在那里看到答案。 我可以有机地看到搜索结果。 我可以看到这个搜索结果中有一些视频,我可以看到相关的搜索。 在一次快速通话中,我获得了大量数据。

现在你们中的一些人可能会想,好吧,我不知道如何处理这个 JSON-LD 数据,它对我帮助不大。 它可能有点令人困惑,但事实是,它很容易分解。 但为了让它更容易,我创建了一个 CoLab 笔记本,一旦你设置了 Bright Data,你就可以在那里即插即用。

我想做的是自己更好地理解这个查询。 我们将查询放在Google CoLab中。 我们设置了 API 调用,然后您将看到 Google 搜索数据。 现在,这一切都嵌套在 JSON 中,这样看待它对我们来说并不是最有帮助的,但如果我想从中理解一些东西并用它来规划策略,我可以将它分解。

Google CoLab 中的 SERP 数据概览

我做的第一件事是构建一个叫做 SERP 数据概览的东西。 这只是在一个简单的表格中告诉我,我使用的搜索引擎,查询,这个词有多少结果,以及一些其他信息,如语言和页面标题。 我感兴趣的是有机结果。 您会看到链接(按顺序排列前 10 个)、标题、描述以及这些页面可能具有的任何扩展名。 还有其他信息 - 内联文本或星级评分、站点链接,它开始向我展示一些 SERP 功能。

然后我就可以看到等级了。 您将有机排名和全球排名。 全局排名是它在页面上所有元素中的排名方式。 这个链接在有机结果中排名第一,但在页面上排名第六。 为什么会这样? 那么,如果我们回到搜索结果,您会注意到精选片段和四个“人们也问”的问题。

第一个结果是页面上的六个向下,这对我们来说非常有说服力。 这是一个非常有竞争力的搜索结果,所有的搜索结果都是根据页面上的不同元素向下推的。

再一次,这有助于我意识到,“伙计,如果我在那个学期排名第一,我就是第六。” 如果我无法根据竞争力获得这个学期,我将在这个学期上投入多少精力和注意力?我现在开始获得洞察力。

其他很酷的是我可以看到其他一些可以作为目标的东西,因为“People Also Ask”的排名高于第一名。 我可能想对这些术语进行排名或定位。 这些问题是什么? 然后我可以构建特定的内容片段,以便在这些位置上排名。 您会看到我们可以用来做一些研究的问题、答案和链接。

我们也可以提取相关条款。 我们可以说,“好吧,也许这个术语有点太有竞争力了,但这里有一些我可能可以使用的相关术语,”这也很酷。 现在我正在进行一些关键字研究。 我对搜索结果的理解稍微好一点,并且对我可以采取的策略有了一些想法。

趋势分析

现在我也想用他们的趋势分析。 在页面顶部,您会看到其中一个选项是趋势。 我可以输入相同的查询“SERP 分析”,然后进行搜索。 现在这个问题是您不会看到 HTML 和 Python 脚本。 您将获得此原始 JSON 数据。 其中很多是嵌套的,因为这里有很多不同的数据。 同样,处理它可能有点困难。 这是 CoLab 再次提供帮助的地方。

我们正在运行查询并提取所有数据,您可能会想,“这没有任何意义。” 然后我们开始处理数据,我们可以得到一个时间线。 在过去的 12 个月里,我们看到“SERP 分析”出现下降,然后又重新出现。 它开始经常被搜索。 它自 8 月 28 日以来呈上升趋势。

我们还可以从趋势分析中提取相关关键词。 我可以提取关键字,我可以看到它们的价值。 这些趋势正在上升——“SERP 分析工具”、“SERP 分析”、“免费谷歌 SERP 分析”。 所有这些都比“GPT-3 教程”之类的东西更重要。 同样,我开始获得更多的关键字想法和一些可能不如目标词受欢迎的容易获得的成果,但对我来说排名可能更容易。

现在,在表格中查看相关关键字很好,但我们也可以使用 Python 将其可视化。 Python 很有用,因为我们可以看到哪些是突出的,并且我们知道哪些更重要,哪些不那么重要。

相关话题

我们还可以使用 Bright Data SERP API 提取相关主题,对我来说,将它与我现在了解的搜索结果配对时,这可能是我最喜欢的部分。

同样,我们可以将这些数据转储到表中。 我可以看到主题标题,也可以看到类型。 然后,如果我向下滚动,我制作了一些不同的图表,我们可以看到一些围绕特定主题的查询,一些与网站相关的查询,以及一些与软件类型相关的查询。 我们开始了解这里涉及的更多实体,我们知道这些实体很重要。 我们已经在这个频道上讨论了结构化数据和其他内容。 我可以看到它们是如何组合在一起的。 它们越大,它们越受欢迎,它们越小,它们越不受欢迎。 我可以开始了解搜索结果的整体情况。

创建和 HTML 报告

要处理的数据很多,我们可能想与其他人分享。 我们也可以在 Python 的帮助下使用所有这些信息来创建 HTML 报告。 我们可以运行代码并查看 SERP 查询的分析。 我们将看到搜索结果的样子,以及所有很棒的数据。 向下滚动时,您会看到相关术语、我们定位的查询的趋势分析、相关术语和相关主题。 现在我可以利用这些信息并查看在此页面上排名的策略,并了解搜索结果中发生的事情。

这是一个超级酷的 API。 它确实花费了一点点,但它非常合理。 我认为这是每千次通话 3 美元,但随后您可以进入并开始了解搜索结果,因为它们变化如此之大。 搜索在变,搜索结果也在变。 这将帮助您更好地了解排名的内容,回答有关内容排名原因的一些问题,并展示您需要做的一些事情以便自己获得更好的结果。

如果您查看 Bright Data SERP API,请告诉我并给我发送电子邮件。 我将向您发送此 CoLab 文件的副本,然后您可以插入数据并开始享受搜索结果带来的乐趣。

如果您有任何问题,请联系我们! 我很乐意继续与您对话。 直到下一次!