Return to site

链接构建工具综述:站点爬虫

· seo优化

如果搜索引擎的抓取工具无法找到要编制索引的内容,则不会对其进行排名。它也不是一个好的信号,但最重要的是,如果搜索引擎无法找到某些东西,用户可能也无法找到。这就是模仿搜索引擎爬虫行为的工具非常有用的原因。

您可以使用这些抓取工具找到各种问题,这些问题可能会严重影响您的网站在搜索引擎中的效果。作为链接构建者,他们还可以帮助您确定哪些网站值得您关注。

链接建设永远不是一个神奇的子弹。链接需要付出很多努力,建立一个遭受可怕搜索引擎优化的网站链接可能毫无用处。

在本文中,我看了四个爬虫:两个是基于Web的,两个是桌面版。我对每个进行了非常简单的分析,以向您展示在构建链接时如何使用它们,但它们有更多,更多的用途。

我将通过链接外展的使用,并确保您自己的网站在构建或吸引链接方面处于良好状态。

为了记录,以下是我将提到的每个工具的基础知识:

Sitebulb:提供14天免费试用。桌面网络爬虫。
DeepCrawl:提供7天免费试用。基于Web的爬虫。
Screaming Frog:免费下载以供轻量使用或购买许可证以获得更多功能。桌面网络爬虫。
OnCrawl:提供14天免费试用。基于Web的爬虫。
注意:这些抓取工具会不断更新,因此在发布时拍摄的屏幕截图可能与当前视图不匹配。

评估链接目标站点
使用爬虫工具可以帮助您最大限度地提高链接建设的效率和效率

进行示例站点审核。
在您联系到您想要链接的站点之前,请对站点进行审核,以便通过指出您找到的任何错误来“进入”。

样本审核的优点是使用的时间很少。我见过一些爬虫需要很长时间才能完全爬行。所以在我看来,样本审计是天才!

在下面的示例报告中,您可以只查看一些提示,并轻松地看到存在一些重复问题,这是一个很好的外展引导。

使用自定义设置运行报告,以查看链接是否值得追求。如果网站的大量内容无法访问且整个网站都存在错误,那么投入大量时间和精力来尝试获取链接可能不是一个好主意。

找到链接的最佳页面。
Sitebulb的Link Equity得分与内部PageRank相似。链接权益得分越高,页面排名的可能性越大。理论上,具有高Link Reality得分的页面中的链接应该与所有其他条件相同,更有可能帮助您从Link Equity得分低得多的页面中排名。

运行报告以查找带有反向链接的损坏页面。
DeepCrawl有一种查看这些页面的简便方法。非常适合破碎的链接建设...但即使你没有做破碎的链接建设,它与网站管理员是一个很好的“in”。

谁不想知道他们有链接指向无法找到的页面?

让您自己(或客户)的网站更具链接性
您可以在自己的网站上运行相同的报告,以查看哪些内容无法访问。永远记住,在某些情况下,您可能希望某些内容无法访问,但是,如果您希望对其进行排名,则需要对其进行访问。如果您想从中获取任何价值,您不希望寻找无法访问的内容的链接。

我有重复的内容吗?
Sitebulb有一个方便的Duplicate Content选项卡,您可以单击。在某些情况下,重复的内容会影响您的排名,因此最好避免或正确处理它。(有关重复内容的更多信息,请参阅处理重复内容。)

我的重定向是否设置正确?
作为链接构建器,我对重定向的主要关注涉及确保如果我移动或删除具有许多良好链接的页面,则通过重定向正确处理更改。对于诸如您不再携带的产品或与您的网站不再相关的信息之类的内容,重定向页面有很多争论和反对,因为这与可用性有很大关系。

我只是讨厌得到一个没有被正确重定向的页面的好链接,因为丢失链接感觉就像浪费时间。

我看到了正确的错误代码吗?
DeepCrawl有一个关于Non-200 Pages的部分非常有帮助。您可以单击并查看这些页面的图形表示。

一般来说,您希望看到大多数页面返回200代码。您希望看到301和302重定向。您不希望看到超过50%的网站返回404代码。Screaming Frog有一个选项卡,您可以在其中轻松查看所有已爬网页面的响应代码。

我会说你需要确保你知道哪些代码应该从各种页面返回,因为可能有很好的理由让某些东西返回某个代码。

DeepCrawl工具的屏幕截图

我的加载时间好吗?
有些人比我更耐心。如果页面几乎没有立即加载,我会反弹。如果您尝试获取指向某个网页的链接,并且需要10秒才能加载,那么您的转化率会令人失望。您希望确保关键页面尽快加载。

这是OnCrawl的一个报告,它可以帮助您填写任何加载太慢的页面:

我的内部链接结构如何?
您不希望有孤立的页面或看到很多内部断开的链接。如果无法找到并抓取页面,则不会对其编制索引。从用户的角度来看,良好的站点架构也非常重要。如果您有关键内容除非被搜索到之外无法找到,或者您必须点击十个不同的链接才能找到它,这并不好。

Screaming Frog有一个Inlinks列(通过单击Internal选项卡访问),它会告诉您有多少内部链接指向每个页面。您希望查看指向最关键页面的最大内部链接数。

在下面的图片中,我按照从最高到最低的Inlinks排序我自己的网站,确保最重要的页面具有最多的Inlinks。

我有太薄的页面吗?
考虑到您可以接收针对精简内容的手动操作,最好不要使用任何内容。精简内容不适合搜索引擎或用户。精简内容通常不会吸引很多很棒的链接。实际上,如果您确实拥有指向精简内容的链接,那么您可能会遇到使用具有更好资源的网站的链接构建器替换这些链接的风险。

OnCrawl可以很好地查看精简内容,这非常有用。

正如我之前所说,有很多方法可以使用这些抓取工具。不过,这是一个很大的警告!一些爬虫可以使用大量资源。我曾经抓过一个网站,客户的托管公司打电话给他说他们已经阻止了它,因为它一次发出太多请求。如果你要运行任何重型任务,请确保合适的人知道并且可以将相关的IP地址列入白名单。

All Posts
×

Almost done…

We just sent you an email. Please click the link in the email to confirm your subscription!

OKSubscriptions powered by Strikingly