如何使用 SEO Spider 工具检测失效链接
如何找到断开的链接
您可以免费(和付费)使用 Screaming Frog SEO Spider 来检查您网站上的损坏链接(http 响应“404 未找到错误”)。
下面是一个非常快速简单的教程,介绍如何将该工具用作失效链接检查器。首先,您需要下载 SEO Spider,它可以免费抓取多达 500 个 URL。您可以通过右侧栏中的绿色按钮下载。
1) 抓取网站
打开 SEO 蜘蛛,在“输入蜘蛛的 URL”框中输入或复制您要抓取的网站,然后点击“开始”。

2) 点击’响应代码’选项卡和’客户端错误(4XX)'过滤器以查看断开的链接
您可以等到爬虫完成并达到 100%,或者您可以通过导航到“响应代码”选项卡并使用“客户端错误 4XX”过滤器在爬虫时查看 404 个断开的链接。
有两种方法可以做到这一点,您只需点击顶部的“选项卡”并使用下拉过滤器 -

或者,您可以使用右侧窗口爬虫概览窗格,然后直接单击“响应代码”文件夹下的“客户端错误 (4xx)”树视图。无论您采用哪种方式导航,它们都会显示相同的结果。

此爬网概述窗格在爬网时更新,因此您可以一目了然地看到您拥有的客户端错误 4XX 链接的数量。在上面的例子中,有 11 个客户端错误,占爬虫中发现的链接的 0.12%。
作为一种懒惰的选择,“问题”选项卡还会提醒您在抓取中发现的任何问题、警告或机会。如果发现任何损坏的链接,将在此处报告。

在这种情况下,发现的损坏链接是指向外部页面的。因此,它们被归类为低优先级警告。相比之下,内部损坏的链接被归类为高优先级问题,但在这里没有找到。
3) 通过单击“Inlinks”选项卡查看断开链接的来源
显然,你会想知道发现的失效链接的来源(网站上的哪些 URL 链接到这些失效链接),以便修复它们。为此,请单击顶部窗口窗格中的 URL,然后单击底部的“Inlinks”选项卡以填充下方窗口窗格。

您可以单击上方查看大图。正如您在此示例中所看到的,有一个指向 Moz 网站 (https://moz.com/help/guides/moz-api/mozscape/overview/free-vs-paid-access) 的断开链接,该链接从此页面 – https://www.screamingfrog.co.uk/seo-spider/user-guide/configuration/。
这是下部窗口窗格的近视图,其中详细说明了 ‘inlinks’ 数据 –

‘From’ 是可以找到 404 断开链接的来源,而 ‘To’ 是断开的链接。您还可以查看锚文本、替代文本(如果它是超链接的图像)以及链接是被跟随 (true) 还是 nofollow (false)。
看起来我们网站上唯一损坏的链接是外部链接(我们链接到的网站),但显然 SEO 蜘蛛会发现任何内部损坏的链接(如果有的话)。
4) 使用“批量导出>响应代码>客户端错误 (4XX) Inlinks”导出
如果你更愿意在电子表格中查看数据,你可以使用顶级菜单中的 “批量导出”、“响应代码 ”和 “客户端错误 (4XX) 内链接 ”选项来导出 “源 ”URL 和 “失效链接”。

这应该涵盖在网站上查找损坏链接的大多数情况。
但是,“源”URL 是链接到 404 错误页面的最后一个页面。所以有时 ‘source’ 可能是一个重定向(并且可能在重定向链中)。您可以查看 ‘source’ 是否是重定向,因为 ‘Type’ 列会显示 ‘HTTP Redirect’。
为了快速找到这些错误的原始源页面,我们建议使用“报告>重定向>所有重定向”下的“所有重定向”导出。打开报告并将 ‘final status code’ 列筛选为 ‘404’。“Source”是原始源页面,“address”是最后一个源,“最终地址”是 404 URL。
您可以通过多种方式从 SEO Spider 导出数据,因此请阅读我们的导出用户指南。
5) 抓取 URL 列表以查找失效链接
如果你有一个 URL 列表,你想检查失效的链接而不是抓取网站,那么你可以在列表模式下上传它们。
要切换到“列表”模式,请单击顶级导航栏中的“列表>模式”,然后您将能够选择粘贴 URL 或通过文件上传。

在列表模式下,抓取深度会自动设置为 ‘0’,因此它只抓取上传的 URL。
这可以通过 '配置蜘蛛> > 限制 ’ 和 ‘限制抓取深度’ 设置进行调整。例如,要抓取上传页面的外链,可以将其设置为 ‘1’。
6)查找损坏的“跳转链接”
跳转链接是一种有用的方法,它使用链接上的命名锚点将用户链接到网页的特定部分,也称为“书签”、“命名锚点”和“跳过链接”。
这些损坏的书签无法以与上述相同的方式找到,因为它们不会以 404 状态代码响应,并且经常被忽视。
您需要启用位于“Config > Spider > Advanced”中的“抓取片段标识符”,抓取网站,然后在“URL”选项卡和“损坏的书签”过滤器下查看它们。

更多推荐


所有评论(0)