Post by account_disabled on Jan 8, 2024 4:11:41 GMT
您将看到如下所示的内容： 从上面的屏幕截图中可以看出，标记为红色框的 URL（节点）是可以视为孤立的 URL，因为它们具有较高的抓取深度并且埋藏得很深。 例如，我选择了一个NODE（URL），从下面的截图中可以看到，该URL可以被识别，并且可以发现Crawl深度！ PS：请注意，这些页面与页面不同，您可以从简单的Crawl-tree爬行深度中发现，如“强制定向爬行”，极端节点可以被可视化，这将显示深埋的页面没有任何链接到其他页面的引用！ 推荐： 列出所有终端节点 如果您发现这些页面没有价值，那么您可以删除它们 如果您发现它们有价值，那么您可以使用合并技术将它们合并 WhatsApp 号码数据 到相关页面，如下所示： https: //thatware.co/merge-pages-to-gain-rank/ 最后，您还可以将它们包含在 HTML 站点地图中，并利用更好的互连策略来减少深度。 类型 b：不可索引的页面分析 通常，爬网程序可能会遇到任何相应 URL 的严重问题，由于任何前所未有的索引错误，这些问题将阻止它们建立索引。
在 Screaming Frog Spider 的帮助下，可以跟踪此类页面，从而轻松获得干净的架构。 观察： 单击“可视化”，然后单击“强制定向目录树图”。 您将看到如下所示的内容。请注意，红色越深，这些 URL 的索引问题越严重。现在您可以过滤并入围所有亮点红色标记节点，如下所示！ 推荐： 列出所有颜色呈亮红色的节点 验证这些页面是否为您的受众提供有意义的价值。如果是，那么请实施 HTML 站点地图或内部链接以减少抓取深度。您还可以查找其他页面移动性问题，以发现此类 URL 的页面移动性友好性 如果您认为所识别的 URL 对您的受众没有价值，那么您可以将其删除，这将有助于避免您的抓取预算浪费和索引膨胀问题。 第 4 章：发现 XML 站点地图中的问题 在 SEO 和网站抓取方面，XML 站点地图是一个非常重要的元素。XML 文件是网络爬虫抓取第一手资料以获取完整信息以及给定网站中存在的 URL 列表的文件。其中任何一个问题都会成为整个网站抓取的问题因素，SEO的效率将会下降！ 观察： 点击“配置”，选择“ Spider ” 然后保留如下所示的设置。基本上，您需要取消选中所有选项并仅允许对 XML 进行爬网。 完成后，您将能够看到与 XML 站点地图相关的所有问题，如下面的屏幕截图所示： 推荐： 不在站点地图中的 URL =如果 XML 站点地图中不存在任何 URL，请添加它们，因为 XML 中没有 URL 将无助于该特定 URL 的任何索引。 孤立 URL =此段下的任何 URL 应立即删除！ 站点地图中不可索引的 URL =此段下的任何 URL 应立即删除！
多个站点地图中的 URL =此部分下的任何 URL 应立即删除！ 包含超过 50K URL 的 XML 站点地图 =根据一般规则，给定的 .xml 文件最多只能包含 50K URL，如果您的 URL 超过 50K，请尝试创建另一个 XML。例如，假设您有一个包含 100K 页面的网站。 那么 www.example.com/sitemap1.xml 可以包含 50K URL www.example.com/sitemap2.xml 可以包含 50K 个 URL XML 站点地图超过 50 MB =根据一般规则，给定的 .xml 文件大小需要在 50MB 以内。如果大小超出，请尝试创建另一个站点地图以降低负载和大小。使用 SCREAMING FROG 进行链接位置分析 链接位置是链接在网页上的位置。跟踪链接位置至关重要，因为它被用作 Google 算法中的排名因素。制定内部反向链接的放置位置将有助于将 PageRank 传递到您认为重要的页面。反过来，这个位置将向搜索引擎发出信号，表明您认为网站上最重要的页面是什么。 使用尖叫青蛙进行链接位置分析 什么是链接位置？ 链接位置是指链接在页面上的位置，最常见的页面部分是导航、侧边栏、主要内容或页脚。 为什么它有用？ #识别并修复链接 #改善内部链接结构 #提高SEO排名 链接位置分析流程： 首先，爬取Screaming Frog中的网站，如下图： 在“输入蜘蛛的 URL”框中添加您想要抓取的网站，然后点击“开始”。 等待网络抓取完成并进行分析。如果抓取完成后没有自动分析。在爬网结束时单击爬网分析>>配置>>自动分析。 在顶部窗口中突出显示 URL： 在任何选项卡中，突出显示要分析内链接位置的链接。
在 Screaming Frog Spider 的帮助下，可以跟踪此类页面，从而轻松获得干净的架构。 观察： 单击“可视化”，然后单击“强制定向目录树图”。 您将看到如下所示的内容。请注意，红色越深，这些 URL 的索引问题越严重。现在您可以过滤并入围所有亮点红色标记节点，如下所示！ 推荐： 列出所有颜色呈亮红色的节点 验证这些页面是否为您的受众提供有意义的价值。如果是，那么请实施 HTML 站点地图或内部链接以减少抓取深度。您还可以查找其他页面移动性问题，以发现此类 URL 的页面移动性友好性 如果您认为所识别的 URL 对您的受众没有价值，那么您可以将其删除，这将有助于避免您的抓取预算浪费和索引膨胀问题。 第 4 章：发现 XML 站点地图中的问题 在 SEO 和网站抓取方面，XML 站点地图是一个非常重要的元素。XML 文件是网络爬虫抓取第一手资料以获取完整信息以及给定网站中存在的 URL 列表的文件。其中任何一个问题都会成为整个网站抓取的问题因素，SEO的效率将会下降！ 观察： 点击“配置”，选择“ Spider ” 然后保留如下所示的设置。基本上，您需要取消选中所有选项并仅允许对 XML 进行爬网。 完成后，您将能够看到与 XML 站点地图相关的所有问题，如下面的屏幕截图所示： 推荐： 不在站点地图中的 URL =如果 XML 站点地图中不存在任何 URL，请添加它们，因为 XML 中没有 URL 将无助于该特定 URL 的任何索引。 孤立 URL =此段下的任何 URL 应立即删除！ 站点地图中不可索引的 URL =此段下的任何 URL 应立即删除！
多个站点地图中的 URL =此部分下的任何 URL 应立即删除！ 包含超过 50K URL 的 XML 站点地图 =根据一般规则，给定的 .xml 文件最多只能包含 50K URL，如果您的 URL 超过 50K，请尝试创建另一个 XML。例如，假设您有一个包含 100K 页面的网站。 那么 www.example.com/sitemap1.xml 可以包含 50K URL www.example.com/sitemap2.xml 可以包含 50K 个 URL XML 站点地图超过 50 MB =根据一般规则，给定的 .xml 文件大小需要在 50MB 以内。如果大小超出，请尝试创建另一个站点地图以降低负载和大小。使用 SCREAMING FROG 进行链接位置分析 链接位置是链接在网页上的位置。跟踪链接位置至关重要，因为它被用作 Google 算法中的排名因素。制定内部反向链接的放置位置将有助于将 PageRank 传递到您认为重要的页面。反过来，这个位置将向搜索引擎发出信号，表明您认为网站上最重要的页面是什么。 使用尖叫青蛙进行链接位置分析 什么是链接位置？ 链接位置是指链接在页面上的位置，最常见的页面部分是导航、侧边栏、主要内容或页脚。 为什么它有用？ #识别并修复链接 #改善内部链接结构 #提高SEO排名 链接位置分析流程： 首先，爬取Screaming Frog中的网站，如下图： 在“输入蜘蛛的 URL”框中添加您想要抓取的网站，然后点击“开始”。 等待网络抓取完成并进行分析。如果抓取完成后没有自动分析。在爬网结束时单击爬网分析>>配置>>自动分析。 在顶部窗口中突出显示 URL： 在任何选项卡中，突出显示要分析内链接位置的链接。