SEO资源网络爬虫之战：人们来到我们这里问：“网络爬虫WebSite Auditor比Screaming Frog更好吗？”首先，听到这样的话很痛苦。其次，是的，我们知道很多人都以纯粹的喜悦使用Screaming Frog，甚至对WebSite Auditor没有任何意见。然后它会更痛。为了让人们看到，我们对这两种工具进行了比较评估。它最终成为全面性的母亲，但我们立即意识到没有比较表将反映WebSite Auditor所具有的所有杀手级特性和设计。所以，我决定专门写一篇文章来介绍这两种工具可以为你的优化过程做些什么。通过这种方式，您可以自行判断哪一种更方便，或者如果您喜欢，哪种更好。1.请参阅您网站的技术部分。虽然关键字研究和链接建设业务有点棘手，并需要不断的创造力和竞争对手窥视，但您的网站的技术部分完全在您的掌控之中。使用正确的工具，您将能够看到所有需要您干预的问题，例如：检查的因素可抓取性和索引 – 检查机器人指令和HTTP响应代码，以确保搜索引擎和用户可以访问不同的资源;重定向 – 检查302重定向和元刷新，混合内容，rel =“canonical”等，以确保您的网站的所有重要页面将被搜索引擎和用户发现;代码 – 检查框架的存在（可能会降低搜索引擎眼中页面的相关性）和W3C问题（可能导致用户体验不佳）;内部链接 – 检查可能对用户体验造成负面影响并混淆搜索引擎的损坏链接，并关注传出链接，因为链接太多的页面可能被搜索引擎视为垃圾内容;页面速度 – 检查未压缩的资源和图像，服务器响应时间以及重定向次数，以避免负面用户体验并降低跳出率;图片 – 检查破损的图片和空白替代文字，以避免负面的用户体验，并为搜索引擎再次提供关于您的网页的信息;移动友好 – 2018年应该成为Google最终转向移动优先索引的一年，因此您必须检查您的移动版本以了解所有可能的错误和问题。既然你看到了一个工作的范围，那么你必须很高兴有一些工具可以为你做所有这些事情。TL; DRWebSite Auditor和Screaming Frog都完全适合这项任务。但是，WebSite Auditor的显着优势在于，所有用于分析的数据都将在逻辑上集群并且视觉丰富。使用Screaming Frog，您将不得不访问相当多的选项卡和列以收集所有必要的信息，然后分析电子表格中的刮取数据。更多细节尖叫青蛙：你知道，当谈到与Screaming Frog合作时，人们将现场审计与寻宝（其中宝藏是那些能够排名的错误）进行比较。虽然你几乎可以用这个工具找到任何东西，但实际上你应该寻找它：你必须知道要寻找什么以及去哪里去检查它。我的意思是，例如，要查看一个区块的信息，例如页面速度，您必须访问不少标签和列以收集您需要进行彻底分析的所有信息。另外，一些数据将以CSV格式提取为报告。这意味着要进行现场审计，您基本上必须管理电子表格并找出必要的信息。
对于不懂技术的用户可能会感到恐惧。网站审计员：与此同时，WebSite Auditor具有相同的功能，它提供相同的数据，但是这些数据在逻辑上是聚集的（索引问题，重定向，编码问题，页面速度等）。所以你不必去地方收集所有必要的信息，它已经为你收集了！更重要的是，如果您有任何问题或错误，WebSite Auditor会为您提供如何解决问题的有用建议，如何解决问题，注意什么以及为什么这个因素很重要。基本上，在分析过程中，即使你没有任何意图寻找它们，你也可以发现一些问题。网站审计员将简单地指出，如果你有任何。而那不是它！该工具还允许其用户运行移动审计：虽然WebSite Auditor根据Google移动指南检查移动友好性，但Screaming Frog只允许其用户抓取网站作为移动机器人。2.优化您的内容以获得更好的排名。内容为王，这句话如此真实，令人恼火。但是，即使您确定自己的内容具有独特性和相关性，并且您的关键字研究是基于语义和详尽的，但也可能有数十个网站也可以夸耀其完美内容。在这种情况下，您必须确保您的网站具有所有可以告诉搜索引擎和用户的路标：这是您一直在寻找的目的地，只要您需要，就可以随时待来，享受您所看到的内容和经验。为了提供这种状态，您需要以下内容：检查的因素标题标签优化 – 检查标题（页面和SERP片段中最重要的元素）的长度，相关性和关键字。元描述优化 – 检查元描述（页面和SERP片段中的一个更重要的元素），了解它们的长度，相关性和关键字。标题优化 – 标题是搜索引擎强大的相关性信号，再加上它们的逻辑结构可以帮助赢得SERP中的特色片段框。
H1是最重要的一个，因此，建议您将关键字加入到H2-6中。替代文字优化 – 检查图片是否存在替代文字（含关键词），以确保搜索引擎在抓取过程中能够理解您的图片。TL; DR尖叫青蛙无法优化内容。它只能使用其他工具来获取必要的数据以进一步分析和优化。但是，WebSite Auditor是一款全功能的工具，它可以同等质量地完成技术和页面审计，而无需其他工具。更多细节网站审计员：WebSite Auditor有一个专门用于内容分析的特殊模块，可以检查您对标题，元描述，正文和图像中关键字的处理方式。另外，所有基于关键字的计算均基于先进的TF-IDF（术语频率 – 逆文档频率）算法。它与老派关键字密度指标无关。相反，它可以准确地确定您的页面或任何其他元素对目标关键字的优化程度。在同一个地方，你可以发现是否有技术因素缩短你的排名。如果发现任何不正确或需要稍作修改的情况，您的分析将会附带相关建议。另外，您将获得您的竞争对手正在使用的关键字：最好的情况是，可以立即开始在应用程序的相应模块中应用更正，并查看页面上显示的更改。或者，您可以在源代码中进行更正。所有更改将保存在HTML中。也可以更改您的SERP片段并查看其在搜索列表中的外观：该工具的另一个杀手功能是它有一个专用于TF-IDF分析的整个仪表板。通过分析顶级竞争对手的网页中的术语和概念，它有助于提高页面的主题相关性。它会显示任何条款是否与该主题相关，是否正确使用，是否应该使用更少或更多。它是语义关键词研究的重要灵感来源。尖叫青蛙：尽管Screaming Frog更像是一款抓取工具和技术审计工具，但它会将所有标题，元描述，标题（H1和H2）以及图像信息都刮掉。通过过滤，可以发现错误和软点，尽管您必须亲自或通过其他工具的帮助才能看到关键字优化。该工具还允许其用户对SERP片段进行更改并查看其在搜索列表中的外观：不幸的是，当涉及TF-IDF时，Screaming Frog没有任何替代方案。很显然，这个工具并不是专门用于页面审计，但我们认为TF-IDF这样的模块对于整个优化过程是必不可少的。无论如何，你需要这样的分析才能排名更高。因此，你将不得不寻找一个额外的应用程序来做到这一点。
3.可视化您的网站结构。一张图片胜过千言万语。当一些应用程序获得了新的功能 – 站点结构可视化时，它突然变成了SEO。为什么？您可以滚动无尽的内部链接列表，浏览重定向和孤儿，也可以浏览图片并立即看到全部内容。很明显，某些链接模式在电子表格中可能不是那么明显，但通过可视化立即识别出来。
SEO资源
检查的因素网站结构中存在的问题：单独链接的连续字符串，重定向，断开链接和孤立页面有问题的内部链接汁分布TL; DR网站审计员将使用您的网站结构的交互式可编辑可视化令您和您的客户满意。Screaming Frog将为您提供电子表格中您网站结构的所有必要数据。您可以使用想象力将所有内容形象化，或使用其他工具使数据交互。更多细节网站审计员：WebSite审核员很自豪地介绍交互式可视化，通过点击深度显示您的网站结构，您将立即看到孤立页面（灰色显示），网站的孤立部分（连续节点链），重定向（蓝色显示），破碎链接（以红色显示）。或者，您可以通过内部PageRank进行过滤，以查看您的链接果汁是如何分布在您的网页上的。这确实是向客户和队友展示网站结构中的问题的好方法。他们将获得直观的网站可视化，以图形方式突出显示这些问题，而不是看似不起眼的电子表格。更重要的是，该应用程序允许您通过添加或删除链接并通过标记对可视化图形进行着色来编辑您的网站结构，以便您可以改进内部链接和PageRank流程，摆脱断开的链接和不必要的重定向，等等 – 直到您的图形干净，结构完美。尖叫青蛙：Screaming Frog无法通过网站结构的交互式可视化使其用户满意。但是，它仍然具有爬网路径报告以及重定向链和孤立页面的报告。
另外，可以使用Screaming Frog中的数据与例如Gephi等可视化工具集成。当心，这将是一件令人汗血的工作。首先，你将不得不精心制作从Screaming Frog中提取的链接。然后，一旦你的电子表格加载到Gephi中，你会看到数据表示为一组随机点。之后，你将不得不运行一些布局算法来获得接近你网站结构的交互式图片的东西。4.创建一个报告。除非你是小企业，否则你的业务团队由你和你的猫组成，你需要为你的客户，你的老板或你的团队做报告。创建美丽的报告，无需您的任何额外解释即可与您的客户交谈，这可能会成为真正的痛苦。想象一下，当您的审计工具能够为您创建可行的报告时，您可以获得一定程度的解脱。报告救济因素可以创建报告分享报告的可能性（下载，发布，打印）。
SEO资源