SEO优化工具与网站优化的用法

Screaming Frog (SF)是用作SEO优化工具。页面优化On-page Optimization 的工具一般是要和网站平台配合，例如 WordPress SEO上使用的Yoast SEO插件。有些问题是要网站整体来看才发现，又或者整体看才能有效改善。例如：是否有重复内容？如重复的标题、中继描述 Meta Description、中继关键字 Meta Keywords 等等。搜寻引擎优化应该从审计当前网站状态开始，需要利用不同的优化工具，例如：

利用 Google analytics 查看访客的互动情况和用户体验。

利用 Search Console 查看搜寻关键字的排名和曝光。

利用 SF 扫描网站查看跨页面的网站结构性和内容问题。免费版本只限扫描 500 页，你可以输入目录将扫描专注在某分类或子目录的页面。下面是一些举例：

Table of Contents

重定向问题

有些错误是人眼不可能发现，必需以机械人身份访问才可发现。浏览器访问送回的状态码 Status Code 提示是否正常，例如本应是 301 (永久) 的重定向被错误设定为 302 (临时) 等等。您需要检查以下转址是否都转址同一URL。一个非常常见的SEO错误是将以下URL视为独立的，而不是正确使用 301 重定向到单个地址。使用SF SEO爬行工具，你可以很容易地发现这些错误。

non-WWW

WWW

HTTP://

HTTPS://

又或者 404 (页面不存在)错误问题，表示一些内部页面已被删除或更改了URL。有时您会将旧网址重定向到新网址，以避免 404 错误，但过度重定向可能导致重定向链。例如：A 重定向到 B，B 重定向到 C，C 再次重定向到 A。你亦可以在directive下捡视索引问题。例如：有些单薄的内容不希望搜寻引擎索引时可能设定为noindex,可能引起竞食Cannibalization问题的内容是否已使用 rel=”canonical” 等等。

重复的内容

进行页面优化专注个别页面时你未必会发现标题，中继描述 Meta Description 等原来已经用过。重复内容Duplicated Content不一定引起问题，但是差不多一定影响搜寻引擎对内容质量的评分。利用SF SEO爬行工具做一个描述，你可以看到当前状况以便进行改善。

网页标题除了不应重复外，太长或太短亦不好。一般搜寻引擎可以有空间列出六七十个英文字的标题，标题太长的会被剪裁。标题太短的又失却提供诱因别搜寻者点击的作用。标题长度无一定的字数标准，中文和英文长度算法又不同，其实是由于搜寻引擎所用的比例字体 Proportional Font, 不同英文字符的阔度所构成的差异。同样的道理可适用于衡量中继描述 。

用户体验

在Internal下可以找到一些关乎用户体验的数据，例如：文章长度、文章字数、文字对应 HTML 语法标签比例、爬行深度、出站连接数量等等。

Screaming Frog 爬行深度 Crawl Depth

例如主页要无需从爬行其他页面才发现，所以爬行深度是零。从主页指向的网页就是1，如此类推。爬行深度太深，表示访问用户很难接触到该页面，自然不利曝光和搜寻引擎优化。此情况常见于分类页，分类内容太多时只能以 <上一页> <下一页> 不断后移。如果分类页下有 1000怗子，每次只显示10页的摘要。最后的10页需要100次点击才能显示！改善的方法是加入其他内部连接，例如相关文章。