日志分析

通过分析日志,我们可以确定像谷歌或百度这样的搜索引擎扫描了哪些页面。我们将这些数据与爬虫进行比较,以了解搜索引擎可以访问哪些内容,以及站点的结构可以提供哪些内容。日志分析有助于更好地理解搜索引擎在您的网站上做什么,以便提供高级SEO建议,帮助您的页面排名更高。


分析搜索引擎行为



3种类型的网址URL


为了日志分析,我们需要从您的服务器获取日志,以便在特定的一段时间内获得来自机器人和用户的所有数据。然后,我们将抓取您的网站,以了解目前可用的内容,以及网站的结构。一旦我们有了这两个数据,我们将合并它们,创建报告并发布关于三种主要URL类型的建议。

孤立页面

URL网址被搜索引擎知道,但却不属于站点的结构。这些URL将无法正常运行。我们的目标是把它们放回网站的结构中,如果它们是相关的,或者应用于特定的建议的,以便于搜索引擎就不再对它们进行爬行。

不抓取