当然,这些变化通常会让用户更容易与页面交互,但它们也会影响搜索机器人。让我们用一个具体的例子来仔细看看这种情况。

据 Google 称,我选择的网站有大约 10,000 个页面,以及 72 个域权限和 22,670 个引用域(根据新的Moz Link Explorer)。然而,对于它的移动版本,它使用流行的 WordPress 插件,它只留下文章和页面,同时从类别页面上的文章描述中删除链接,以及大多数(如果不是全部)来自 菲律宾手机号码列表 侧边栏(侧边栏)和页脚。超过 200,000 个站点使用此插件。如果我们使用Screaming Frog程序运行六级扫描会发生什么?(这对于这种分析非常有用,因为我们可以轻松地更改用户代理并通过仅抓取站点的 HTML 内容来限制设置。)

使用移动插件在网站上进行移动与桌面网站抓取 使用移动版本的插件抓取站点。
移动版与桌面版

菲律宾手机号码列表

深度统计 深度统计
移动抓取仅发现 3,280 个页面,并且没有发现超过 4 个深度级别的新链接。桌面抓取发现 19,696。 扫描手机版只找到3280页。同时,没有发现比第 4 层更深的新链接。桌面扫描显示 19,696 页。

差异令人难以置信。首先,在移动爬 cz 列表 虫(左)中,每页的链接数极低。而且这个数字是相当均匀的,并且对站点进行了更深入的扫描。这就是创造如此稳定的指数增长曲线的原因。其次,注意——扫描在第四层突然结束。该站点根本无法为移动爬行提供更多功能!根据谷歌报告,在大约 10000 个索引页面中只找到了大约 3000 个。

发表回复

您的电子邮箱地址不会被公开。 必填项已用 * 标注