打开网站抓取

[rakibhasanbd4723]

任何抓取都会发现一些新页面（内容机器从不休息），但如果您突然看到数百个单一类型的新问题，那么快速深入挖掘并确保没有问题就很重要。在理想的世界中，SEO 团队始终知道其他人和团队对网站所做的更改，但我们都知道这不是一个完美的世界。

我希望这至少能为您提供一 VK数据库 些关于如何快速深入了解您网站的技术 SEO 问题的想法。如果您是现有客户，您已经可以使用Moz 的新网站抓取功能以及本文讨论的所有功能。

新站点爬行：重建以便在更多页面上查找更多问题，速度比以往更快！
Moz 工具 | 高级 SEO | Moz 新闻
请在此处阅读我们为站点爬行添加的 5 项新升级（截至 2017 年 9 月）！

首先，好消息是——从今天起，所有 Moz Pro 客户都可以使用新版Site Crawl，这是我们完全重建的深度网站爬虫和技术 SEO 审核平台。坏消息呢？没有。它更大、更好、更快，而且您无需为此多付一分钱。

不过，请谦虚一下——如果您使用过我们现有的网站爬虫，您就会知道它并不总是能满足您的期望。事实是，它也没有达到我们的期望。一年多以前，我们开始重建后端爬虫，但我们很快意识到，我们想要的是一个完全重新设计的爬虫，包括前端和后端，并具有我们所能提供的最佳功能。今天，我们推出了该新爬虫的第一个版本。

代号：土狼
后端是全新的。我们完全重建的“Aardwolf”引擎爬行速度提高了一倍，同时挖掘深度也大大提升。对于较大的帐户，它可以支持多达 10 个并行爬虫，实际速度可达旧爬虫的 20 倍。Aardwolf 还完全支持 SNI 站点（包括 Cloudflare），从而纠正了我们旧爬虫的一个主要缺点。