我们已经发布了一篇新的博客文章，对一些关于SEO和Cloudflare的常见问题进行了解答。你可以在这里复习一下。2010年4月，在我们向一组有限的测试用户推出CloudFlare private beta时，谷歌宣布他们将开始在排名中考虑网站速度。太棒了，我们认为，CloudFlare不仅是一个性能和安全服务，而且现在我们可以保证搜索引擎优化（SEO）的好处！令人不安的是，尽管大多数网站的速度至少提高了30%，但我们的早期测试显示，CloudFlare在搜索引擎排名方面没有太大帮助。事实上，在去年夏天大约3个月的时间里，我们听到了很多关于网站从他们的Google网站管理员工具上看到的报告，显示谷歌的搜索引擎爬虫没有经常访问页面。不好的。这不是我们轻视的问题。我们花了三个月的时间调查正在发生的事情，调查我们的技术系统，以确保搜索引擎不会受到限制，同时还直接与搜索引擎的爬网和排名团队合作。结果，答案很复杂。搜索引擎在抓取网站时不想让网站负担过重。为了尽量减少这种情况，他们按IP地址对站点进行群集，如果在一个站点上检测到问题，则会降低共享该IP的所有站点的爬网率。我们发现，CloudFlare背后的一个站点的来源有问题，因此，搜索引擎会降低其爬行"速度"（一个站点被爬网的速度）。直到有成千上万的网站使用我们的服务，并能与爬网团队合作，弄清到底发生了什么，所有这些才变得显而易见。我们做了几件事。首先，我们发明了一种新技术，当它检测到某个站点出现问题时，它会自动更改该站点的CloudFlare IP地址，从而将其与其他站点隔离开来。第二，我们直接与大型搜索引擎的爬虫团队合作，让他们了解CloudFlare的工作原理。所有的搜索引擎都有针对cdn的特殊规则，比如Akamai。CloudFlare的工作方式稍有不同，但属于同一类。在这些搜索团队的合作下，我们能够获得CloudFlare的IP范围被列在搜索爬虫中的一个特殊类别中。这不仅可以防止后面的站点被聚集到性能最低的分母，或基于DNS解析IP的错误地理标记，而且还允许搜索引擎以其最大速度爬网，因为CloudFlare可以处理负载而不会使源站负担过重。结果是引人注目的。一旦我们解决了这些问题，Google网站管理员工具上报告的问题立即得到了解决。网站页面速度得分提高。而且，虽然没有什么比为SEO提供好的、相关的内容更重要的了，但我们几乎每天都会从快乐的用户那里得到关于除了添加CloudFlare之外的任何改变都有助于他们的搜索排名。太酷了。顺便说一句，虽然我们对不同的搜索引擎如何给网站排名没有任何内部知识，但我们的轶事证据表明，处理更高搜索速度的能力可能比更快的页面加载时间更重要。最后，我们认为会很快获胜的结果却是一个令人惊讶的棘手问题。今天，我们看到许多服务追随CloudFlare的脚步，声称它们会帮助你的搜索引擎优化，因为它们可以让你的网站更快一点。事实证明，虽然看起来应该是直截了当的，但其实并不那么容易。我们很高兴我们能够为我们的用户解决问题，并最终提供真正的搜索引擎优化的好处。由于其他云服务提供商不可避免地会遇到类似的问题，我们很乐意分享我们的知识，以帮助他们解决这些棘手的问题。