云服务器价格_云数据库_云主机【优惠】最新活动-搜集站云资讯

百度云_网站的虚拟主机_速度快

小七 141 0

使用Google云平台分析Cloudflare日志

我们很高兴地宣布,我们现在与Google云平台(GCP)合作,为您的域名提供深入的网络流量分析。虽然Cloudflare Enterprise客户始终可以访问其日志,但他们以前必须依靠自己的工具来处理日志,这增加了额外的复杂性和成本。Cloudflare日志提供对流量、恶意活动、攻击事件和基础设施运行状况检查的实时洞察。输出用于帮助客户调整其设置、管理成本和资源以及规划扩展。与Google合作,我们创建了一个端到端的解决方案,允许客户以一种简单的方式检索Cloudflare访问日志、存储和处理数据。googlestorage、Cloud Function、BigQuery和datastudio等GCP组件一起实现了这一目标。数据分析的最大挑战之一是在短时间内存储和处理大量数据,同时避免高昂的成本。GCP存储和BigQuery很容易解决这些难题。Cloudflare客户可以根据需要或定期从Cloudflare访问日志中获取和处理数据。完整的解决方案将在这篇知识库文章中描述。初始设置不超过30分钟到1小时。此外,客户仍然可以用自己的工具或解决方案替换流程的任何部分。以下是数据流的简单可视化:关键要素包括:Cloudflare Logshare服务Cloudflare日志是通过restapi获得的。通常,此服务可以在本地工作站或虚拟机上运行。所示的解决方案使用GCP Compute micro实例。日志存储和管理为了存储和管理日志文件,我们使用GCP存储桶。所有日志都以JSON格式存储。Google云存储允许您在需要时调整存储容量并设置保留策略。数据导入分析大型数据集是一项挑战。googlebigquery让它变得简单明了。当有新的日志文件上传到GCP存储桶时,GCP Cloud函数会触发流程,将新日志文件中的数据导入到BigQuery中。BigQuery允许您通过运行一个简单的查询来几乎立即访问数据。如下图所示,例如,您可以使用状态代码404拉顶请求的uri。数据可视化根据客户对哪些数据感兴趣的反馈,我们使用gcpdatastudio创建可视化报表。可以在此处找到DataStudioCloudFlare日志分析模板。可以使用BigQuery作为输入在datastudio中创建以下报告:顶级客户端IP地址请求、URL请求、错误类型、缓存或未缓存的URL、顶级触发的WAF规则、按设备或位置划分的流量类型等等。DataStudio"编辑"模式DataStudio"查看"模式500美元GCP学分googlecloud为一个新的Google云账户提供500美元的信用额度,以帮助您开始使用。为了获得信用证,请遵循以下说明。成本成本取决于几个因素,包括请求数、存储、保留策略和BigQuery中的查询数等。欲了解更多定价详情,请使用GCP定价计算器。有关详细信息,请联系您的Cloudflare企业解决方案工程师或客户成功经理。