Cloudflare推出免出口费用的数据平台

2025年11月01日 由 佚名 发表 24 0

Cloudflare最近宣布了Cloudflare数据平台的公开测试版,这是一种托管解决方案,采用Apache Iceberg等开放标准来摄取、存储和查询分析数据表。


今年早些时候,Cloudflare推出了R2数据目录的公开测试版,这是一个基于R2对象存储构建的托管Apache Iceberg目录。最近,该公司将Cloudflare Pipelines、R2数据目录和R2 SQL整合,形成了Cloudflare数据平台。Micah Wylde,Cloudflare的首席工程师,Alex Graham,Cloudflare的高级系统工程师,以及Jérôme Schneider,Cloudflare的软件工程师,解释道:


分析数据对现代公司至关重要。它可以帮助你了解用户行为、公司表现,并提醒你注意潜在问题。然而,传统的数据基础设施昂贵且难以操作,需要固定的云基础设施和内部专业知识。我们构建了Cloudflare数据平台,使其简单易用,任何人都能使用,并且价格实惠,按使用量计费。


Cloudflare Data Platform


来源:Cloudflare博客


Cloudflare Pipelines收集通过Workers或HTTP发送的事件,使用SQL处理这些事件,并将其存储在Iceberg表中或作为文件存储在R2中。R2数据目录跟踪Iceberg元数据,现在还负责常规维护任务,如压缩,以加快查询速度。R2 SQL是一个用于R2中PB级数据集的分布式无服务器查询引擎。Micah Wylde,前Arroyo的联合创始人兼CEO,在LinkedIn上补充道:


六个月前,Arroyo被Cloudflare收购。这在当时引起了一些疑问——Cloudflare要一个流处理引擎做什么?答案是:我们正在构建一个数据平台(...) Cloudflare开发者平台通过提供完全无服务器的基础设施,使数百万开发者能够构建、操作和扩展他们的应用程序。Cloudflare数据平台采用相同的方法,使分析数据基础设施对每个人都可用。


虽然SQL转换在模式化和规范化数据或在存储前编辑敏感信息等用例中非常强大,但Pipelines目前仅支持无状态转换。未来,Cloudflare计划利用更多Arroyo的有状态处理能力,以支持聚合、增量更新的物化视图和连接。CDS UK的解决方案架构师Jamie Lord强调新平台的一个主要优势,即Cloudflare标准的“免出口费用”来访问数据:


零出口费用从根本上改变了数据仓库的经济学。Cloudflare的新数据平台利用这一优势来挑战AWS和Google在分析工作负载上的垄断。该平台解决了一个简单的事实:公司在数据传输成本上损失了大量资金。一个PB级的操作可能每年仅在跨区域分析数据的移动上就花费数百万。Cloudflare完全消除了这一点。


McGaw.io的工程总监Joel Hatmaker评论道:


如果你已经在使用Cloudflare的性能和安全功能,Cloudflare数据平台看起来非常有吸引力。


Cloudflare声称,与Logpush的集成、通过Workers的用户定义函数以及R2 SQL中的聚合和连接将在2026年上半年推出。


一个教程可用于创建一个端到端的分析数据系统,使用Pipelines、R2数据目录和R2 SQL。在公开测试期间,Pipelines、R2数据目录和R2 SQL不收费,但查询产生的存储和操作按标准费率收费。


文章来源:https://www.infoq.com/news/2025/11/cloudflare-data-platform/
欢迎关注ATYUN官方公众号
商务合作及内容投稿请联系邮箱:bd@atyun.com
评论 登录
热门职位
Maluuba
20000~40000/月
Cisco
25000~30000/月 深圳市
PilotAILabs
30000~60000/年 深圳市
写评论取消
回复取消