支持 ClickHouse
Google Dataflow 模板 提供了一种便捷方式,让你无需编写自定义代码即可运行预构建、开箱即用的数据管道。这些模板旨在简化常见的数据处理任务,基于 Apache Beam 构建,并借助 ClickHouseIO 等连接器与 ClickHouse 数据库无缝集成。通过在 Google Dataflow 上运行这些模板,你可以以极低的工作量实现高度可扩展的分布式数据处理。
为什么使用 Dataflow 模板?
- 易用性:模板提供针对特定用例预先配置好的管道,无需编写代码。
- 可扩展性:Dataflow 可确保你的管道高效扩展,并通过分布式处理应对海量数据。
- 成本效益:你只需为实际使用的资源付费,同时还能优化管道的执行成本。
如何运行 Dataflow 模板
目前,ClickHouse 官方模板可通过 Google Cloud Console、CLI 或 Dataflow REST API 使用。 如需详细的分步说明,请参阅 Google Dataflow“从模板运行管道”指南。