Estuary — это платформа для своевременной обработки данных, которая гибко сочетает данные реального времени и пакетные данные в ETL-конвейерах с простой настройкой. Благодаря безопасности корпоративного класса и гибким вариантам развертывания Estuary обеспечивает надежные потоки данных из SaaS, баз данных и потоковых источников в различные пункты назначения, включая ClickHouse.
Estuary предоставляет два основных способа интеграции с ClickHouse:
В обоих случаях Estuary выполняет захват и перемещение данных. Вам не нужно поддерживать собственную экосистему Kafka или другую инфраструктуру.
Когда выбирать каждую интеграцию
Прямая материализация в ClickHouse от Estuary рекомендуется для большинства сценариев. Она специально разработана для работы с собственным протоколом ClickHouse и поддерживает как самоуправляемые развертывания, так и инстансы ClickHouse Cloud.
Выберите интеграцию ClickPipe, если хотите управлять конвейерами через ClickPipes. Она позволяет обрабатывать входящие данные, например сообщения Kafka.
Дополнительные ресурсы
Подробнее о настройке интеграции с Estuary см. в документации Estuary:
- Ознакомьтесь с возможностями Estuary.
- См. справочную документацию по коннектору Estuary для прямой материализации в ClickHouse.
- См. справочную документацию по интеграции Kafka ClickPipe от Estuary.
- Список источников, которые можно передавать в ClickHouse через Estuary в потоковом режиме, см. в разделе capture-коннекторов Estuary.