Перейти к основному содержимому
Перейти к основному содержимому

Шаблоны Google Dataflow

ClickHouse Supported

Шаблоны Google Dataflow предоставляют удобный способ выполнения предустановленных, готовых к использованию конвейеров данных без необходимости написания пользовательского кода. Эти шаблоны предназначены для упрощения общих задач обработки данных и построены с использованием Apache Beam, используя коннекторы, такие как ClickHouseIO, для бесшовной интеграции с базами данных ClickHouse. Запуская эти шаблоны на Google Dataflow, вы можете достичь высокой масштабируемости и распределенной обработки данных с минимальными усилиями.

Зачем использовать шаблоны Dataflow?​

  • Простота использования: Шаблоны исключают необходимость в кодировании, предлагая предварительно настроенные конвейеры, адаптированные к конкретным случаям использования.
  • Масштабируемость: Dataflow обеспечивает эффективное масштабирование вашего конвейера, обрабатывая большие объемы данных с помощью распределенной обработки.
  • Экономия затрат: Платите только за ресурсы, которые вы используете, с возможностью оптимизации затрат на выполнение конвейера.

Как запустить шаблоны Dataflow​

На сегодняшний день официальный шаблон ClickHouse доступен через Google Cloud CLI или Dataflow REST API. Для подробных пошаговых инструкций обратитесь к Руководству по запуску конвейера Dataflow из шаблона.

Список шаблонов ClickHouse​