Перейти к основному содержимому
Перейти к основному содержимому

MySQL Table Engine

Движок MySQL позволяет выполнять запросы SELECT и INSERT к данным, которые хранятся на удаленном MySQL сервере.

Создание таблицы

Смотрите подробное описание запроса CREATE TABLE.

Структура таблицы может отличаться от оригинальной структуры таблицы MySQL:

  • Имена колонок должны совпадать с именами в оригинальной таблице MySQL, но вы можете использовать только некоторые из этих колонок и в любом порядке.
  • Типы колонок могут отличаться от тех, что в оригинальной таблице MySQL. ClickHouse пытается привести значения к типам данных ClickHouse.
  • Настройка external_table_functions_use_nulls определяет, как обрабатывать Nullable колонки. Значение по умолчанию: 1. Если 0, функция таблицы не создаёт Nullable колонки и вставляет значения по умолчанию вместо null. Это также применимо к NULL значениям внутри массивов.
примечание

Движок MySQL в настоящее время недоступен в сборках ClickHouse для MacOS (issue)

Параметры движка

  • host:port — адрес сервера MySQL.
  • database — имя удаленной базы данных.
  • table — имя удаленной таблицы.
  • user — пользователь MySQL.
  • password — пароль пользователя.
  • replace_query — флаг, который преобразует запросы INSERT INTO в REPLACE INTO. Если replace_query=1, запрос заменяется.
  • on_duplicate_clause — выражение ON DUPLICATE KEY on_duplicate_clause, которое добавляется к запросу INSERT. Пример: INSERT INTO t (c1,c2) VALUES ('a', 2) ON DUPLICATE KEY UPDATE c2 = c2 + 1, где on_duplicate_clause это UPDATE c2 = c2 + 1. Смотрите документацию MySQL, чтобы узнать, какое on_duplicate_clause вы можете использовать с ON DUPLICATE KEY. Чтобы указать on_duplicate_clause, нужно передать 0 параметру replace_query. Если вы одновременно передаете replace_query = 1 и on_duplicate_clause, ClickHouse генерирует исключение.

Аргументы также могут быть переданы с использованием именованных коллекций. В этом случае host и port должны быть указаны отдельно. Этот подход рекомендуется для производственной среды.

Простые условия WHERE, такие как =, !=, >, >=, <, <=, выполняются на сервере MySQL.

Остальные условия и ограничение LIMIT выполняются в ClickHouse только после завершения запроса к MySQL.

Поддерживает несколько реплик, которые должны быть перечислены через |. Например:

Пример использования

Создайте таблицу в MySQL:

Создайте таблицу в ClickHouse, используя обычные аргументы:

Или используя именованные коллекции:

Извлечение данных из таблицы MySQL:

Настройки

Настройки по умолчанию не очень эффективны, так как они даже не повторно используют соединения. Эти настройки позволяют увеличить количество запросов, выполняемых сервером в секунду.

connection_auto_close

Позволяет автоматически закрывать соединение после выполнения запроса, т.е. отключить повторное использование соединения.

Возможные значения:

  • 1 — Авто-закрытие соединения разрешено, поэтому повторное использование соединения отключено
  • 0 — Авто-закрытие соединения не разрешено, поэтому повторное использование соединения включено

Значение по умолчанию: 1.

connection_max_tries

Устанавливает количество попыток для пула с переключением на резервный сервер.

Возможные значения:

  • Положительное целое число.
  • 0 — Нет попыток для пула с переключением на резервный сервер.

Значение по умолчанию: 3.

connection_pool_size

Размер пула соединений (если все соединения используются, запрос будет ждать, пока какое-то соединение не будет освобождено).

Возможные значения:

  • Положительное целое число.

Значение по умолчанию: 16.

connection_wait_timeout

Тайм-аут (в секундах) для ожидания свободного соединения (в случае, если уже есть connection_pool_size активных соединений), 0 - не ждать.

Возможные значения:

  • Положительное целое число.

Значение по умолчанию: 5.

connect_timeout

Тайм-аут подключения (в секундах).

Возможные значения:

  • Положительное целое число.

Значение по умолчанию: 10.

read_write_timeout

Тайм-аут чтения/записи (в секундах).

Возможные значения:

  • Положительное целое число.

Значение по умолчанию: 300.

Дополнительно