MySQL Table Engine
Движок MySQL позволяет выполнять запросы SELECT
и INSERT
к данным, которые хранятся на удаленном MySQL сервере.
Создание таблицы
Смотрите подробное описание запроса CREATE TABLE.
Структура таблицы может отличаться от оригинальной структуры таблицы MySQL:
- Имена колонок должны совпадать с именами в оригинальной таблице MySQL, но вы можете использовать только некоторые из этих колонок и в любом порядке.
- Типы колонок могут отличаться от тех, что в оригинальной таблице MySQL. ClickHouse пытается привести значения к типам данных ClickHouse.
- Настройка external_table_functions_use_nulls определяет, как обрабатывать Nullable колонки. Значение по умолчанию: 1. Если 0, функция таблицы не создаёт Nullable колонки и вставляет значения по умолчанию вместо null. Это также применимо к NULL значениям внутри массивов.
Движок MySQL в настоящее время недоступен в сборках ClickHouse для MacOS (issue)
Параметры движка
host:port
— адрес сервера MySQL.database
— имя удаленной базы данных.table
— имя удаленной таблицы.user
— пользователь MySQL.password
— пароль пользователя.replace_query
— флаг, который преобразует запросыINSERT INTO
вREPLACE INTO
. Еслиreplace_query=1
, запрос заменяется.on_duplicate_clause
— выражениеON DUPLICATE KEY on_duplicate_clause
, которое добавляется к запросуINSERT
. Пример:INSERT INTO t (c1,c2) VALUES ('a', 2) ON DUPLICATE KEY UPDATE c2 = c2 + 1
, гдеon_duplicate_clause
этоUPDATE c2 = c2 + 1
. Смотрите документацию MySQL, чтобы узнать, какоеon_duplicate_clause
вы можете использовать сON DUPLICATE KEY
. Чтобы указатьon_duplicate_clause
, нужно передать0
параметруreplace_query
. Если вы одновременно передаетеreplace_query = 1
иon_duplicate_clause
, ClickHouse генерирует исключение.
Аргументы также могут быть переданы с использованием именованных коллекций. В этом случае host
и port
должны быть указаны отдельно. Этот подход рекомендуется для производственной среды.
Простые условия WHERE
, такие как =, !=, >, >=, <, <=
, выполняются на сервере MySQL.
Остальные условия и ограничение LIMIT
выполняются в ClickHouse только после завершения запроса к MySQL.
Поддерживает несколько реплик, которые должны быть перечислены через |
. Например:
Пример использования
Создайте таблицу в MySQL:
Создайте таблицу в ClickHouse, используя обычные аргументы:
Или используя именованные коллекции:
Извлечение данных из таблицы MySQL:
Настройки
Настройки по умолчанию не очень эффективны, так как они даже не повторно используют соединения. Эти настройки позволяют увеличить количество запросов, выполняемых сервером в секунду.
connection_auto_close
Позволяет автоматически закрывать соединение после выполнения запроса, т.е. отключить повторное использование соединения.
Возможные значения:
- 1 — Авто-закрытие соединения разрешено, поэтому повторное использование соединения отключено
- 0 — Авто-закрытие соединения не разрешено, поэтому повторное использование соединения включено
Значение по умолчанию: 1
.
connection_max_tries
Устанавливает количество попыток для пула с переключением на резервный сервер.
Возможные значения:
- Положительное целое число.
- 0 — Нет попыток для пула с переключением на резервный сервер.
Значение по умолчанию: 3
.
connection_pool_size
Размер пула соединений (если все соединения используются, запрос будет ждать, пока какое-то соединение не будет освобождено).
Возможные значения:
- Положительное целое число.
Значение по умолчанию: 16
.
connection_wait_timeout
Тайм-аут (в секундах) для ожидания свободного соединения (в случае, если уже есть connection_pool_size активных соединений), 0 - не ждать.
Возможные значения:
- Положительное целое число.
Значение по умолчанию: 5
.
connect_timeout
Тайм-аут подключения (в секундах).
Возможные значения:
- Положительное целое число.
Значение по умолчанию: 10
.
read_write_timeout
Тайм-аут чтения/записи (в секундах).
Возможные значения:
- Положительное целое число.
Значение по умолчанию: 300
.