Перейти к основному содержанию
Перейти к основному содержанию

Движок таблицы ODBC

Not supported in ClickHouse Cloud

Позволяет ClickHouse подключаться к внешним базам данных через ODBC.

Для безопасной организации ODBC-подключений ClickHouse использует отдельную программу clickhouse-odbc-bridge. Если ODBC-драйвер загружается непосредственно из clickhouse-server, проблемы в драйвере могут привести к сбою сервера ClickHouse. ClickHouse автоматически запускает clickhouse-odbc-bridge, когда это требуется. Программа моста ODBC устанавливается из того же пакета, что и clickhouse-server.

Этот движок поддерживает тип данных Nullable.

Создание таблицы

CREATE TABLE [IF NOT EXISTS] [db.]table_name [ON CLUSTER cluster]
(
    name1 [type1],
    name2 [type2],
    ...
)
ENGINE = ODBC(источник_данных, внешняя_база_данных, внешняя_таблица)

См. подробное описание запроса CREATE TABLE.

Структура таблицы может отличаться от структуры исходной таблицы:

  • Имена столбцов должны совпадать с именами в исходной таблице, но вы можете использовать только часть этих столбцов и в любом порядке.
  • Типы столбцов могут отличаться от типов в исходной таблице. ClickHouse пытается привести значения к типам данных ClickHouse.
  • Настройка external_table_functions_use_nulls определяет, как обрабатывать столбцы типа Nullable. Значение по умолчанию: 1. Если установлено 0, табличная функция не делает столбцы Nullable и вставляет значения по умолчанию вместо null. Это также относится к значениям NULL внутри массивов.

Параметры движка

  • datasource — Имя раздела с настройками подключения в файле odbc.ini.
  • external_database — Имя базы данных во внешней СУБД.
  • external_table — Имя таблицы в external_database.

Эти параметры также можно передавать с помощью именованных коллекций.

Пример использования

Получение данных из локального экземпляра MySQL через ODBC

Этот пример протестирован на Ubuntu Linux 18.04 и MySQL Server 5.7.

Убедитесь, что установлены unixODBC и MySQL Connector.

По умолчанию (при установке из пакетов) ClickHouse запускается от имени пользователя clickhouse. Поэтому вам необходимо создать и настроить этого пользователя на сервере MySQL.

$ sudo mysql
mysql> CREATE USER 'clickhouse'@'localhost' IDENTIFIED BY 'clickhouse';
mysql> GRANT ALL PRIVILEGES ON *.* TO 'clickhouse'@'localhost' WITH GRANT OPTION;

Затем настройте подключение в /etc/odbc.ini.

$ cat /etc/odbc.ini
[mysqlconn]
DRIVER = /usr/local/lib/libmyodbc5w.so
SERVER = 127.0.0.1
PORT = 3306
DATABASE = test
USER = clickhouse
PASSWORD = clickhouse

Вы можете проверить соединение с помощью утилиты isql, входящей в состав unixODBC.

$ isql -v mysqlconn
+-------------------------+
| Подключено!                           |
|                                       |
...

Таблица в MySQL:

mysql> CREATE DATABASE test;
Query OK, 1 row affected (0,01 sec)

mysql> CREATE TABLE `test`.`test` (
    ->   `int_id` INT NOT NULL AUTO_INCREMENT,
    ->   `int_nullable` INT NULL DEFAULT NULL,
    ->   `float` FLOAT NOT NULL,
    ->   `float_nullable` FLOAT NULL DEFAULT NULL,
    ->   PRIMARY KEY (`int_id`));
Query OK, 0 rows affected (0,09 sec)

mysql> insert into test.test (`int_id`, `float`) VALUES (1,2);
Query OK, 1 row affected (0,00 sec)

mysql> select * from test.test;
+------+----------+-----+----------+
| int_id | int_nullable | float | float_nullable |
+------+----------+-----+----------+
|      1 |         NULL |     2 |           NULL |
+------+----------+-----+----------+
1 row in set (0,00 sec)

Таблица в ClickHouse, которая получает данные из таблицы MySQL:

CREATE TABLE odbc_t
(
    `int_id` Int32,
    `float_nullable` Nullable(Float32)
)
ENGINE = ODBC('DSN=mysqlconn', 'test', 'test')
SELECT * FROM odbc_t
┌─int_id─┬─float_nullable─┐
│      1 │           ᴺᵁᴸᴸ │
└────────┴────────────────┘

Смотрите также