ODBC 経由で、ClickHouse を外部データベースに接続できます。
ODBC 接続を安全に実装するため、ClickHouse は別プログラムの clickhouse-odbc-bridge を使用します。ODBC ドライバを clickhouse-server から直接読み込むと、ドライバーの問題によって ClickHouse サーバーがクラッシュする可能性があります。ClickHouse は必要に応じて clickhouse-odbc-bridge を自動的に起動します。ODBC bridge プログラムは、clickhouse-server と同じパッケージからインストールされます。
このエンジンは Nullable データ型をサポートしています。
テーブルの作成
CREATE TABLE [IF NOT EXISTS] [db.]table_name [ON CLUSTER cluster]
(
name1 [type1],
name2 [type2],
...
)
ENGINE = ODBC(datasource, external_database, external_table)CREATE TABLE クエリの詳細な説明を参照してください。
テーブル構造は、ソーステーブルの構造と異なる場合があります。
- カラム名はソーステーブルのものと同じである必要がありますが、それらの一部だけを任意の順序で使用できます。
- カラムの型は、ソーステーブルのものと異なる場合があります。ClickHouse は値を ClickHouse のデータ型に キャスト しようとします。
- external_table_functions_use_nulls 設定は、Nullable カラムの処理方法を定義します。デフォルト値: 1。0 の場合、テーブル関数は Nullable カラムを作成せず、NULL の代わりにデフォルト値を挿入します。これは Array 内の NULL 値にも適用されます。
エンジンパラメータ
datasource—odbc.iniファイル内の接続設定を含むセクション名。external_database— 外部 DBMS 内のデータベース名。external_table—external_database内のテーブル名。
これらのパラメータは、名前付きコレクション を使用して渡すこともできます。
使用例
ODBC 経由でローカルにインストールされた MySQL からデータを取得する
この例は、Ubuntu Linux 18.04 および MySQL server 5.7 で動作確認しています。
unixODBC と MySQL Connector がインストールされていることを確認してください。
デフォルトでは (パッケージからインストールした場合) 、ClickHouse はユーザー clickhouse として起動します。そのため、MySQL server 側でこのユーザーを作成し、設定する必要があります。
$ sudo mysqlmysql> CREATE USER 'clickhouse'@'localhost' IDENTIFIED BY 'clickhouse';
mysql> GRANT ALL PRIVILEGES ON *.* TO 'clickhouse'@'localhost' WITH GRANT OPTION;次に、/etc/odbc.ini で接続設定を行います。
$ cat /etc/odbc.ini
[mysqlconn]
DRIVER = /usr/local/lib/libmyodbc5w.so
SERVER = 127.0.0.1
PORT = 3306
DATABASE = test
USER = clickhouse
PASSWORD = clickhouseunixODBC に付属の isql ユーティリティを使用して、接続を確認できます。
$ isql -v mysqlconn
+-------------------------+
| Connected! |
| |
...MySQLのテーブル:
mysql> CREATE DATABASE test;
Query OK, 1 row affected (0,01 sec)
mysql> CREATE TABLE `test`.`test` (
-> `int_id` INT NOT NULL AUTO_INCREMENT,
-> `int_nullable` INT NULL DEFAULT NULL,
-> `float` FLOAT NOT NULL,
-> `float_nullable` FLOAT NULL DEFAULT NULL,
-> PRIMARY KEY (`int_id`));
Query OK, 0 rows affected (0,09 sec)
mysql> insert into test.test (`int_id`, `float`) VALUES (1,2);
Query OK, 1 row affected (0,00 sec)
mysql> select * from test.test;
+------+----------+-----+----------+
| int_id | int_nullable | float | float_nullable |
+------+----------+-----+----------+
| 1 | NULL | 2 | NULL |
+------+----------+-----+----------+
1 row in set (0,00 sec)MySQL テーブルからデータを取得する ClickHouse 側のテーブル:
CREATE TABLE odbc_t
(
`int_id` Int32,
`float_nullable` Nullable(Float32)
)
ENGINE = ODBC('DSN=mysqlconn', 'test', 'test')SELECT * FROM odbc_t┌─int_id─┬─float_nullable─┐
│ 1 │ ᴺᵁᴸᴸ │
└────────┴────────────────┘