настройки формата input_format_*

Эти настройки автоматически сгенерированы на основе исходного файла.

Задает максимально допустимое количество ошибок при чтении из текстовых форматов (CSV, TSV и т. д.).

Значение по умолчанию — 0.

Всегда используйте этот параметр вместе с input_format_allow_errors_ratio.

Если при чтении строк возникает ошибка, но счетчик ошибок все еще меньше input_format_allow_errors_num, ClickHouse игнорирует эту строку и переходит к следующей.

Если превышены значения и input_format_allow_errors_num, и input_format_allow_errors_ratio, ClickHouse генерирует исключение.

Задаёт максимально допустимый процент ошибок при чтении из текстовых форматов (CSV, TSV и т. д.). Процент ошибок задаётся числом с плавающей точкой в диапазоне от 0 до 1.

Значение по умолчанию — 0.

Всегда используйте этот параметр вместе с input_format_allow_errors_num.

Если при чтении строк возникает ошибка, но счётчик ошибок всё ещё меньше input_format_allow_errors_ratio, ClickHouse игнорирует строку и переходит к следующей.

Если превышены оба порога — input_format_allow_errors_num и input_format_allow_errors_ratio, ClickHouse генерирует исключение.

Разрешает seek (или чтение диапазонов) при чтении входных форматов ORC, Parquet и Arrow. Если параметр включен и источник это поддерживает (например, локальный файл, S3, HTTP с поддержкой диапазонов и известным размером), ClickHouse может читать только нужные диапазоны байтов и расходовать меньше памяти. Если параметр отключен или источник не поддерживает seek (например, размер файла неизвестен или поток не поддерживает seek), некоторые модули чтения могут переключаться на загрузку всего файла в память. Включено по умолчанию.

Разрешить отсутствие столбцов при чтении входных форматов Arrow

Игнорировать регистр при сопоставлении столбцов Arrow со столбцами ClickHouse.

Пропускать столбцы с неподдерживаемыми типами при определении схемы для формата Arrow

Для формата Avro/AvroConfluent: если поле отсутствует в схеме, использовать значение по умолчанию вместо ошибки

Для форматов Avro/AvroConfluent: использовать значение по умолчанию в случае NULL и для столбцов без типа Nullable

Считывать типы данных в бинарном формате вместо имён типов во входном формате RowBinaryWithNamesAndTypes

Максимальное количество узлов типа при декодировании бинарных типов (не глубина, а общее число). Map(String, UInt32) = 3 узла. Защищает от вредоносных входных данных. 0 = без ограничений.

Считывать значения типа данных JSON как String-значения, содержащие JSON, во входном формате RowBinary.

Пропускать поля с неподдерживаемыми типами при определении схемы для формата BSON.

Пропускать столбцы с неподдерживаемыми типами при определении схемы для формата CapnProto

Определяет режим сопоставления имён столбцов при ингестии данных через различные форматы (включая, но не ограничиваясь, JSONEachRow, CSVWithNames, JSONColumns, BSONEachRow, RowBinaryWithNames). Поддерживаемые режимы:

• match_case: сопоставлять с учётом регистра
  • ignore_case: сопоставлять без учёта регистра
  • auto: сначала пытается сопоставлять с учётом регистра; если не удаётся, пытается сопоставлять без учёта регистра.

Если этот параметр включен, то при неожиданном закрытии соединения оставшиеся в буфере данные будут разобраны и обработаны, а не приведут к ошибке

Если задано значение true, \r будет разрешён в конце строки, за которым не следует

Игнорировать лишние столбцы во входных CSV-данных (если в файле столбцов больше, чем ожидается) и обрабатывать отсутствующие поля во входных CSV-данных как значения по умолчанию

Разрешает использовать пробелы и символы табуляции (\t) в качестве разделителей полей в строках CSV

При чтении Array из CSV предполагается, что его элементы были сериализованы во вложенный CSV, а затем помещены в строку. Пример: "[""Hello"", ""world"", ""42"""" TV""]". Скобки вокруг массива можно опустить.

Если задано значение true, отдельные столбцы, записанные в формате CSV, можно десериализовать в столбец Tuple.

Это применимо только к обычному Tuple. Nullable(Tuple) всегда записывается как одно поле CSV (см. output_format_csv_serialize_tuple_into_separate_columns) и, соответственно, считывается обратно из одного поля, а не из отдельных столбцов, независимо от этой настройки. Разбор отдельных столбцов для Nullable(Tuple) не поддерживается, потому что начальное поле \N неоднозначно (это может быть как внешний NULL кортежа, так и NULL его первого элемента).

Поскольку обычный Tuple занимает по одному полю на элемент, \N в поле непосредственного элемента верхнего уровня относится к этому элементу, а не ко всему столбцу, поэтому input_format_null_as_default применяется к этому элементу. Строка, содержащая одно поле для всего кортежа, не содержит полей для оставшихся элементов и отклоняется вместо использования значения столбца по умолчанию. Установите для этой настройки значение 0, чтобы снова считывать такое поле как весь столбец. \N в поле элемента вложенного Tuple по-прежнему считывается как весь этот вложенный элемент.

Автоматически определять заголовок с именами и типами в формате CSV

Считать пустые поля во входных данных CSV значениями по умолчанию.

Считать вставляемые значения enum в форматах CSV индексами enum

Определяет, как читать Nullable(String) при отсутствии значения в CSV. Отсутствующее значение — это пустое место между запятыми, перед ними или после них, не заключенное в кавычки. Если эта настройка включена, то независимо от значения input_format_csv_empty_as_default отсутствующее значение Nullable(String) будет интерпретироваться как пустой String, а не как NULL.

Пропускать указанное количество строк в начале данных в формате CSV

Пропускать пустые строки в конце в формате CSV

Удаляет пробелы и символы табуляции (\t) в начале и конце строк CSV

Если включено, при определении схемы ClickHouse будет пытаться распознавать числа в строковых полях. Это может быть полезно, если данные CSV содержат числа UInt64 в кавычках.

По умолчанию отключено.

Интерпретировать заключённые в кавычки Tuple во входных данных как значения типа String.

Использовать дополнительные настройки и эвристики для определения схемы в формате CSV

Позволяет устанавливать для столбца значение по умолчанию, если десериализация поля CSV завершается ошибкой из-за некорректного значения

Игнорировать лишние столбцы во входных данных CustomSeparated (если в файле столбцов больше, чем ожидается) и рассматривать отсутствующие поля во входных данных CustomSeparated как значения по умолчанию

Автоматически определять заголовок с именами и типами в формате CustomSeparated

Пропускать пустые строки в конце в формате CustomSeparated

При выполнении запросов INSERT пропущенные значения входных столбцов заменяются значениями по умолчанию соответствующих столбцов. Эта опция применяется к форматам JSONEachRow (и другим форматам JSON), CSV, TabSeparated, TSKV, Parquet, Arrow, Avro, ORC, Native, а также к форматам с суффиксами WithNames/WithNamesAndTypes.

Возможные значения:

• 0 — Отключено.
• 1 — Включено.

Принудительно инициализировать пропущенные поля значениями NULL

Определяет, что происходит, если при чтении входных данных GeoJSON нужно сохранить в столбце geometry корректный геометрический тип GeoJSON, который не может быть представлен типом Geometry в ClickHouse (например, GeometryCollection).

Возможные значения:

• 'throw' (по умолчанию) — сгенерировать исключение.
• 'null' — вставить значение NULL в столбец geometry и продолжить разбор.

Это применимо только тогда, когда столбец geometry материализован. Если он не запрошен как выходной столбец, такая геометрия проверяется на корректность, но эта обработка не срабатывает.

Игнорировать лишние столбцы во входных данных в формате Hive Text (если в файле больше столбцов, чем ожидается) и обрабатывать отсутствующие поля как значения по умолчанию

Разделитель между элементами коллекции (Array или Map) в Hive Text File

Разделитель полей в Hive Text File

Разделитель между ключом и значением в паре map в Hive Text File

Включает или отключает вставку JSON-данных с вложенными объектами.

Поддерживаемые форматы:

• JSONEachRow

Возможные значения:

• 0 — Отключено.
• 1 — Включено.

См. также:

• Использование структур Nested в формате JSONEachRow.

При десериализации IPv4 при ошибке преобразования будут использоваться значения по умолчанию вместо генерации исключения.

По умолчанию отключено.

При десериализации IPv6 при ошибке преобразования будут использоваться значения по умолчанию вместо того, чтобы сгенерировать исключение.

По умолчанию отключено.

Разрешает переменное количество столбцов в строках во входных форматах JSONCompact/JSONCompactEachRow. Лишние столбцы в строках, где их больше, чем ожидается, игнорируются, а отсутствующие столбцы считаются значениями по умолчанию.

По умолчанию отключено.

Подставляет значения по умолчанию для отсутствующих элементов в объекте JSON при разборе именованного кортежа. Этот параметр работает только при включенном параметре input_format_json_named_tuples_as_objects.

Включен по умолчанию.

При включении пустые поля во входном JSON заменяются значениями по умолчанию. Для сложных выражений по умолчанию также должна быть включена настройка input_format_defaults_for_omitted_fields.

Возможные значения:

• 0 — Отключено.
• 1 — Включено.

Игнорировать неизвестные ключи в объекте JSON при обработке именованных кортежей.

Включено по умолчанию.

Игнорировать лишние поля и не разбирать их. При включении этого параметра исключения для JSON-строк с некорректным форматом или дублирующимися полями могут не генерироваться

Если включено, при определении схемы ClickHouse будет использовать тип Array(Dynamic) для JSON-массивов со значениями разных типов данных.

Пример:

SET input_format_json_infer_array_of_dynamic_from_array_of_different_types=1;
DESC format(JSONEachRow, '{"a" : [42, "hello", [1, 2, 3]]}');

┌─name─┬─type───────────┐
│ a    │ Array(Dynamic) │
└──────┴────────────────┘

SET input_format_json_infer_array_of_dynamic_from_array_of_different_types=0;
DESC format(JSONEachRow, '{"a" : [42, "hello", [1, 2, 3]]}');

┌─name─┬─type─────────────────────────────────────────────────────────────┐
│ a    │ Tuple(Nullable(Int64), Nullable(String), Array(Nullable(Int64))) │
└──────┴──────────────────────────────────────────────────────────────────┘

Включено по умолчанию.

Позволяет использовать тип String для JSON-ключей, которые в выборке данных при определении схемы содержат только Null/{}/[]. В форматах JSON любое значение можно прочитать как String, поэтому при определении схемы можно избежать ошибок вида Cannot determine type for column 'column_name' by first 25000 rows of data, most likely this column contains only Nulls or empty Arrays/Maps, используя тип String для ключей с неизвестными типами.

Пример:

SET input_format_json_infer_incomplete_types_as_strings = 1, input_format_json_try_infer_named_tuples_from_objects = 1;
DESCRIBE format(JSONEachRow, '{"obj" : {"a" : [1,2,3], "b" : "hello", "c" : null, "d" : {}, "e" : []}}');
SELECT * FROM format(JSONEachRow, '{"obj" : {"a" : [1,2,3], "b" : "hello", "c" : null, "d" : {}, "e" : []}}');

Результат:

┌─name─┬─type───────────────────────────────────────────────────────────────────────────────────────────────────────────────────┬─default_type─┬─default_expression─┬─comment─┬─codec_expression─┬─ttl_expression─┐
│ obj  │ Tuple(a Array(Nullable(Int64)), b Nullable(String), c Nullable(String), d Nullable(String), e Array(Nullable(String))) │              │                    │         │                  │                │
└──────┴────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┴──────────────┴────────────────────┴─────────┴──────────────────┴────────────────┘

┌─obj────────────────────────────┐
│ ([1,2,3],'hello',NULL,'{}',[]) │
└────────────────────────────────┘

Включено по умолчанию.

Десериализует столбцы типа Map как JSON-массивы кортежей.

По умолчанию отключено.

Максимальная глубина поля в JSON. Это не жёсткое ограничение: его не обязательно соблюдать в точности.

Максимально допустимый размер одного объекта JSON в байтах. Объекты, превышающие этот лимит, отклоняются как вероятно некорректные. Это защищает от исчерпания памяти, когда некорректный JSON-документ разбирается как единый объект. Этот лимит применяется как при параллельном, так и при непараллельном разборе. Установите 0, чтобы отключить проверку.

При формировании внутренних буферов String JSON-столбца при разборе JSON из строки ограничивает рост по степеням двойки указанным числом байтов: когда зарезервированный размер достигает этого значения, буфер увеличивается на это значение вместо удвоения. Это ограничивает избыточное выделение памяти для больших JSON-столбцов. 0 означает отсутствие ограничений (чистое удвоение).

Разбирать столбцы с именованными кортежами как объекты JSON.

Включено по умолчанию.

Позволяет разбирать JSON-массивы как строки во входных JSON-форматах.

Пример:

SET input_format_json_read_arrays_as_strings = 1;
SELECT arr, toTypeName(arr), JSONExtractArrayRaw(arr)[3] from format(JSONEachRow, 'arr String', '{"arr" : [1, "Hello", [1,2,3]]}');

Результат:

┌─arr───────────────────┬─toTypeName(arr)─┬─arrayElement(JSONExtractArrayRaw(arr), 3)─┐
│ [1, "Hello", [1,2,3]] │ String          │ [1,2,3]                                   │
└───────────────────────┴─────────────────┴───────────────────────────────────────────┘

Включено по умолчанию.

Разрешает интерпретировать логические значения как числа во входных форматах JSON.

Включено по умолчанию.

Разрешает разбирать логические значения как строки во входных форматах JSON.

Включено по умолчанию.

Разрешает разбирать числа как строки во входных JSON-форматах.

Включено по умолчанию.

Разрешает разбирать объекты JSON как строки во входном формате JSON.

Пример:

SET input_format_json_read_objects_as_strings = 1;
CREATE TABLE test (id UInt64, obj String, date Date) ENGINE=Memory();
INSERT INTO test FORMAT JSONEachRow {"id" : 1, "obj" : {"a" : 1, "b" : "Hello"}, "date" : "2020-01-01"};
SELECT * FROM test;

Результат:

┌─id─┬─obj──────────────────────┬───────date─┐
│  1 │ {"a" : 1, "b" : "Hello"} │ 2020-01-01 │
└────┴──────────────────────────┴────────────┘

Включено по умолчанию.

Генерирует исключение, если JSON-строка содержит некорректную escape-последовательность во входных JSON-форматах. Если параметр отключен, некорректные escape-последовательности сохраняются в данных как есть.

Включено по умолчанию.

Если настройка включена, то при определении схемы ClickHouse будет пытаться определять именованный Tuple из объектов JSON. Полученный именованный Tuple будет содержать все элементы из всех соответствующих объектов JSON в выборочных данных.

Пример:

SET input_format_json_try_infer_named_tuples_from_objects = 1;
DESC format(JSONEachRow, '{"obj" : {"a" : 42, "b" : "Hello"}}, {"obj" : {"a" : 43, "c" : [1, 2, 3]}}, {"obj" : {"d" : {"e" : 42}}}')

Результат:

┌─name─┬─type───────────────────────────────────────────────────────────────────────────────────────────────┬─default_type─┬─default_expression─┬─comment─┬─codec_expression─┬─ttl_expression─┐
│ obj  │ Tuple(a Nullable(Int64), b Nullable(String), c Array(Nullable(Int64)), d Tuple(e Nullable(Int64))) │              │                    │         │                  │                │
└──────┴────────────────────────────────────────────────────────────────────────────────────────────────────┴──────────────┴────────────────────┴─────────┴──────────────────┴────────────────┘

Включено по умолчанию.

Если параметр включен, при определении схемы ClickHouse будет пытаться распознавать числа в строковых полях. Это может быть полезно, если данные JSON содержат числа UInt64 в кавычках.

По умолчанию отключено.

Использовать тип String вместо исключения при неоднозначных путях в объектах JSON во время вывода именованных кортежей

Для входных форматов JSON/JSONCompact/JSONColumnsWithMetadata, если для этой настройки задано значение 1, типы из метаданных во входных данных будут сравниваться с типами соответствующих столбцов таблицы.

Включено по умолчанию.

Ограничивает размер блоков в байтах, формируемых при разборе данных во входных форматах. Используется во входных форматах на основе строк, когда блок формируется на стороне ClickHouse. 0 означает отсутствие ограничения по размеру в байтах.

Ограничивает максимальное время ожидания в миллисекундах перед выдачей блока при разборе данных в построчных входных форматах. 0 означает отсутствие ограничения.

Пример: стриминг недавних изменений в Википедии в ClickHouse

clickhouse-client --query 'CREATE TABLE wikipedia_edits (data JSON)'

curl -sS --globoff -H 'Accept: application/json' --no-buffer \
  'https://stream.wikimedia.org/v2/stream/recentchange' \
  | clickhouse-client \
      --query 'INSERT INTO wikipedia_edits FORMAT JSONAsObject' \
      --input_format_max_block_wait_ms 1000 \
      --input_format_connection_handling 1 \
      --min_insert_block_size_rows 0 \
      --min_insert_block_size_bytes 0

Максимальный объём данных в байтах, который считывается для автоматического определения схемы.

Максимальное количество строк данных, считываемых для автоматического определения схемы.

Количество столбцов во вставляемых данных MsgPack. Используется для автоматического определения схемы на основе данных.

Сопоставлять столбцы таблицы из MySQL dump со столбцами таблицы ClickHouse по именам

Имя таблицы в дампе MySQL, из которой нужно читать данные

Разрешить преобразование типов во входном формате Native

Читать типы данных в бинарном формате вместо имён типов во входном формате Native

Включает или отключает инициализацию полей со значением NULL значениями по умолчанию, если тип данных этих полей не Nullable. Если тип столбца не Nullable и этот параметр отключен, то вставка NULL вызывает исключение. Если тип столбца — Nullable, значения NULL вставляются как есть, независимо от этого параметра.

Этот параметр применим к большинству входных форматов.

Для сложных выражений по умолчанию также должен быть включен input_format_defaults_for_omitted_fields.

Возможные значения:

• 0 — Вставка NULL в столбец, не являющийся Nullable, вызывает исключение.
• 1 — Поля со значением NULL инициализируются значениями столбца по умолчанию.

Разрешить отсутствующие столбцы при чтении данных в формате ORC

Игнорировать регистр при сопоставлении столбцов ORC со столбцами ClickHouse.

Рассматривать столбцы ORC, закодированные с помощью словаря, как столбцы LowCardinality при чтении файлов ORC.

При чтении файлов ORC позволяет пропускать целые страйп или группа строк на основе выражений WHERE/PREWHERE, статистики min/max или bloom-фильтра в метаданных ORC.

Название часового пояса для построчного считывателя ORC; часовой пояс построчного считывателя ORC по умолчанию — GMT.

Размер батча при чтении страйпов ORC.

Пропускать столбцы с неподдерживаемыми типами при автоматическом определении схемы для формата ORC

Включает или отключает параллельный парсинг с сохранением порядка для форматов данных. Поддерживается только для форматов TabSeparated (TSV), TSKV, CSV и JSONEachRow.

Возможные значения:

• 1 — Включено.
• 0 — Отключено.

Использовать парсер геостолбцов для преобразования Array(UInt8) в типы Point/MultiPoint/Linestring/Polygon/MultiLineString/MultiPolygon

Разрешить отсутствие столбцов при чтении входного формата Parquet

При чтении файлов Parquet пропускать целые группы строк на основании выражений WHERE и bloom-фильтра в метаданных Parquet.

Игнорировать регистр при сопоставлении столбцов Parquet со столбцами ClickHouse без учёта регистра.

При чтении файлов Parquet (с ридер v3) пропускает целые группы строк на основе выражений WHERE/PREWHERE и содержимого страниц словаря, если все страницы данных фрагмента столбца закодированы с использованием словаря. Значение — максимальный размер страницы словаря (в байтах), для которого применяется эта оптимизация; установите 0, чтобы отключить её. Если доступны оба механизма, эта настройка имеет приоритет над bloom-фильтром.

При чтении файлов Parquet разбирать JSON-столбцы как JSON-столбцы ClickHouse.

Включает предварительную загрузку групп строк при парсинге Parquet. В настоящее время предварительная загрузка поддерживается только при однопоточном парсинге.

При чтении файлов Parquet пропускает целые группы строк на основании выражений WHERE/PREWHERE и статистики min/max в метаданных Parquet.

Минимальное количество байтов, необходимое при локальном чтении файла для выполнения seek вместо чтения с пропуском во входном формате Parquet

Определяет тип данных, используемый при автоматическом определении схемы для временных меток Parquet с isAdjustedToUTC=false. Если true: DateTime64(…, 'UTC'), если false: DateTime64(…). Ни один из вариантов не является полностью корректным, так как в ClickHouse нет типа данных для локального времени без привязки к часовому поясу. Как ни парадоксально, вариант true, вероятно, менее ошибочен, поскольку форматирование временной метки 'UTC' как String даст корректное представление локального времени.

Максимальный размер блока для ридера Parquet.

Приблизительный лимит памяти для ридера Parquet v3. Ограничивает количество групп строк или столбцов, которые можно читать параллельно. При чтении нескольких файлов в одном запросе ограничение применяется к суммарному использованию памяти для всех этих файлов.

Более агрессивно запускает операции предварительного чтения, если использование памяти ниже порога. Может быть полезно, например, если по сети нужно читать много небольших bloom-фильтров.

Пропускать страницы на основе минимальных/максимальных значений из индекса столбца.

Средний размер блока в байтах на выходе ридера Parquet

Не меняйте порядок строк при чтении файлов Parquet. Не рекомендуется, так как порядок строк обычно не гарантируется, а другие части конвейера выполнения запроса могут его нарушить. Вместо этого используйте ORDER BY _row_number.

Пропускать столбцы с неподдерживаемыми типами при автоматическом определении схемы для формата Parquet

При чтении файлов GeoParquet пропускайте целые группы строк и, при включённом input_format_parquet_page_filter_push_down, отдельные страницы на основе пространственных предикатов в предложении WHERE и статистики ограничивающего прямоугольника геометрии (столбцы geospatial_statistics.bbox или covering.bbox) в метаданных Parquet.

Небольшое изменение в способе чтения страниц из файла Parquet, когда фильтрация страниц не используется.

Проверять контрольные суммы страниц при чтении файлов Parquet.

Включает wrappers Google для обычных невложенных столбцов, например google.protobuf.StringValue 'str' для столбца String 'str'. Для столбцов с типом Nullable пустые wrappers распознаются как значения по умолчанию, а отсутствующие — как null

Указывает, какое поле protobuf oneof было обнаружено, путём установки значения enum в специальном столбце

Пропускать поля с неподдерживаемыми типами при автоматическом определении схемы для формата Protobuf

Считывать целое число без кавычек для столбца DateTime/DateTime64 как исходное значение: секунды для DateTime, тики с точностью столбца для DateTime64, а не как Unix-временную метку в секундах.

По умолчанию отключено: число без кавычек интерпретируется как Unix-временная метка в секундах (с возможной точностью до долей секунды), что соответствует формату Values, CAST и toDateTime64. Включите эту настройку (или SET compatibility = '26.7'), чтобы восстановить поведение версий до 26.7 включительно, при котором целое число без кавычек, передаваемое в столбец DateTime64, интерпретировалось как исходное масштабированное значение (тики). Устаревший путь принимает только такое целое число без кавычек: при включенной настройке число с дробной частью или экспонентой отклоняется путями ввода строк (как и до версии 26.8), тогда как в JSONExtract и типизированном типе JSON дробное число по-прежнему считывается как секунды для DateTime64 и отклоняется для DateTime (также как и до версии 26.8). В самом формате Values число, отклоненное потоковым парсером, затем передается на вычисление SQL-выражения и считывается как секунды как до версии 26.8, так и при включенной настройке — поэтому поведение Values для дробных чисел одинаково при любой конфигурации.

Эта настройка влияет только на пути JSON, Values/Quoted и JSONExtract/типизированный JSON (путь Quoted охватывает все форматы, разбирающие поля по правилу экранирования Quoted: Values, MySQLDump и Template/CustomSeparated/Regexp, настроенные с экранированием полей Quoted). На форматы с табличным разделением, CSV и другие экранированные/полнотекстовые форматы она не влияет: в них большое число DateTime64 без кавычек по-прежнему считывается как тики.

Путь к файлу, используемому для записи ошибок при чтении текстовых форматов (CSV, TSV).

Включает или отключает пропуск лишних данных при вставке.

При записи данных ClickHouse генерирует исключение, если входные данные содержат столбцы, которых нет в целевой таблице. Если пропуск включен, ClickHouse не вставляет лишние данные и не генерирует исключение.

Поддерживаемые форматы:

• JSONEachRow (и другие JSON-форматы)
• BSONEachRow (и другие JSON-форматы)
• TSKV
• Все форматы с суффиксами WithNames/WithNamesAndTypes
• MySQLDump
• Native

Возможные значения:

• 0 — Отключено.
• 1 — Включено.

Если включено, ClickHouse будет пытаться определять тип Date по строковым полям при автоматическом определении схемы для текстовых форматов. Если все поля в столбце входных данных были успешно разобраны как даты, результирующий тип будет Date; если хотя бы одно поле не удалось разобрать как дату, результирующий тип будет String.

Включено по умолчанию.

Если включено, ClickHouse попытается автоматически определить тип DateTime64 для строковых полей при автоматическом определении схемы для текстовых форматов. Если все поля в столбце входных данных были успешно разобраны как значения даты и времени, результирующий тип будет DateTime64; если хотя бы одно поле не удалось разобрать как значение даты и времени, результирующий тип будет String.

Включено по умолчанию.

Когда включен параметр input_format_try_infer_datetimes, определять только DateTime64, а не типы DateTime

Пытаться определять числа с плавающей точкой в экспоненциальной форме при автоматическом определении схемы в текстовых форматах (кроме JSON, где числа в экспоненциальной форме определяются всегда)

Если включено, ClickHouse будет пытаться определять целочисленные типы вместо типов с плавающей точкой при автоматическом определении схемы для текстовых форматов. Если все числа в столбце входных данных являются целыми, результирующим типом будет Int64; если хотя бы одно число имеет дробную часть, результирующим типом будет Float64.

Включено по умолчанию.

Если включено, ClickHouse будет пытаться определять тип Variant при определении схемы для текстовых форматов, когда для элементов столбца/массива возможно более одного типа.

Возможные значения:

• 0 — Отключено.
• 1 — Включено.

Игнорировать лишние столбцы во входных данных TSV (если в файле столбцов больше, чем ожидается) и считать отсутствующие поля во входных данных TSV значениями по умолчанию

Если параметр имеет значение true, функция file будет читать формат TSV с окончанием строк \r\n вместо \n.

Автоматически определять заголовок с именами и типами в формате TSV

Считать пустые поля во входных данных TSV значениями по умолчанию.

Считать значения enum, вставляемые в форматах TSV, индексами enum.

Пропускать указанное количество строк в начале данных в TSV format

Пропускать пустые строки в конце в формате TSV

Использовать дополнительные настройки и эвристики для автоматического определения схемы в формате TSV

Для формата Values: при разборе и интерпретации выражений по шаблону проверяйте фактический тип литерала, чтобы избежать возможных проблем с переполнением и потерей точности.

Для формата Values: если поле не удалось разобрать потоковым парсером, запускается SQL-парсер, определяется шаблон SQL-выражения, затем с помощью этого шаблона выполняется попытка разобрать все строки, после чего выражение интерпретируется для всех строк.

Для формата Values: если поле не удалось разобрать потоковым парсером, используется SQL-парсер, который пытается интерпретировать его как SQL-выражение.

Включает или отключает проверку порядка столбцов при вставке данных.

Чтобы повысить производительность вставки, рекомендуем отключить эту проверку, если вы уверены, что порядок столбцов во входных данных совпадает с порядком столбцов в целевой таблице.

Поддерживаемые форматы:

• CSVWithNames
• CSVWithNamesAndTypes
• TabSeparatedWithNames
• TabSeparatedWithNamesAndTypes
• JSONCompactEachRowWithNames
• JSONCompactEachRowWithNamesAndTypes
• JSONCompactStringsEachRowWithNames
• JSONCompactStringsEachRowWithNamesAndTypes
• RowBinaryWithNames
• RowBinaryWithNamesAndTypes
• CustomSeparatedWithNames
• CustomSeparatedWithNamesAndTypes

Возможные значения:

• 0 — Отключено.
• 1 — Включено.

Определяет, должен ли парсер формата проверять, соответствуют ли типы данных во входных данных типам данных в целевой таблице.

Поддерживаемые форматы:

• CSVWithNamesAndTypes
• TabSeparatedWithNamesAndTypes
• JSONCompactEachRowWithNamesAndTypes
• JSONCompactStringsEachRowWithNamesAndTypes
• RowBinaryWithNamesAndTypes
• CustomSeparatedWithNamesAndTypes

Возможные значения:

• 0 — Отключено.
• 1 — Включено.