system.events

Содержит сведения о количестве событий, произошедших в системе. Например, в таблице можно увидеть, сколько запросов SELECT было обработано с момента запуска сервера ClickHouse.

• event (String) — Имя события.
• value (UInt64) — Количество произошедших событий.
• description (String) — Описание события.

Псевдонимы:

• name — Псевдоним для event.

SELECT * FROM system.events LIMIT 5

┌─event─────────────────────────────────┬─value─┬─description────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┐
│ Query                                 │    12 │ Количество запросов, подлежащих интерпретации и потенциальному выполнению. Не включает запросы, которые не удалось разобрать или которые были отклонены из-за ограничений на размер AST, ограничений квоты или ограничений на количество одновременно выполняемых запросов. Может включать внутренние запросы, инициированные самим ClickHouse. Подзапросы не учитываются.                  │
│ SelectQuery                           │     8 │ То же, что и Query, но только для запросов SELECT.                                                                                                                                                                                                                │
│ FileOpen                              │    73 │ Количество открытых файлов.                                                                                                                                                                                                                                    │
│ ReadBufferFromFileDescriptorRead      │   155 │ Количество операций чтения (read/pread) из файлового дескриптора. Не включает сокеты.                                                                                                                                                                             │
│ ReadBufferFromFileDescriptorReadBytes │  9931 │ Количество байт, прочитанных из файловых дескрипторов. Если файл сжат, будет показан размер сжатых данных.                                                                                                                                              │
└───────────────────────────────────────┴───────┴────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────────┘

• system.asynchronous_metrics — Содержит метрики, вычисляемые периодически.
• system.metrics — Содержит метрики, вычисляемые мгновенно.
• system.metric_log — Содержит историю значений метрик из таблиц system.metrics и system.events.
• Мониторинг — Основные понятия мониторинга ClickHouse.

Количество запросов к API ACME.

Количество выданных запросов на сертификаты ACME.

Количество HTTP-запросов, отправленных провайдерам ИИ.

Суммарное количество токенов промпта, использованных во всех вызовах функции ИИ в рамках запроса.

Количество операций чтения с использованием интерфейса AIO в Linux или FreeBSD

Количество байтов, прочитанных с использованием интерфейса AIO в Linux или FreeBSD

Количество операций записи через интерфейс AIO в Linux или FreeBSD

Количество байтов, записанных с использованием интерфейса AIO в Linux или FreeBSD

Общее количество токенов генерации, израсходованных при всех вызовах функции ИИ в рамках запроса.

Количество строк, которые получили результат ИИ.

Количество строк, для которых было использовано значение по умолчанию из-за квоты или ошибки.

Количество запросов, сгенерированных AST-фаззером на стороне сервера, которые он попытался выполнить.

Общее число новых адресов в результатах разрешения DNS для HTTP-соединений

Общее количество адресов с истёкшим сроком действия, которые больше не возвращаются в результатах DNS-разрешения для HTTP-соединений

Общее количество адресов, помеченных как неисправные из-за ошибок HTTP-соединения

Общее время, затраченное на агрегирование отсортированных столбцов

Сколько раз одноуровневая хеш-таблица агрегации во время выполнения преобразовывалась в двухуровневую.

Сколько хеш-таблиц для агрегации было инициализировано как двухуровневые.

Количество блоков, для которых была применена оптимизация равных диапазонов ключей

Сколько элементов было заранее выделено в хеш-таблицах для агрегации.

Количество байтов, прошедших через ограничитель max_network_bandwidth_for_all_users.

Общее время, в течение которого запрос ожидал из-за throttling по параметру 'max_network_bandwidth_for_all_users'.

Общее время, затраченное на анализ индекса патч-частей

Общее время, потраченное на применение патч-частей к блокам

Количество байтов, выделенных в области памяти Arena (используется для GROUP BY и аналогичных операций)

Количество фрагментов, выделенных в арене памяти Arena (используется для GROUP BY и аналогичных операций)

Объём данных в байтах для асинхронных запросов INSERT.

Количество случаев, когда в кэше hash id для асинхронной вставки INSERT обнаруживался дублирующийся hash id.

То же, что и InsertQuery, но только для асинхронных запросов INSERT.

Количество строк, вставленных асинхронными INSERT-запросами.

Общее время ожидания запроса задач асинхронного загрузчика.

Сколько сообщений было потеряно из журнала консоли из-за переполнения очереди асинхронного логирования

Количество сообщений (принятых или отброшенных), отправленных в асинхронную очередь журнала консоли

Сколько сообщений было отброшено из файла журнала ошибок из-за переполнения очереди асинхронного логирования

Сколько сообщений (принятых или отброшенных) было отправлено в асинхронную очередь журнала ошибок в файле

Сколько сообщений было отброшено из файлового лога из-за переполнения очереди асинхронного логирования

Сколько сообщений (принятых или отброшенных) было отправлено в асинхронную очередь файлового лога

Сколько сообщений было потеряно в syslog из-за заполнения очереди асинхронного логирования

Сколько сообщений (принятых или отброшенных) было отправлено в асинхронную очередь syslog

Сколько сообщений было отброшено из text_log из-за переполнения очереди асинхронного логирования

Количество сообщений (принятых или отброшенных), отправленных в асинхронную очередь для text_log

Время ожидания асинхронных чтений при асинхронном локальном чтении.

Количество байтов, проигнорированных при асинхронном чтении

Время ожидания асинхронных удалённых чтений.

Количество вызовов метода CommitBlockList API Azure Blob Storage

Количество вызовов CopyObject API Azure Blob Storage

Количество вызовов метода CreateContainer API Azure Blob Storage.

Количество вызовов DeleteObject(s) API Azure Blob Storage.

Количество вызовов метода GetObject API Azure.

Количество вызовов метода GetProperties API Azure Blob Storage.

Количество GET-запросов к Azure, заблокированных ограничителем.

Количество GET-запросов Azure, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос ожидал из-за ограничения скорости GET-запросов Azure.

Количество вызовов API ListObjects в Azure Blob Storage.

Количество PUT-запросов Azure, заблокированных ограничителем скорости.

Количество PUT-запросов Azure, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос ожидал, чтобы не превысить ограничение скорости PUT-запросов Azure.

Общее время ожидания запросов на чтение в Azure.

Количество запросов на чтение к Azure.

Количество ошибок при запросах на чтение к Azure.

Количество перенаправлений запросов Azure на чтение.

Количество запросов Azure на чтение, для которых было применено ограничение пропускной способности.

Количество вызовов метода StageBlock API Azure Blob Storage

Количество вызовов API Upload в Azure Blob Storage

Суммарное время ожидания запросов на запись в Azure.

Количество запросов на запись в Azure.

Количество ошибок при запросах записи в Azure.

Количество перенаправлений запросов на запись в Azure.

Количество запросов на запись в Azure, для которых было ограничено число запросов.

Количество фоновых задач по загрузке марок

Время, затраченное на создание записей резервной копии данных таблиц

Время, затраченное на создание записей резервной копии

Время, затраченное на выполнение завершающих задач после создания записей резервной копии

Сколько раз считывался файл '.lock' при создании резервной копии

Время, затраченное на подготовку информации о файлах для записей резервной копии

Общий размер файлов, прочитанных локально для вычисления контрольных сумм записей резервной копии

Количество файлов, прочитанных локально для вычисления контрольных сумм записей резервной копии

Время, затраченное на чтение метаданных резервной копии из файла .backup

Суммарный размер файлов, прочитанных с удалённых дисков для вычисления контрольных сумм записей резервной копии

Количество файлов, считанных с удалённых дисков для вычисления контрольных сумм записей резервной копии

Байты, прошедшие через ограничитель 'max_backup_bandwidth_for_server'.

Общее время, в течение которого запрос ожидал, чтобы соблюсти ограничение max_backup_bandwidth_for_server.

Время, затраченное на запись метаданных резервной копии в файл .backup

Количество резервных копий, открытых для чтения

Число резервных копий, открытых для разблокировки

Количество резервных копий, открытых для записи

Количество ошибок блокировки blob-объектов во время выполнения BlobCopier

Количество blob-объектов, возвращённых из хранилища метаданных

Количество ошибок при записи blob-объектов, возникших во время выполнения BlobCopier

Количество blob-объектов, сведения о репликации которых BlobCopier записал в хранилище метаданных

Количество ошибок репликации blob-объектов, возникших во время выполнения BlobCopier

Количество blob-объектов, реплицированных с помощью BlobCopier

Количество запусков потока BlobCopier

Количество ошибок при блокировке blob-объектов во время выполнения BlobKiller

Количество blob-объектов, полученных из хранилища метаданных

Количество ошибок записи blob-объектов, возникших во время работы BlobKiller

Количество blob-объектов, удаление которых было зафиксировано BlobKiller в хранилище метаданных

Количество ошибок при удалении blob-объектов во время выполнения BlobKiller

Количество задач на удаление, созданных BlobKiller

Количество blob-объектов, удалённых BlobKiller

Количество запусков потока BlobKiller

Общее время, затраченное на построение индексов и хеш-таблиц для применения патч-частей в режиме JOIN

Общее время, затраченное на создание индексов для применения патч-частей в режиме Merge

Объём данных, подгруженных в файловый кэш специальными фоновыми потоками.

Количество частей данных, которые CacheWarmer получил полностью.

Байты, записанные в файловый кэш из источника (удалённой файловой системы и т. д.)

Время, затраченное на запись данных в файловый кэш

Время на подготовку буфера

Байты, прочитанные из источника файлового кэша. Сегменты кэша читаются целиком слева направо, поэтому может потребоваться предварительно загрузить часть сегмента, не относящуюся к текущей задаче, чтобы добраться до нужных данных

Байты, считанные из источника файлового кэша для предварительной загрузки (из удалённой файловой системы и т. д.)

Время чтения из источника файлового кэша во время предзагрузки (из удалённой файловой системы и т. д.)

Количество байт, прочитанных из файлового кэша

Количество попаданий в файловый кэш при чтении.

Время чтения из файлового кэша

Количество промахов при чтении из файлового кэша.

Байты, считанные из источника файлового кэша (например, из remote fs)

Время чтения из источника файлового кэша (например, из удалённой файловой системы и т. д.)

Время ожидания внутреннего буфера чтения (включая ожидание кэша)

Количество байтов, записанных из источника (remote fs и т. п.) в файловый кэш

Время, затраченное на запись данных в файловый кэш

Количество случаев, когда возникала ошибка при попытке удалить эфемерный узел. Это не проблема, поскольку наша реализация библиотеки ZooKeeper гарантирует, что сеанс завершится и узел будет удалён.

Количество трассировок стека, отброшенных профилировщиком запросов или обработчиком сигнала, поскольку пайп переполнен или в него невозможно записать.

Общее время, затраченное на объединение отсортированных столбцов

Общее время, потраченное на схлопывание отсортированных столбцов

Время, затраченное на выполнение cancel() для задач исполнителя Common.

Время, затраченное задачами исполнителя Common в executeStep().

Время, затраченное на сброс задачи в исполнителе Common.

Время ожидания завершения в исполнителе Common.

Количество байтов, используемых для компиляции выражений.

Общее время, затраченное на компиляцию выражений в LLVM-код.

Количество случаев, когда запускалась компиляция сгенерированного LLVM-кода (для создания объединённой функции для сложных выражений).

Количество выполнений скомпилированной функции.

Количество сжатых блоков (блоков данных, сжатых независимо друг от друга), прочитанных из сжатых источников (файлов, сети).

Количество несжатых байтов (то есть байтов после распаковки), прочитанных из сжатых источников (файлов, сети).

Количество случаев, когда контрольная сумма сжатого блока не совпадала.

Общее время, затраченное на обнаружение искажений битов из-за несовпадения контрольной суммы сжатого блока.

Количество случаев, когда несовпадение контрольной суммы сжатого блока было вызвано отличием в один бит.

Общее количество случаев уменьшения ресурсов CPU

Общее время ожидания запроса из-за вытеснения слотов CPU.

Общее количество вытеснений процессора

Количество запросов, задержанных из-за нехватки ресурсов CPU-слотов. Индикатор конкуренции за ресурсы — не включает ожидание отложенного увеличения числа слотов на сервере без конкуренции за ресурсы.

Общее количество выделенных слотов CPU

Общее количество полученных слотов CPU без конкуренции

Количество слотов CPU, которые не были выделены в момент распределения из-за нехватки ресурсов. Не включает слоты, удерживаемые при отложенном выделении.

Количество слотов CPU, выданных по гарантии «1 поток на запрос», а также для запросов с настройкой 'use_concurrency_control' = 0

Общее количество случаев увеличения CPU

Общее время, в течение которого запрос ожидал выделения ресурсов для слотов CPU.

Общее количество выделенных слотов запросов

Общее время, в течение которого запрос ожидал слоты выполнения

Общее время ожидания свободного слота в пуле соединений.

Количество случаев получения блокировки Context или попыток её получения. Это глобальная блокировка.

Время ожидания блокировки контекста в микросекундах

Общее количество запросов на назначение слияний

Общее время, затраченное клиентом назначения слияний

Общее количество запросов на назначение слияний

Общее время, затраченное обработчиком назначения слияний

Общее время, затраченное на получение свежих метаданных в координаторе слияний

Общее время, затраченное на фильтрацию подготовленных слияний в компоненте координатор слияний

Общее число случаев эксклюзивного захвата блокировки состояния координатора

Общее время, затраченное на захват мьютекса состояния координатора в монопольном режиме

Общее количество захватов блокировки состояния координатора в режиме share

Общее время, затраченное на установку разделяемой блокировки мьютекса состояния координатора

Общее время, затраченное на поиск слияний с помощью селекторов слияний в координаторе слияний

Общее число обновлений координатора слияний

Общее время, затраченное на обновление состояния координатора слияний

Общее число обновлений воркера слияния

Общее время, затраченное на обновление локального состояния назначенных воркеру слияний

Успешно создана запись в журнале о слиянии частей в ReplicatedMergeTree.

Успешно создана запись в журнале для мутации частей в ReplicatedMergeTree.

Количество созданий буфера чтения с O_DIRECT для чтения данных (при выборе среди других методов чтения).

Количество попыток создать буфер чтения с O_DIRECT для чтения данных (при выборе среди других методов чтения), которые ОС не разрешила (из-за отсутствия поддержки файловой системы или по другим причинам), после чего выполнялся переход к обычному методу чтения.

Количество случаев, когда для чтения данных создавался буфер чтения с использованием mmap (при выборе среди других методов чтения).

Количество случаев, когда предпринималась попытка создать буфер чтения с mmap для чтения данных (при выборе среди других методов чтения), но ОС не позволяла этого сделать (из-за отсутствия поддержки файловой системы или по другим причинам), и происходил возврат к обычному методу чтения.

Количество случаев создания обычного буфера чтения для чтения данных (при выборе среди других методов чтения).

Общее число ошибок при разрешении DNS

Количество случаев, когда данные после слияния не являются побайтно идентичными данным на другой реплике. Причин может быть несколько:

1. Использование более новой версии библиотеки сжатия после обновления сервера.
2. Использование другого метода сжатия.
3. Недетерминированный алгоритм сжатия (крайне маловероятно).
4. Недетерминированный алгоритм слияния из-за логической ошибки в коде.
5. Повреждение данных в памяти из-за ошибки в коде.
6. Повреждение данных в памяти из-за аппаратной проблемы.
7. Ручное изменение исходных данных после запуска сервера.
8. Ручное изменение контрольных сумм, хранящихся в ZooKeeper.
9. Настройки, связанные с форматом частей, такие как 'enable_mixed_granularity_parts', различаются на разных репликах. Сервер обнаружил эту ситуацию и загрузит слитую часть с реплики, чтобы обеспечить побайтно идентичный результат.

Количество случаев, когда данные после мутации побайтно отличаются от данных на других репликах. Помимо причин, описанных в 'DataAfterMergeDiffersFromReplica', это также может происходить из-за недетерминированной мутации.

Количество строк, обработанных реализацией обработки NULL по умолчанию при выполнении функции

Количество строк, содержащих значения NULL, обработанных реализацией по умолчанию для NULL при выполнении функции

Количество случаев, когда INSERT блока в таблицу MergeTree замедлялся из-за большого числа активных частей данных в партиции.

Общее количество миллисекунд, затраченных на ожидание, пока операция INSERT блока в таблицу MergeTree была ограничена по скорости из-за большого числа активных частей данных в партиции.

Количество случаев, когда мутация таблицы MergeTree была замедлена из-за большого числа незавершённых мутаций в этой таблице.

Общее количество миллисекунд, в течение которых мутация таблицы MergeTree была ограничена по скорости из-за большого числа незавершённых мутаций в таблице.

Количество файлов, пропущенных при отсечении партиций DeltaLake

Количество файлов, просканированных при обратных вызовах сканирования DeltaLake

Количество инициализаций снимка таблицы DeltaLake (загрузок из объектного хранилища)

Количество ключей, запрошенных в словарях типа 'cache' и найденных в кэше, но оказавшихся устаревшими.

Количество ключей, запрошенных из словарей типа 'cache' и найденных в кеше.

Количество ключей, запрошенных в словарях типа 'cache' и не найденных.

Количество ключей, запрошенных у источника данных для словарей типа 'cache'.

Количество ключей, запрошенных из источника данных для словарей типа 'cache' и найденных там.

Количество ключей, запрошенных у источника данных для словарей типа 'cache', но не найденных в нём.

Количество наносекунд, потраченных на ожидание блокировки чтения при поиске данных в словарях типа 'cache'.

Количество наносекунд, потраченных на ожидание блокировки записи для обновления данных в словарях типа 'cache'.

Количество наносекунд, затраченных на запросы к внешним источникам данных для словарей типа 'cache'.

Количество пакетных запросов к внешним источникам данных для словарей типа 'cache'.

Количество вызовов функций F_FULLFSYNC/fsync/fdatasync для каталогов.

Общее время ожидания системного вызова F_FULLFSYNC/fsync/fdatasync для каталогов.

Количество вызовов CommitBlockList API Azure Blob Storage для диска Azure

Количество вызовов CopyObject API Azure Blob Storage для диска

Количество вызовов API CreateContainer к Azure Blob Storage диска.

Количество вызовов API DeleteObject в Azure Blob Storage.

Количество вызовов метода GetObject API диска Azure.

Количество вызовов API GetProperties к Azure Blob Storage диска Azure.

Количество GET-запросов к диску Azure, заблокированных ограничителем.

Количество GET-запросов к диску Azure, прошедших через ограничитель: заблокированных и пропущенных.

Общее время, в течение которого запрос ожидал, чтобы соблюсти ограничение скорости GET-запросов к диску Azure.

Количество вызовов ListObjects к API Azure Blob Storage диска Azure.

Количество PUT-запросов к диску Azure, заблокированных ограничителем.

Количество PUT-запросов к диску Azure, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос находился в ожидании из-за ограничения скорости PUT-запросов к диску Azure.

Общее время, затраченное на ожидание запросов на чтение диска Azure.

Количество запросов к диску Azure на чтение.

Количество ошибок при запросах чтения с диска Azure.

Количество перенаправлений запросов на чтение для диска Azure.

Количество запросов на чтение диска Azure, скорость которых была ограничена.

Количество вызовов StageBlock API диска Azure Blob Storage

Количество вызовов Upload API Azure Blob Storage диска Azure

Общее время ожидания запросов на запись на диск Azure.

Количество запросов на запись на диск Azure.

Количество ошибок запросов на запись на диск Azure.

Количество перенаправлений запросов на запись на диск Azure.

Количество запросов на запись на диск Azure, для которых была ограничена скорость.

Количество созданных соединений с диском

Общее время, затраченное на установление соединений с диском

Количество случаев, когда не удалось установить соединение с диском

Количество соединений для диска, срок действия которых истёк

Количество сохранённых соединений для диска

Количество сброшенных соединений с диском

Количество повторно использованных соединений для диска

Время, затраченное на ожидание удаления blob, помеченного на удаление, после фиксации транзакции метаданных

Количество каталогов, созданных хранилищем метаданных 'plain_rewritable' в AzureObjectStorage.

Количество каталогов, удалённых хранилищем метаданных plain_rewritable в AzureObjectStorage.

Количество дисков 'plain_rewritable' с устаревшей структурой.

Количество каталогов, созданных хранилищем метаданных plain_rewritable для LocalObjectStorage.

Количество каталогов, удалённых хранилищем метаданных 'plain_rewritable' в LocalObjectStorage.

Количество каталогов, созданных хранилищем метаданных plain_rewritable для S3ObjectStorage.

Количество каталогов, удалённых хранилищем метаданных 'plain_rewritable' в S3ObjectStorage.

Общее время ожидания системного вызова чтения. Включает чтение из кэша страниц.

Количество вызовов API AbortMultipartUpload в DiskS3.

Количество вызовов метода CompleteMultipartUpload API DiskS3.

Количество вызовов CopyObject API DiskS3.

Количество вызовов CreateMultipartUpload API DiskS3.

Количество вызовов API DeleteObject(s) в DiskS3.

Количество вызовов GetObject API DiskS3.

Количество вызовов метода GetObjectTagging API DiskS3.

Количество запросов GET и SELECT к DiskS3, заблокированных ограничителем.

Количество GET- и SELECT-запросов DiskS3, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос ожидал, чтобы соблюсти ограничение скорости GET- и SELECT-запросов DiskS3.

Количество вызовов HeadObject в API DiskS3.

Количество вызовов метода ListObjects API DiskS3.

Количество вызовов метода PutObject API DiskS3.

Количество запросов DiskS3 PUT, COPY, POST и LIST, заблокированных ограничителем.

Количество запросов DiskS3 PUT, COPY, POST и LIST, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос ожидал, чтобы соблюсти ограничение скорости запросов DiskS3 PUT, COPY, POST и LIST.

Время выполнения GET- и HEAD-запросов к хранилищу DiskS3.

Количество попыток выполнения запросов GET и HEAD к хранилищу DiskS3, включая первую попытку и все повторные, но не включая повторы, выполняемые внутренней стратегией повторных попыток S3

Количество ошибок, при которых возможна повторная попытка, при запросах GET и HEAD к хранилищу DiskS3, за исключением повторных попыток, выполняемых внутренней стратегией повторов S3

Количество запросов GET и HEAD к хранилищу DiskS3.

Количество ошибок, не связанных с throttling, в запросах GET и HEAD к хранилищу DiskS3.

Число перенаправлений в запросах GET и HEAD к хранилищу DiskS3.

Количество ошибок 429 и 503 в запросах GET и HEAD к хранилищу DiskS3.

Количество вызовов метода API UploadPart для DiskS3.

Количество вызовов метода UploadPartCopy API DiskS3.

Время выполнения запросов POST, DELETE, PUT и PATCH к хранилищу DiskS3.

Количество попыток выполнения запросов POST, DELETE, PUT и PATCH к хранилищу DiskS3, включая первоначальную попытку и все повторы, но без учёта повторных попыток, выполняемых внутренними механизмами стратегии повторов

Количество ошибок, при которых возможна повторная попытка, для запросов POST, DELETE, PUT и PATCH к хранилищу DiskS3, за исключением повторных попыток, выполняемых самой стратегией повторных попыток

Количество запросов POST, DELETE, PUT и PATCH к хранилищу DiskS3.

Количество ошибок, не связанных с ограничением скорости, при выполнении запросов POST, DELETE, PUT и PATCH к хранилищу DiskS3.

Количество перенаправлений при выполнении запросов POST, DELETE, PUT и PATCH к хранилищу DiskS3.

Количество ошибок 429 и 503 при запросах POST, DELETE, PUT и PATCH к хранилищу DiskS3.

Общее время ожидания системного вызова записи. Сюда также входит запись в кэш страниц.

Событие подключения к распределённому кэшу. Число попыток подключения к распределённому кэшу

Клиентское событие распределённого кэша. Количество сбоев при подключении к серверу распределённого кэша перед выполнением запроса (учитывается один раз на запрос после исчерпания всех попыток подключения, в отличие от DistrCacheUnsuccessfulConnectAttempts, где учитывается каждая попытка). Тайм-аут при ожидании свободного соединения из пула также учитывается здесь. Сбои повторного подключения при создании запроса учитываются не здесь, а в DistrCacheMakeRequestErrors

Событие подключения к распределённому кэшу. Время, затраченное на подключение к распределённому кэшу.

Событие буфера чтения распределённого кэша. Время, затраченное на чтение из резервного буфера вместо распределённого кэша.

Событие подключения к распределённому кэшу. Время, затраченное на получение клиента распределённого кэша

Событие клиента распределённого кэша. Время, затраченное на ожидание ответа от распределённого кэша

Событие реестра распределённого кэша. Количество перестроений hash ring в распределённом кэше

Событие реестра распределённого кэша. Время, затраченное на захват блокировки DistributedCacheRegistry

Событие клиента распределённого кэша. Количество ошибок распределённого кэша при отправке запроса

Событие буфера чтения распределённого кэша. Время, затраченное на выполнение ReadBufferFromDistributedCache::nextImpl

Событие буфера записи в распределённый кэш. Количество байтов, записанных в объектное хранилище

Событие записи в буфер распределённого кэша. Время, затраченное на запись в объектное хранилище

Событие подключения к распределённому кэшу. Количество открытых соединений с распределённым кэшем

Событие подключения к распределённому кэшу. Количество открытых соединений с распределённым кэшем, минующих пул

Событие буфера чтения в распределённом кэше. Время, затраченное на предварительный расчёт диапазонов чтения

Событие буфера чтения распределённого кэша. Количество случаев, когда диапазон чтения изменялся из-за изменения seek/last_position

Событие буфера чтения распределённого кэша. Количество случаев, когда диапазон чтения сбрасывался из-за изменения seek/last_position

Событие буфера чтения распределённого кэша. Число случаев сброса диапазона чтения из-за изменения seek/last_position

Событие буфера чтения распределённого кэша. Байты, считанные из резервного буфера

Событие клиента распределённого кэша. Общее количество ошибок распределённого кэша при запросах чтения (равно DistrCacheReadErrorsRetriable + DistrCacheReadErrorsNonRetriable)

Событие клиента распределённого кэша. Количество ошибок распределённого кэша без возможности повторной попытки при запросах на чтение

Событие клиента распределённого кэша. Количество ошибок распределённого кэша при запросах чтения, допускающих повторную попытку (учитываются при каждом возникновении, включая ошибки, устранённые повторной попыткой)

Событие буфера чтения распределённого кэша. Время, затраченное на чтение из распределённого кэша

Событие буфера чтения распределённого кэша. Число повторных попыток запроса на чтение после ошибки, допускающей повторную попытку (включая повторные попытки первоначального создания запроса)

Событие буфера чтения распределённого кэша. Количество случаев, когда ошибка чтения, допускающая повторную попытку, не была устранена в пределах лимита повторных попыток запроса чтения

Количество байтов, прошедших через ограничитель 'max_distributed_cache_read_bandwidth_for_server'.

Общее время, в течение которого запрос был приостановлен из-за throttling по параметру max_distributed_cache_read_bandwidth_for_server.

Клиентское событие распределённого кэша. Количество ошибок распределённого кэша при получении ответа на запрос

Событие клиента распределённого кэша. Общее количество пакетов RefreshCredentials, полученных от распределённого кэша

Клиентское событие распределённого кэша. Общее количество пакетов Data, полученных из распределённого кэша

Событие клиента распределённого кэша. Количество байтов в пакетах Data, полученных из распределённого кэша

Клиентское событие распределённого кэша. Общее количество пакетов Error, полученных из распределённого кэша

Клиентское событие распределённого кэша. Общее количество пакетов Ok, полученных от распределённого кэша

Событие клиента распределённого кэша. Общее количество пакетов Stop, полученных от распределённого кэша

Событие реестра распределённого кэша. Время, затраченное на обновление реестра распределённого кэша.

Событие, связанное с реестром распределённого кэша. Количество обновлений реестра распределённого кэша

Событие подключения к распределённому кэшу. Время, затраченное на удаление устаревших подключений из пула

Событие подключения к распределённому кэшу. Количество повторно используемых соединений с распределённым кэшем

Событие клиента распределённого кэша. Общее количество пакетов Data, отправленных в распределённый кэш

Событие клиента распределённого кэша. Количество байтов в пакетах Data, отправленных в распределённый кэш

Событие сервера распределённого кэша. Количество пакетов AckRequest на сервере DistributedCacheServer

Событие сервера Distributed Cache. Количество обращений Distributed Cache к кэшу при чтении из файлового кэша, завершившихся попаданием в кэш

Событие сервера Distributed Cache. Количество случаев, когда сервер Distributed Cache не находил данные в кэше при чтении из файлового кэша

Событие сервера Distributed Cache. Количество байтов, прочитанных из Объектного хранилища для предзагрузки в распределённый кэш при чтении из файлового кэша

Событие сервера Distributed Cache. Количество байтов, прочитанных из кэша распределённого кэша при чтении из файлового кэша

Событие сервера Distributed Cache. Количество байтов, записанных в кэш Distributed Cache при чтении из файлового кэша

Событие сервера распределённого кэша. Количество байтов, прочитанных из объектного хранилища в рамках распределённого кэша при чтении из файлового кэша

Событие сервера Distributed Cache. Количество пакетов ContinueRequest в DistributedCacheServer.

Событие сервера Distributed Cache. Количество обновленных просроченных учетных данных

Событие сервера Distributed Cache. Количество пакетов EndRequest на сервере DistributedCacheServer

Событие сервера Distributed Cache. Количество новых кэшированных S3-клиентов

Событие сервера Distributed Cache. Время, потраченное на обработку запроса на стороне сервера DistributedCache

Событие сервера Distributed Cache. Количество клиентских пакетов RefreshCredentials, полученных в DistributedCacheServer

Событие сервера Distributed Cache. Количество повторно использованных кэшированных клиентов S3

Событие сервера распределённого кэша. Время, затраченное в shutdownAllConnections на ожидание завершения активных соединений (или их принудительного закрытия) при остановке сервера

Событие сервера распределённого кэша. Число случаев, когда сервер распределённого кэша был пропущен из-за предыдущих неудачных попыток подключения

Событие сервера Distributed Cache. Количество пакетов StartRequest в DistributedCacheServer.

Событие буфера чтения Distributed Cache. Количество переключений между серверами Distributed Cache в кэше с политикой read/write-through

Событие Distributed Cache. Количество переключений между серверами при чтении или записи из-за смены сервера, выбранного по хешу (например, при снятии сервера с регистрации)

Событие подключения к распределённому кэшу. Количество повторных подключений из-за устаревших соединений в пуле (закрытых удалённой стороной)

Событие буфера чтения распределённого кэша. Время, затраченное на запуск нового диапазона чтения в распределённом кэше

Событие подключения к распределённому кэшу. Число успешных попыток подключения к распределённому кэшу

Событие реестра Distributed Cache. Число успешных обновлений реестра серверов

Событие клиента распределённого кэша. Количество ошибок распределённого кэша при запросах к системным таблицам интроспекции (system.distributed_cache, system.distributed_cache_metrics, system.distributed_cache_events). Эти запросы не выполняются повторно, поэтому ошибки, допускающие повторную попытку, и ошибки, не допускающие её, учитываются вместе

Событие подключения к распределённому кэшу. Количество байтов, записанных во временные файлы, созданные в распределённом кэше

Событие подключения к распределённому кэшу. Количество временных файлов, созданных в распределённом кэше

Событие подключения к распределённому кэшу. Число неудачных попыток подключения к распределённому кэшу

Событие реестра Distributed Cache. Число неуспешных обновлений реестра серверов

Событие клиента Distributed Cache. Количество байтов в пакетах Data, которые были проигнорированы

Событие клиента Distributed Cache. Количество пропущенных неиспользуемых пакетов из распределённого кэша

Событие клиента Distributed Cache. Количество дополнительных выделений буфера в случаях, когда не удалось повторно использовать существующий буфер

Событие буфера записи распределённого кэша. Количество байтов, записанных в распределённый кэш

событие клиента распределённого кэша. Общее количество ошибок distributed cache при запросах на запись (равно DistrCacheWriteErrorsRetriable + DistrCacheWriteErrorsNonRetriable). Инициированный сервером Stop кэша со сквозной записью — это управление потоком, а не ошибка, поэтому он не учитывается

Событие клиента распределённого кэша. Количество ошибок в распределённом кэше без возможности повторной попытки при запросах записи

событие клиента распределённого кэша. Количество ошибок распределённого кэша, допускающих повторную попытку, при запросах на запись (учитывается каждый случай возникновения, включая ошибки, устранённые повторной попыткой)

Событие буфера записи Distributed Cache. Время, затраченное на выполнение WriteBufferFromDistributedCache::writeToFileSegment

Событие буфера записи распределённого кэша. Количество повторных попыток запроса на запись после ошибки, при которой возможен повтор

Событие буфера записи распределённого кэша. Количество случаев, когда ошибку записи, допускающую повторную попытку, не удалось устранить в пределах лимита повторных попыток запроса на запись

Количество байт, прошедших через throttler 'max_distributed_cache_write_bandwidth_for_server'.

Общее время, в течение которого запрос ожидал из-за throttling max_distributed_cache_write_bandwidth_for_server.

Количество сбоев при асинхронной вставке в distributed таблицу (при 'distributed_foreground_insert' = 0)

Количество подключений к другим серверам, выполненных во время выполнения распределённого запроса. Это происходит, когда устанавливается новое соединение вместо использования существующего из пула.

Общее количество случаев, когда распределённое соединение завершается с ошибкой после исчерпания всех повторных попыток.

Общее количество сбоев распределённого соединения при повторной попытке.

Количество случаев, когда реплика была исключена из распределённого запроса, поскольку на ней отсутствовала таблица, необходимая для выполнения запроса.

Количество повторных подключений к другим серверам при выполнении распределённого запроса. Это может произойти, если из пула соединений было получено устаревшее соединение.

Количество реплик, пропущенных при INSERT в distributed таблицу, поскольку реплики находятся в режиме только для чтения

Количество случаев, когда мы исключали реплику из распределённого запроса, поскольку для одной из таблиц, необходимых для запроса, задержка репликации превышала заданный порог.

Общее количество попыток установить распределённое соединение.

Общее количество успешных распределённых соединений с сервером, пригодным для использования (с требуемой таблицей, которая, возможно, устарела).

Количество случаев, когда INSERT блока в distributed таблицу был ограничен по скорости из-за большого объёма байтов в очереди.

Общее количество миллисекунд, в течение которых INSERT блока в distributed таблицу ограничивался из-за большого количества байтов в очереди.

Общее время, затраченное в ходе распределённого анализа индексов

Количество отсутствующих частей при распределённом анализе индексов, которые будут обработаны локально

Количество частей, отправленных на распределённый анализ индексов

Количество случаев, когда при распределённом анализе индексов произошёл сбой на одной из реплик и система переключилась на локальную реплику

Количество случаев, когда распределённый анализ индексов завершался ошибкой на одной из реплик без резервного переключения (ошибка при подключении)

Количество реплик (локальная реплика учитывается один раз), для которых назначен распределённый анализ индексов

Количество уникальных хостов, которым при выполнении запроса с make_distributed_plan была назначена хотя бы одна задача.

Устанавливается в 1, если запрос make_distributed_plan был выполнен внутри процесса локальным исполнителем (distributed_plan_execute_locally), а не отправлен удалённым воркерам.

Количество задач, переданных удалённым воркерам при выполнении запроса с make_distributed_plan. Ненулевое значение означает, что запрос действительно выполнялся распределённо.

Количество случаев, когда INSERT блока в distributed таблицу был отклонён с исключением 'Too many bytes' из-за большого количества байтов в очереди.

Во время синхронной вставки в distributed таблицу истёк тайм-аут ожидания сегментов (при 'distributed_foreground_insert' = 1)

Количество асинхронных вставок в блоке, вставленном в таблицу ReplicatedMergeTree, прошедших дедупликацию.

Количество синхронных вставок в таблицу семейства *MergeTree, которые были дедуплицированы.

Общее время, затраченное на проверку дублирования блоков, вставленных в таблицы семейства *MergeTree.

Количество файлов, прочитанных движками таблиц, работающими с файлами (например, File/S3/URL/HDFS).

Фактическое время выполнения пользовательских функций типов executable и executable_pool, в микросекундах.

Общее количество байтов, записанных в stdin дочерних процессов пользовательских функций типов executable и executable_pool.

Количество вызовов пользовательских функций типов executable и executable_pool.

Общее число байт, считанных из stdout дочерних процессов пользовательских функций executable и executable_pool.

Пиковое потребление памяти каждым дочерним процессом пользовательских функций executable и executable_pool, интегрированное по реальному времени, в байт-секундах.

Время ожидания в tryBorrowObject, когда пул пользовательских функций executable_pool исчерпан, в микросекундах.

Затраченное дочерними процессами пользовательских функций типов executable и executable_pool процессорное время в режиме ядра, в микросекундах.

Время ЦП в пользовательском режиме, использованное дочерними процессами пользовательских функций типа executable и executable_pool, в микросекундах.

Число выполнений команд оболочки.

Количество байтов, записанных на диск при агрегации с использованием внешней памяти.

Количество слияний временных файлов при агрегации с использованием внешней памяти.

Объём данных (в несжатом виде, до сжатия), записанных на диск для агрегации во внешней памяти.

Количество случаев записи временного файла на диск при агрегации с использованием внешней памяти.

Байты, прочитанные из буфера локального кэша в RemoteReadBufferCache

Количество сжатых байтов, записанных для JOIN при использовании внешней памяти.

Количество случаев слияния временных файлов для JOIN при использовании внешней памяти.

Объём данных, записанных для JOIN при использовании внешней памяти (в несжатом виде, до сжатия).

Количество случаев, когда временный файл для JOIN во внешней памяти записывался на диск.

Количество сжатых байтов, записанных при внешней обработке (сортировке/агрегации/JOIN)

Количество файлов, используемых для внешней обработки (сортировки/агрегации/JOIN)

Объём данных в несжатом виде (до сжатия), записанных при внешней обработке (сортировке/агрегации/JOIN)

Количество сжатых байтов, записанных при сортировке с использованием внешней памяти.

Количество слияний временных файлов при сортировке с использованием внешней памяти.

Объём данных (в несжатом виде, до сжатия), записанных при сортировке с использованием внешней памяти.

Количество случаев, когда временный файл записывался на диск при сортировке с использованием внешней памяти.

Количество запросов ASYNC INSERT, завершившихся ошибкой.

Количество неуспешных исходных запросов.

То же, что FailedInitialQuery, но только для SELECT-запросов.

То же, что FailedQuery, но только для запросов INSERT.

То же, что и FailedInternalQuery, но только для запросов INSERT.

Количество внутренних запросов, завершившихся с ошибкой.

То же, что FailedInternalQuery, но только для SELECT-запросов.

Общее число неуспешных запросов — как внутренних, так и пользовательских.

То же, что и FailedQuery, но только для запросов SELECT.

Время, затраченное на выполнение cancel() для задач исполнителя Fetch.

Время, затраченное на выполнение executeStep() задачами исполнителя Fetch.

Время, затраченное на сброс задачи исполнителя Fetch.

Время ожидания завершения в исполнителе Fetch.

Количество открытых файлов.

Количество вызовов FileProgressCallback на один запрос (учитывается каждое событие FileProgress для каждого файла, переданное клиенту по нативному TCP или через clickhouse-local).

Длительность выполнения FileSegment::complete() в файловом кэше

Количество случаев, когда приоритет не удалось повысить из-за высокой конкуренции за блокировку кэша

Время выполнения complete() для держателя сегментов файла

Время повышения приоритета файлового сегмента

Время блокировки файлового сегмента

Время удаления сегмента файла (remove())

Ожидание в состоянии DOWNLOADING

Время выполнения write() для сегмента файла

Количество вызовов функции F_FULLFSYNC/fsync/fdatasync для файлов.

Общее время ожидания завершения системных вызовов F_FULLFSYNC/fsync/fdatasync для файлов.

Количество сегментов файла, переданных на фоновую загрузку в файловом кэше

Количество байтов, вытеснённых фоновым потоком

Количество сегментов файла, вытесненных фоновым потоком

Количество инвалидированных (удаляемых отложенно) элементов очереди с приоритетом, удалённых фоновым потоком очистки

Количество вызовов метода FileCache::assertCacheCorrectness

Сколько времени занимает выполнение FileCache::assertCacheCorrectness

Количество созданных каталогов для ключей

Количество сегментов файла, переведённых (перемещённых) из защищённой очереди в пробационную в рамках политики кэширования SLRU. Это внутреннее перемещение внутри кэша, а не вытеснение.

Время, затраченное на вытеснение из файлового кэша

Количество байтов, вытесненных из файлового кэша

Количество сегментов файла, вытесненных из файлового кэша

Число повторных использований итератора файлового кэша

Количество сегментов файла, пропущенных при вытеснении, так как они уже находятся в состоянии evicting

Количество сегментов файла, пропущенных при вытеснении, поскольку они находятся в состоянии, не допускающем освобождения

Количество сегментов файла, пропущенных при вытеснении, поскольку они находятся в состоянии moving

Количество попыток вытеснения из файлового кэша

Количество случаев, когда резервирование места не выполнялось из-за изменения размера кэша

Количество случаев, когда резервирование места пропускалось из-за высокой конкуренции за блокировку кэша

Количество сегментов файла, которые по какой-то причине не удалось вытеснить в ходе динамического вытеснения из файлового кэша

Количество неудачных попыток резервирования места в файловом кэше.

Количество исключений, перехваченных фоновой задачей по поддержанию свободного места (сбор, удаление или завершение)

Количество раз, когда фоновый поток запускал задачу по поддержанию свободного места

Время, в течение которого фоновый поток выполнял задачу по поддержанию свободного места

Время выполнения get() файлового кэша

Время выполнения getOrSet() файлового кэша

Количество удерживаемых сегментов файла в файловом кэше

Время, в течение которого фоновый поток выполнял задачу по очистке элементов очереди с приоритетом, помеченных как недействительные

Время, затраченное на загрузку метаданных файлового кэша

Время блокировки ключа кеша

Время блокировки метаданных файлового кэша

Количество внешних итераций, которые цикл вытеснения overcommit выполнил после первого прохода, чтобы восполнить дефицит резервации

Время блокировки файлового кэша при чтении в приоритетной очереди

Время блокировки файлового кэша при записи в очередь с приоритетом

Попытка зарезервировать место в файловом кэше

Время резервирования места в файловом кэше

Время блокировки файлового кэша при установке блокировки состояния

Количество сегментов файла в файловом кэше, которые были удержаны, но не использовались (например, из-за seek или LIMIT n и т. д.)

Общее время, затраченное на выполнение функции filterPartsByVirtualColumns.

Количество байтов, прошедших через фильтр при выполнении запроса

Количество строк, прошедших фильтр в запросе

Время, затраченное на фильтрацию частей по первичному ключу.

Общее количество отметок, обработанных при анализе первичного ключа.

Время, затраченное на фильтрацию частей по индексам пропуска данных.

Количество вызовов обычных SQL-функций (SQL-функции вызываются для каждого блока, поэтому это число отражает количество блоков).

Количество столбцов, собранных на вертикальном этапе слияний.

Общее время, затраченное на сборку столбцов при вертикальном слиянии

Количество случаев, когда был превышен глобальный лимит памяти.

Подсчитывает общее число случаев, когда в глобальный пул потоков добавлялись новые потоки. Эта метрика показывает, как часто глобальный пул потоков расширялся для обработки возросшей нагрузки.

Измеряет время, прошедшее с момента планирования задачи в пуле потоков до момента, когда её забирает на выполнение рабочий поток. Эта метрика помогает выявлять задержки в обработке задач и показывает, насколько быстро пул потоков реагирует на новые задачи.

Подсчитывает количество задач, переданных в глобальный пул потоков.

Общее время, в течение которого потоки ожидали снятия блокировок в глобальном пуле потоков.

Показывает общее количество случаев, когда глобальный пул потоков уменьшался за счёт удаления потоков. Это происходит, когда число бездействующих потоков превышает max_thread_pool_free_size, что указывает на изменение размера глобального пула потоков в ответ на снижение нагрузки на потоки.

Общее время, затраченное на ожидание запуска новых потоков.

Количество созданных клиентских HTTP-соединений

Общее время, затраченное на создание клиентских HTTP-соединений

Количество случаев, когда не удалось установить клиентское HTTP-соединение

Количество истёкших клиентских HTTP-соединений

Количество сохранённых клиентских HTTP-соединений

Количество сброшенных клиентских HTTP-соединений

Количество повторно используемых клиентских HTTP-соединений

Количество закрытых HTTP-соединений сервера. Механизм Keep alive не был согласован

Количество созданных HTTP-соединений сервера

Количество HTTP-соединений сервера, срок действия которых истёк.

Количество сохранённых HTTP-соединений сервера. Соединение успешно оставлено открытым

Количество сброшенных HTTP-соединений сервера. Сервер закрывает соединение

Количество повторно используемых HTTP-соединений сервера

Количество серьёзных страничных ошибок в потоках выполнения запроса. Высокие значения указывают либо на то, что вы забыли отключить swap на сервере, либо на вытеснение страниц памяти бинарного файла ClickHouse при очень высокой нехватке памяти, либо на успешное использование метода чтения 'mmap' для данных таблицы.

Количество элементов, заранее выделенных в хеш-таблицах для hash JOIN.

Общее количество случаев, когда в hedged-запросах истёк тайм-аут на переключение реплики.

Количество байт, выделенных для буферов ввода-вывода (ReadBuffer/WriteBuffer).

Количество выделений для буферов ввода-вывода (ReadBuffer/WriteBuffer).

Общее число успешно обработанных CQE io_uring

Общее число завершённых CQE io_uring с ошибками

Общее количество выполненных асинхронных повторных отправок SQE io_uring

Общее количество выполненных синхронных повторных отправок SQE в io_uring

Общее число SQE, отправленных в io_uring

Суммарное время, затраченное на синхронную инициализацию итераторов данных Iceberg.

Количество случаев, когда файлы метаданных Iceberg обнаруживались в кэше.

Количество случаев, когда файлы метаданных Iceberg не находились в кэше метаданных Iceberg и их приходилось считывать с (удалённого) диска.

Количество случаев, когда файлы метаданных Iceberg находились в кэше, но считались устаревшими, поэтому их приходилось считывать с (удалённого) диска.

Приблизительное количество байтов, вытесненных из кэша метаданных Iceberg.

Общее время, в течение которого потоки чтения данных ожидают, пока файлы метаданных Iceberg будут прочитаны и разобраны, в сумме по всем потокам чтения.

Общее количество сведений об объектах, возвращённых итератором Iceberg.

Общее время, затраченное на обновление метаданных хранилища Iceberg из состояния (buildStorageMetadataFromState).

Количество файлов, пропущенных благодаря индексу MinMax в Iceberg

Общее число принятых пар «файл данных — файл позиционного удаления», отобранных minmax-анализом из пар, подходящих по партиционированию и номеру последовательности.

Общее число принятых пар «файл данных — файл удаления по позиции» по результатам minmax-анализа среди пар, подходящих по партиционированию и номеру последовательности.

Количество файлов, пропущенных при отсечении партиций Iceberg

При чтении из Iceberg применена оптимизация тривиального подсчёта

Сколько раз использовался version-hint.text.

См. настройку ignore_cold_parts_seconds. Количество случаев, когда запросы на чтение игнорировали совсем новые части, которые CacheWarmer ещё не успел загрузить в кэш.

Количество выполнений анализа индекса в рамках запроса.

Количество использований алгоритма двоичного поиска по меткам индекса

Количество использований универсального алгоритма поиска с исключением по меткам индекса

То же, что и Query, но учитывает только исходные запросы (см. is_initial_query).

То же, что и InitialQuery, но только для запросов SELECT.

Количество INSERT-запросов со всеми подзапросами

То же, что Query, но только для запросов INSERT.

Общее время выполнения запросов INSERT.

Количество байтов (без сжатия; для столбцов в том виде, в котором они хранятся в памяти), вставленных во все таблицы.

Число частей, вставленных в формате Compact.

Количество строк, вставленных во все таблицы.

Количество частей, вставленных в формате Wide.

Количество байт, полученных через HTTP-интерфейсы

Количество байтов, отправленных через HTTP-интерфейсы

Количество байт, полученных через межсерверные интерфейсы

Количество байтов, переданных через межсерверные интерфейсы

Количество байтов, полученных по интерфейсам MySQL

Количество байт, переданных через интерфейсы MySQL

Количество байтов, полученных через нативные интерфейсы

Количество байт, отправленных через нативные интерфейсы

Количество байтов, полученных через интерфейсы PostgreSQL

Количество байт, переданных через интерфейсы PostgreSQL

Количество байтов, полученных через интерфейсы Prometheus

Количество байтов, отправленных через интерфейсы Prometheus

Общее число случаев, когда не удалось отследить образец выделения памяти jemalloc

Общее количество случаев, когда не удалось отследить попавшее в выборку освобождение памяти в jemalloc

Время, затраченное на этапы постобработки после построения правой стороны JOIN.

Общее количество строк в build-таблице при выполнении операции JOIN.

Количество блоков, созданных DelayedJoinedBlocksWorkerTransform.

Количество строк, выведенных DelayedJoinedBlocksWorkerTransform.

Количество блоков, которые выдал NonJoinedBlocksTransform.

Количество строк, не объединённых через JOIN и выведенных NonJoinedBlocksTransform.

Общее время, затраченное на выполнение оптимизаций плана выполнения JOIN.

Общее количество строк в probe-таблице для операции JOIN.

Общее время, затраченное на работу алгоритма переупорядочивания JOIN.

Общее число строк в результате операции JOIN.

Количество случаев, когда (Concurrent)HashJoin переключался на GraceHashJoin из-за ограничения по памяти в SpillingHashJoin.

Количество фоновых чтений из Kafka, заполняющих materialized views, с момента запуска сервера

Количество неудачных фиксаций потреблённых смещений в Kafka (обычно это указывает на дублирование данных)

Количество успешных коммитов смещений в Kafka (обычно должно совпадать с KafkaBackgroundReads)

Количество ошибок, о которых librdkafka сообщает при опросе

Количество прямых SELECT-запросов к таблицам Kafka с момента запуска сервера

Количество неудачных попыток передать поток данных в materialized view, которое не готово

Количество сообщений Kafka, которые ClickHouse не смог разобрать

Количество сообщений Kafka, полученных в ClickHouse из librdkafka с помощью операции poll

Количество сообщений, записанных в Kafka

Количество сообщений Kafka, уже обработанных ClickHouse

Количество ошибок при публикации сообщений в Kafka

Количество явных операций сброса у продюсера Kafka

Количество назначений партиций (заключительный этап перебалансировки группы потребителей)

Количество неуспешных перебалансировок групп потребителей

Количество отзывов назначений партиций (первый этап перебалансировки группы потребителей)

Количество строк, полученных при разборе сообщений Kafka

Количество разобранных строк, которые впоследствии были отклонены (из-за перебалансировки, ошибок и т. п.). После перебалансировки эти строки будут считаны повторно.

Количество строк, вставленных в таблицы Kafka

Количество операций записи (вставок) в таблицы Kafka

Количество запросов на добавление наблюдений

Количество батчей, достигших лимита max_requests_batch_size

Количество батчей, достигших ограничения max_read_batch_size

Количество батчей, достигших ограничения max_read_batch_bytes_size

Количество батчей, достигших ограничения max_requests_batch_bytes_size

Время, затраченное на fsync журнала изменений Keeper (только для несжатых журналов)

Время, затраченное на ожидание получения блокировки журнала изменений Keeper

Количество байтов, записанных в журнал изменений Keeper

Количество запросов на проверку

Количество запросов remove наблюдение

Время, затраченное на ожидание фиксации определённой записи в журнале

Количество успешных коммитов

Количество неуспешных коммитов

Количество запросов на создание

Количество запросов exists

Количество get-запросов

Задержка в Keeper

Количество рекурсивных запросов на получение дочерних узлов

Количество запросов на получение списка

Время, потраченное на ожидание захвата блокировки активных сеансов Keeper

Количество записей журнала в Keeper, считываемых из кэша commit-журналов

Количество записей журнала в Keeper, считываемых непосредственно из файла журнал изменений

Количество записей журнала в Keeper, считываемых из кэша последних записей журнала

Количество записей журнала в Keeper, заранее считываемых из файла журнал изменений

Количество мультизапросов на чтение

Количество мультизапросов

Пакеты, полученные сервером Keeper

Пакеты, отправленные сервером Keeper

Задержка при предварительной обработке в Keeper для одного запроса

Время ожидания получения блокировки процесса Keeper и ответов

Задержка commit в Keeper для отдельного запроса

Количество батчей запросов на чтение, обработанных Keeper

Общее количество запросов на чтение, обработанных Keeper в составе батчей

Время, затраченное на ожидание получения блокировки очереди запросов на чтение Keeper

Количество завершённых операций чтения снимка

Количество отложенных операций чтения снимка, поскольку запрошенный снимок больше недоступен локально; NuRaft повторит попытку с последним снимком.

Количество неуспешных чтений снимка

Количество объектов снимка, отправленных ведомым узлам

Число запросов на реконфигурацию

Количество запросов на удаление

Количество запросов на удаление наблюдений

Количество запросов, отклонённых из-за превышения мягкого лимита памяти

Общее число запросов на сервере Keeper

Общее количество запросов на сервере Keeper с учётом каждого подзапроса в составе мультизапроса

Количество операций сохранения снимка

Количество неудавшихся сохранений снимка

Число объектов снимка, полученных от leader

Время, затраченное на ожидание получения блокировки записи сервера Keeper

Время ожидания получения блокировки обратного вызова сеанса Keeper

Количество set-запросов

Количество запросов на установку наблюдений

Число применений снимка

Количество неудачных попыток применения снимка

Количество созданных снимков

Количество неудачных попыток создания снимков

Время, затраченное на fsync файлов снимков Keeper

Количество ошибок удалённого чтения в RemoteSnapshotLoader при передаче снимка ведомому узлу

Количество байтов, записанных в файлы снимков Keeper

Количество запросов Keeper, пропущенных из-за того, что сеанс больше не активен

Время, затраченное на ожидание получения блокировки хранилища Keeper

Время, затраченное на ожидание получения разделяемой блокировки хранилища Keeper

Количество запросов на удаление по TTL, отброшенных из-за переполнения очереди

Количество запросов на удаление по TTL, успешно поставленных в очередь

Суммарная задержка Keeper для одного запроса

Количество срабатываний наблюдения при изменении дочерних узлов

Количество срабатываний наблюдения при операции CREATE

Количество срабатываний наблюдений при операциях изменения

Количество срабатываний наблюдений из-за операции DELETE

Количество срабатываний наблюдений

Количество батчей запросов на запись, обработанных в Keeper

Общее количество запросов на запись, обработанных Keeper батчами

Количество частей данных, загруженных таблицами MergeTree при инициализации.

Количество микросекунд, затраченных таблицами MergeTree на загрузку частей данных при инициализации.

Количество загруженных меток (суммарно по всем столбцам).

Количество загруженных файлов меток.

Размер представлений загруженных меток в памяти.

Число загруженных строк первичного ключа.

Количество загруженных файлов первичного индекса.

Количество загруженных строк первичного индекса.

Время, затраченное на загрузку статистики из частей

Количество отмен фоновых задач загрузки меток

Байты, прошедшие через ограничитель пропускной способности 'max_local_read_bandwidth_for_server'/'max_local_read_bandwidth'.

Общее время, в течение которого запрос был приостановлен из-за throttling для соблюдения ограничений max_local_read_bandwidth_for_server/max_local_read_bandwidth.

Общее время, которое потоки были заняты выполнением фактической работы.

Подсчитывает, сколько раз потоки брались из глобального пула потоков для расширения локальных пулов потоков.

Измеряет время, прошедшее с момента планирования задачи в пуле потоков до момента, когда её забирает на выполнение рабочий поток. Эта метрика помогает выявлять задержки в обработке задач и показывает, насколько быстро пул потоков реагирует на новые задачи.

Подсчитывает количество задач, переданных в локальные пулы потоков.

Общее время ожидания блокировок потоками в локальных пулах потоков.

Подсчитывает, сколько раз потоки возвращались из локальных пулов потоков в глобальный пул потоков.

Общее время, в течение которого локальные пулы потоков ожидали, пока можно будет взять поток из глобального пула.

Байты, пропущенные через ограничитель 'max_local_write_bandwidth_for_server'/'max_local_write_bandwidth'.

Общее время, в течение которого запрос ожидал, чтобы соблюсти ограничение пропускной способности 'max_local_write_bandwidth_for_server'/'max_local_write_bandwidth'.

Количество сообщений лога с уровнем Debug

Количество сообщений лога уровня Error

Количество сообщений лога уровня Fatal

Количество сообщений лога уровня Info

Количество сообщений лога уровня Test

Количество сообщений лога уровня Trace

Количество сообщений лога уровня Warning

Совокупное время, затраченное на логирование

Число случаев, когда файл был найден в кэше MMap (для read_method mmap), поэтому его не пришлось повторно отображать в память.

Количество случаев, когда файл не находился в кэше MMap (для read_method mmap), поэтому его приходилось заново отображать в память.

Количество перезагрузок основной конфигурации.

Количество байтов, вытесненных из кэша меток.

Количество файлов меток, вытесненных из кэша меток.

Количество меток, вытесненных из кэша меток.

Количество случаев, когда запись была найдена в кэше меток, поэтому не потребовалось загружать файл меток.

Количество случаев, когда элемент не был найден в кэше меток, из-за чего приходилось загружать в память файл меток — это ресурсоёмкая операция, увеличивающая задержку выполнения запроса.

Количество случаев, когда метки загружались синхронно, так как уже находились в кэше.

Количество раз, когда память выделялась без проверки ограничений по памяти.

Количество байтов, выделенных без проверки ограничений по памяти.

Общее количество запросов на очистку аллокатора памяти

Суммарное время, затраченное на очистку аллокатора памяти

Общее время ожидания освобождения памяти в OvercommitTracker.

Общее время, в течение которого запрос ожидал одобрения первичного резервирования памяти

Общее количество одобренных запросов на уменьшение объёма резервирования памяти

Общее количество неудачных попыток резервирования памяти

Общее время, в течение которого запрос ожидал одобрения на увеличение резервирования памяти

Общее количество одобренных запросов на увеличение резервирования памяти

Общее количество сигналов о завершении резервирования памяти

Количество запусков MemoryWorker в фоновом режиме

Суммарное время, затраченное MemoryWorker на фоновую работу

Число запущенных фоновых слияний.

Общее время, затраченное на фиксацию результатов слияния (переименование части, проверка контрольной суммы, обновление ZooKeeper)

Общее время активной работы, затраченное на выполнение фоновых слияний

Общее время активной работы, затраченное на выполнение горизонтального этапа фоновых слияний

Общее время, затраченное на горизонтальную стадию фоновых слияний

Время, затраченное на cancel() в задачах исполнителя MergeMutate.

Время, затраченное задачами исполнителя MergeMutate в executeStep().

Время, затраченное на сброс задачи в исполнителе MergeMutate.

Время, затраченное на ожидание завершения работы исполнителя MergeMutate.

Суммарное время занятости при выполнении этапа предварительного прогрева фоновых слияний

Общее время, затраченное на этап предварительного прогрева фоновых слияний

Общее время активной работы, затраченное на выполнение этапа проекций при фоновых слияниях

Общее время, затраченное на этап проекций при фоновых слияниях

Количество исходных частей, запланированных для слияния.

Общее время активной работы, затраченное на выполнение этапа текстового индекса в ходе фоновых слияний

Общее время, затраченное на этап текстового индекса при фоновых слияниях

Общее время, затраченное на фоновые слияния

Количество уведомлений о наборе частей данных, отправленных с удалённого сервера на сервер-инициатор (для таблиц MergeTree). Измеряется на стороне удалённого сервера.

Время, затраченное на отправку уведомления с удалённого сервера на сервер-инициатор о наборе частей данных (для таблиц MergeTree). Измеряется на стороне удалённого сервера.

Количество блоков, вставленных в проекцию таблиц MergeTree. Каждый блок образует часть данных уровня 0.

Количество блоков, вставленных в проекцию таблиц MergeTree, которые уже были отсортированы.

Объём данных в байтах, записанных в файловую систему при INSERT в проекцию таблиц MergeTree.

Время, затраченное на слияние блоков

Количество строк, вставленных в проекции таблиц MergeTree.

Время, затраченное на сортировку блоков (у проекции ключ может отличаться от ключа сортировки таблицы)

Несжатые байты (для столбцов — в том виде, в котором они хранятся в памяти), вставленные в проекцию таблиц MergeTree.

Количество блоков, вставленных в таблицы MergeTree. Каждый блок образует часть данных нулевого уровня.

Количество блоков, вставленных в таблицы MergeTree и, по-видимому, уже отсортированных.

Количество байт, записанных в файловую систему при INSERT данных в таблицы MergeTree.

Время, затраченное на слияние входных блоков (для специальных движков MergeTree)

Время, затраченное на вычисление проекций

Количество строк, вставленных в таблицы MergeTree.

Время, затраченное на вычисление индексов пропуска

Время, затраченное на сортировку блоков

Время, затраченное на расчет статистики

Несжатые байты (для столбцов в том виде, в каком они хранятся в памяти), вставленные в таблицы MergeTree.

Время, затраченное на подготовку задач в пуле чтения MergeTreePrefetchedReadPool

Количество запросов обратного вызова, отправленных удалённым сервером серверу-инициатору для выбора задачи чтения (для таблиц MergeTree). Измеряется на стороне сервера-инициатора.

Количество обратных вызовов, которые удалённый сервер запрашивает у сервера-инициатора для выбора задачи чтения (для таблиц MergeTree). Измеряется на стороне удалённого сервера.

Время, затраченное на обработку обратных вызовов с удалённого сервера на сервер-инициатор для выбора задачи чтения (для таблиц MergeTree). Измеряется на стороне удалённого сервера.

Суммарное время, в течение которого выполнялся вертикальный этап фоновых слияний

Общее время, затраченное на вертикальный этап фоновых слияний

Количество строк, записанных при слиянии.

Количество столбцов, слитых на горизонтальном этапе слияния.

Количество частей, слитых в формат Compact.

Количество частей, слитых в формат Wide.

Количество проекций, слитых (а не перестроенных) в ходе слияний MergeTree.

Количество строк, прочитанных для фоновых слияний. Это число строк до слияния.

Несжатые байты (для столбцов в том виде, в котором они хранятся в памяти), прочитанные для фоновых слияний. Это объём данных до слияния.

Количество частей-кандидатов на слияние

Время, затраченное на подготовку диапазонов частей, которые можно слить согласно предикату слияния.

Количество диапазонов-кандидатов для слияния

Время, затраченное на выбор частей из диапазонов, доступных для слияния.

Количество частей в выбранном для слияния диапазоне

Время, затраченное на создание снимка частей данных для последующего построения диапазонов.

Количество фоновых слияний, отклонённых из-за лимита памяти

Байты, прошедшие через ограничитель 'max_merges_bandwidth_for_server'.

Общее время, в течение которого запрос находился в ожидании из-за ограничения max_merges_bandwidth_for_server.

Общее время, затраченное на слияние отсортированных столбцов

Количество очисток пустой части структуры blob, выполненных фоновой задачей

Количество ошибок, возникших в задаче фоновой очистки

Количество случаев, когда фоновая задача выполняла очистку старого удалённого объекта

Количество раз, когда фоновая задача удаляла старый токен идемпотентности транзакции

Количество случаев, когда запрос метаданных объектного хранилища был обработан из кэша без обращения к Keeper

Количество случаев, когда запрос метаданных объектного хранилища был обработан через Keeper

Количество случаев, когда файловый кэш возвращал слишком много инвалидированных записей

Общее время, затраченное на обновление кэша, включая время ожидания ответов от Keeper

Количество попыток фиксации транзакции метаданных при очистке удалённых объектов

Количество повторных попыток фиксации транзакции метаданных при очистке удалённых объектов

Количество путей, прочитанных или записанных одиночными или составными запросами к Keeper

Время, затраченное на одиночные или множественные запросы к Keeper

Количество запросов к Keeper

Количество выполненных повторных подключений к Keeper

Количество попыток зафиксировать транзакцию метаданных

Количество повторных попыток фиксации транзакции метаданных

Количество обновлений кэша для одного уровня дерева каталогов

Время, затраченное на cancel() задач исполнителя Move.

Время, затраченное на executeStep() задачами исполнителя Move.

Время, затраченное на сброс задачи в исполнителе Move.

Время ожидания завершения в исполнителе Move.

Время, затраченное на вычисление проекций при мутациях

Строки, прочитанные для мутаций. Это количество строк до применения мутации

Несжатые байты (для столбцов в том виде, в котором они хранятся в памяти), прочитанные для мутаций. Это значение до применения мутации.

Верхняя граница количества строк, затронутых мутацией (например, количества строк, удовлетворяющих предикату мутации UPDATE или DELETE). Фактическое количество может быть немного меньше

Количество случаев создания задачи на мутацию всех столбцов в части данных

Общее время, затраченное на фиксацию результатов мутации (переименование частей, проверка контрольной суммы, обновление ZooKeeper)

Общее количество частей, заменённых на пустые вместо выполнения мутации

Общее время, в течение которого ресурсы были заняты выполнением мутаций.

Количество случаев, когда была создана задача мутации некоторых столбцов в части

Общее время, затраченное на выполнение мутаций.

Общее количество частей, к которым пытались применить мутации

Общее количество частей, к которым пытались применить мутации, но которые были полностью пропущены в соответствии с предикатом

Общее количество мутаций, применённых на лету во всех задачах чтения

Байты, прошедшие через ограничитель пропускной способности 'max_mutations_bandwidth_for_server'.

Общее время, в течение которого запрос находился в ожидании из-за ограничения max_mutations_bandwidth_for_server.

Количество байтов памяти, выделенной для моделей классификатора Naive Bayes.

Количество загруженных моделей классификатора Naive Bayes.

Общее количество байтов, полученных по сети. Учитывается только сетевое взаимодействие ClickHouse, без сторонних библиотек.

Общее время, затраченное на ожидание получения данных или на их получение по сети. Учитывается только сетевое взаимодействие, связанное с ClickHouse, но не со сторонними библиотеками.

Общее количество байтов, отправленных по сети. Учитывается только сетевое взаимодействие, связанное с ClickHouse, без сторонних библиотек.

Общее время, затраченное на ожидание отправки данных по сети или на их отправку по сети. Учитывается только сетевое взаимодействие, связанное с ClickHouse, но не со сторонними библиотеками.

Запись в журнале для объединения частей в ReplicatedMergeTree не создаётся из-за одновременного обновления журнала другой репликой.

Запись в журнале для мутации частей в ReplicatedMergeTree не создаётся из-за того, что другая реплика одновременно обновляет журнал.

Время CPU по данным ОС. Не включает вынужденные ожидания, вызванные виртуализацией.

Общее время, в течение которого поток был готов к выполнению, но ожидал, пока ОС выделит ему процессорное время, с точки зрения ОС.

Общее время, которое поток провёл в ожидании результата операции IO, с точки зрения ОС. Речь идёт о реальном IO, без учёта кэша страниц.

Количество байтов, прочитанных с дисков или блочных устройств. Не включает байты, прочитанные из кэша страниц. Может включать избыточные данные из-за размера блока, упреждающего чтения и т. д.

Количество байтов, прочитанных из файловой системы, включая кэш страниц, а также из сети и других файлов.

Количество байтов, записанных на диски или блочные устройства. Не включает байты в «грязных» страницах кэша страниц. Также может не включать данные, записанные ОС асинхронно.

Количество байтов, записанных в файловую систему (включая кэш страниц), а также по сети и в другие файлы.

Объекты, которые не соответствовали glob-шаблону или шаблону регулярного выражения и были пропущены при перечислении объектов.

Общее количество объектов, возвращённых API перечисления объектов в объектном хранилище до применения какой-либо фильтрации.

Объекты, исключённые при фильтрации по предикату виртуальных столбцов _path/_file.

Количество отменённых файлов в очереди StorageS3(Azure)Queue

Время, затраченное на присвоение файлу статуса failed

Количество запросов к Keeper на пометку файлов как ошибочных или обработанных

Количество исключений во время вставки в S3(Azure)Queue

Количество исключений при чтении в S3(Azure)Queue

Количество файлов, которые не удалось обработать

Количество запросов на обработку батча Set, завершившихся ошибкой

Количество отфильтрованных файлов в StorageS3(Azure)Queue

Количество итераций вставки

Количество перечисленных файлов в StorageS3(Azure)Queue

Количество объектов, перемещённых при after_processing = move

Количество обработанных файлов

Количество обработанных строк в StorageS3(Azure)Queue

Время, затраченное на чтение данных из файла

Количество прочитанных байтов (не совпадает с количеством фактически вставленных байтов)

Количество прочитанных файлов (не совпадает с количеством файлов, фактически вставленных в таблицу)

Количество прочитанных строк (не совпадает с количеством фактически вставленных строк)

Количество объектов, удалённых при after_processing = delete

Количество успешных коммитов в Keeper

Количество объектов, помеченных тегом after_processing = tag

Количество случаев, когда не удалось пометить файл как processing

Количество попыток отправить запрос на перевод в состояние processing

Количество случаев, когда нам удалось перевести файл в состояние processing

Количество неуспешных коммитов в Keeper

Объекты, которые источник объектного хранилища фактически открыл для чтения.

Количество случаев, когда часть данных была перекрыта другой частью данных, полученной из реплики (то есть перекрытую часть данных мы пометили как устаревшую и больше не нужную).

Количество случаев, когда файл находился в кэше открытых файлов, поэтому его не приходилось открывать повторно.

Время, затраченное на выполнение методов OpenedFileCache.

Количество случаев, когда файл был найден в кэше открытых файлов, и его пришлось открыть повторно.

Суммарное время запросов, не относящихся к SELECT или INSERT.

Количество случаев, когда применялся приблизительный GROUP BY: агрегирование выполнялось только по первым 'max_rows_to_group_by' уникальным ключам, а остальные игнорировались из-за 'group_by_overflow_mode' = 'any'.

Количество случаев, когда обработка данных была прервана из-за ограничения сложности запроса с настройкой '*_overflow_mode' = 'break', из-за чего результат оказался неполным.

Количество случаев, когда обработка данных была прервана из-за ограничения сложности запроса при значении настройки '*_overflow_mode' = 'throw' и было сгенерировано исключение.

Количество раз, когда блок данных был найден в кэше страниц в пространстве пользователя.

Количество случаев, когда блок данных не найден в кэше страниц в пространстве пользователя.

Количество случаев, когда кэш страниц в пространстве пользователя автоматически изменял размер, чтобы освободить память при её выделении.

Количество байтов, считанных из кэша страниц в пространстве пользователя.

Количество автоматических изменений размера кэша страниц в пространстве пользователя (обычно это происходит несколько раз в секунду; частота задаётся параметром memory_worker_period_ms).

Количество байтов, вытесненных из кэша страниц в пространстве пользователя

Время, затраченное на отправку уведомления

Количество реплик, доступных для выполнения запроса в режиме параллельных реплик на основе задач

Время, затраченное на сбор сегментов, определённых хешем

Количество запросов к инициирующему узлу, полностью отклонённых

Время, затраченное на обработку уведомлений от реплик

Время, затраченное на обработку запросов на получение меток от реплик

Количество запросов, отправленных инициатору.

Время, затраченное на обработку частей данных

Количество (под)запросов, выполненных с использованием параллельных реплик при выполнении запроса

Суммарное по всем репликам количество запланированных меток, назначенных для перехвата с помощью согласованного хеширования

Суммарное число по всем репликам запланированных меток, назначенных с помощью согласованного хеширования

Сколько меток прочитала данная реплика

Время, затраченное на запросы чтения

Суммарное по всем репликам число неназначенных меток, запланированных для чтения

Время, затраченное на сбор сегментов, предназначенных для stealing по хэшу

Время, затраченное на сбор бесхозных сегментов

Количество реплик, которые были выбраны, но оказались недоступны во время выполнения запроса в режиме параллельных реплик на основе задач

Количество реплик, использованных для выполнения запроса в режиме параллельных реплик на основе задач

Общее количество столбцов, к которым был применён фильтр

Группы задач, которые ридер Parquet отправляет в пул потоков

Задачи, созданные ридером Parquet

Время ожидания при чтении файла Parquet потоками декодирования (а не потоками предвыборки)

Количество случаев, когда метаданные Parquet были найдены в кэше.

Количество случаев, когда метаданные Parquet не находились в кэше и их приходилось считывать с диска.

Примерное количество байтов, вытесненных из кэша метаданных Parquet.

Общее количество операций чтения в режиме ReadMode::EntireFileIsInMemory, выполненных DB::Parquet::Prefetcher

Общее количество операций чтения в режиме ReadMode::RandomRead, выполненных DB::Parquet::Prefetcher

Общее число операций чтения в режиме ReadMode::SeekAndRead, выполненных DB::Parquet::Prefetcher

Общее количество групп строк, исключённых из данных Parquet

Общее количество групп строк, считанных из данных Parquet

Общее количество строк, пропущенных фильтром

Общее время, в течение которого удерживалась блокировка частей данных в таблицах MergeTree

Общее время, затраченное на ожидание блокировки частей данных в таблицах MergeTree

Количество случаев получения блокировки частей данных для таблиц MergeTree

Общее число микросекунд, затраченных на получение блокировки для выполнения легковесных обновлений

Общее количество попыток захватить блокировку для выполнения легковесных обновлений

Общее количество применённых патч-частей во всех задачах чтения

Общее количество применённых патч-частей с режимом JOIN во всех задачах чтения

Общее число строк, добавленных в хеш-таблицы при применении патч-частей в режиме JOIN

Общее количество применённых патч-частей в режиме Merge во всех задачах чтения

Общее число строк, прочитанных из патч-частей

Общее количество несжатых байтов, считанных из патч-частей

Количество ошибок выравнивания. Они возникают при невыровненных обращениях к памяти; ядро может их обработать, но это снижает производительность. Такое бывает только на некоторых архитектурах (на x86 — никогда).

Завершённые инструкции ветвления. До Linux 2.6.35 здесь использовалось неверное событие на процессорах AMD.

Ошибочно предсказанные инструкции ветвления.

Циклы шины, которые могут отличаться от общего количества циклов.

Таймер CPU, таймер высокого разрешения для каждого CPU

Общее количество циклов. Учитывайте, что происходит при масштабировании частоты CPU.

Количество раз, когда процесс был перенесён на другой CPU

Промахи кэша. Обычно это означает промахи кэша последнего уровня; этот показатель предполагается использовать вместе с событием PERFCOUNTHWCACHEREFERENCES для расчёта доли промахов кэша.

Обращения к кэшу. Обычно здесь имеются в виду обращения к кэшу последнего уровня (Last Level Cache), но это может различаться в зависимости от вашего процессора. Сюда также могут входить операции предварительного чтения и сообщения о когерентности; это тоже зависит от архитектуры вашего процессора.

Количество переключений контекста

Промахи TLB для данных

Обращения к TLB для данных

Количество сбоев эмуляции. Иногда ядро перехватывает неподдерживаемые инструкции и эмулирует их в пользовательском пространстве. Это может негативно влиять на производительность.

Промахи TLB при выборке инструкций

Обращения к TLB для инструкций

Завершённые инструкции. Будьте внимательны: на этот показатель могут влиять различные факторы, прежде всего количество аппаратных прерываний.

Промахи при чтении из памяти локального NUMA-узла

Чтения из памяти локального узла NUMA

Время выполнения события с минимальным включенным временем. Используется для отслеживания степени мультиплексирования событий

Для всех событий — минимальное время, когда событие было включено. Используется для отслеживания влияния мультиплексирования событий.

Общее число циклов; не зависит от изменения частоты CPU.

Циклы простоя при завершении инструкций.

Такты простоя на этапе выдачи инструкций.

Количество тактов, относящееся к выполняемой задаче

См. настройку prefer_warmed_unmerged_parts_seconds. Количество случаев, когда запросы на чтение использовали устаревшие, ещё не слитые части из кэша вместо слитой части, которую CacheWarmer ещё не успел загрузить в кэш.

Количество случаев, когда запись находилась в кэше первичного индекса, поэтому файл индекса не приходилось загружать.

Количество случаев, когда запись не находилась в кэше первичного индекса, и поэтому приходилось загружать в память файл индекса — это ресурсоёмкая операция, увеличивающая задержку запроса.

Количество запросов, включая все подзапросы

Количество запросов, которые должны быть разобраны и потенциально выполнены. Не включает запросы, которые не удалось разобрать или которые были отклонены из-за ограничений на размер AST, квот или количества одновременно выполняющихся запросов. Может включать внутренние запросы, инициированные самим ClickHouse. Подзапросы не учитываются.

Общее время, затраченное на построение дерева запроса и выполнение этапов анализатора (разрешение идентификаторов, типов и выражений).

Байты, прошедшие через ограничитель скорости 'max_backup_bandwidth'.

Общее время, в течение которого запрос находился в ожидании из-за ограничения max_backup_bandwidth.

Суммарный возраст найденных записей кэша запросов в секундах. Значение задаётся как для попаданий, так и для промахов.

Количество случаев, когда результат запроса находился в кэше запросов (и выполнять сам запрос не требовалось). Обновляется только для запросов SELECT с SETTING use_query_cache = 1.

Количество случаев, когда результат запроса не был найден в кэше запросов (и потребовалось вычислить запрос). Обновляется только для запросов SELECT с SETTING use_query_cache = 1.

Количество (несжатых) байт, прочитанных из кэша запросов.

Количество строк, считанных из кэша запросов.

Количество (несжатых) байтов, сохранённых в кэше запросов

Количество строк, сохранённых в кэше запросов.

Количество случаев, когда запись была найдена в кэше условий запроса (и чтение меток можно было пропустить). Обновляется только для запросов SELECT с SETTING use_query_condition_cache = 1.

Количество случаев, когда элемент не найден в кэше условий запроса (и чтение метки невозможно пропустить). Обновляется только для запросов SELECT с SETTING use_query_condition_cache = 1.

Количество байт, прошедших через ограничитель скорости 'max_local_read_bandwidth'.

Общее время, в течение которого запрос был приостановлен из-за throttling для соблюдения ограничения max_local_read_bandwidth.

Количество байтов, прошедших через ограничитель скорости 'max_local_write_bandwidth'.

Общее время, в течение которого запрос ожидал, чтобы соответствовать ограничению скорости max_local_write_bandwidth.

Количество успешных срабатываний правил маскирования запросов.

Количество случаев превышения лимита памяти при выполнении запроса.

Общее время, затраченное на разбор текста запроса в AST.

Общее время, затраченное на построение QueryPipeline из оптимизированного QueryPlan.

Общее время, затраченное на построение QueryPlan из проанализированного дерева запроса.

Общее время, затраченное на оптимизацию плана запроса.

Сколько раз задачи приостанавливаются и переходят в ожидание из-за настройки priority

Количество случаев, когда обработка сигнала профилировщика запросов прекращается из-за слишком большого числа одновременно работающих профилировщиков запросов в других потоках, что может указывать на перегрузку.

Некорректные обращения к памяти при асинхронной раскрутке стека.

Сколько раз запускался QueryProfiler.

Количество случаев, когда обработка сигнала профилировщика запросов была отброшена из-за переполнения, плюс количество сигналов, не доставленных ОС по той же причине.

Байты, пропущенные через ограничитель max_remote_read_network_bandwidth.

Общее время, в течение которого запрос находился в ожидании из-за ограничения пропускной способности 'max_remote_read_network_bandwidth'.

Байты, прошедшие через ограничитель скорости 'max_remote_write_network_bandwidth'.

Общее время, в течение которого запрос находился в ожидании из-за ограничения скорости, заданного параметром 'max_remote_write_network_bandwidth'.

Суммарное время всех запросов.

Количество вставок, завершившихся ошибкой из-за недостижения кворума.

Количество частей данных, записанных с кворумом. Для sync insert это считается как одна часть, а для insert, который выполняет flush async inserts, — вплоть до количества async inserts.

Общее время, затраченное на ожидание кворума при вставках.

Общее время, затраченное на повторный выбор квот для всех активных включенных наборов (выполняется под мьютексом кэша, который также захватывается при построении ContextAccess).

Количество случаев, когда кэш квот повторно выбирал квоты для всех активных включенных наборов. Выполняется не чаще одного раза на батч уведомлений об объектах управления доступом.

Количество раз, когда была захвачена блокировка на чтение (в heavy RWLock).

Количество раз, когда была захвачена блокировка записи (в heavy RWLock).

Общее время, затраченное на ожидание получения блокировки чтения (в heavy RWLock).

Общее время ожидания получения блокировки на запись (в heavy RWLock).

Количество случаев, когда число потоков обработки запросов уменьшалось из-за медленного чтения.

Количество байтов, прочитанных из Azure.

Время, затраченное на инициализацию подключения к Azure.

Время, затраченное на чтение данных из Azure.

Количество исключений при чтении из Azure

Количество операций чтения (read/pread) из файлового дескриптора. Сокеты не учитываются.

Количество байтов, прочитанных из файловых дескрипторов. Если файл сжат, здесь отображается размер сжатых данных.

Количество сбоев при чтении (read/pread) из файлового дескриптора.

Количество байт, прочитанных из S3.

Время, затраченное на установление соединения с S3.

Время, затраченное на чтение данных из S3.

Количество исключений при чтении из S3.

Количество операций seek, приводящих к установлению нового соединения (S3, HTTP)

Количество байтов (до распаковки), прочитанных из сжатых источников (файлов, сети).

Общее время, затраченное на чтение патч-частей

Количество обратных вызовов, запрошенных удалённым сервером у сервера-инициатора для выбора задачи чтения (для табличной функции s3Cluster и аналогичных). Измеряется на стороне сервера-инициатора.

Количество обратных вызовов, запрошенных удалённым сервером у сервера-инициатора для выбора задачи чтения (для табличной функции s3Cluster и аналогичных). Измеряется на стороне удалённого сервера.

Время, затраченное на обратные вызовы, отправляемые удалённым сервером на сервер-инициатор для выбора задачи чтения (для табличной функции s3Cluster и аналогичных). Измеряется на стороне удалённого сервера.

Общее количество задач чтения, для которых на лету была применена хотя бы одна мутация

Общее количество задач чтения, к которым была применена хотя бы одна patch part

Общий объём байтов полезной нагрузки, полученных и отправленных через ReadWriteBufferFromHTTP. Не включает HTTP-заголовки.

Количество HTTP-запросов, отправленных компонентом ReadWriteBufferFromHTTP

Физические байты, которые ReaderExecutor запросил у источника после промаха по всем уровням кэша (включая предзагрузку на переднем плане и в фоне, а также байты предзагрузки, впоследствии потерянные из-за отбрасывания); не включает байты, обслуженные потребителем — см. ReaderExecutorRequestedBytes.

Количество вызовов ICacheHandle::get в ReaderExecutor. Равно нулю до появления уровней кэша ReaderExecutor.

Количество вызовов ICacheHandle::put в ReaderExecutor. До появления уровней кэша ReaderExecutor равно нулю.

Количество соединений с источником, которые ReaderExecutor отбросил, не дочитав до правой границы; такие соединения нельзя повторно использовать в пуле, поэтому их приходится устанавливать заново. Значение равно нулю, пока в ReaderExecutor не будет реализовано повторное использование активного буфера источника.

Смоделированная стоимость I/O операций чтения ReaderExecutor: синтетический прокси-KPI оптимальности пути чтения, а НЕ измеренная задержка. Взвешенная сумма указанных выше счётчиков с эвристическими весами S3: 30 мс на каждый запрос к источнику + 5 мс на каждое незавершённое соединение + 20 мс на каждый MiB, переданный из источника (полезная нагрузка плюс избыточное чтение) + 0,1 мс на каждый cache put + 0,05 мс на каждый cache get. Разделите на ReaderExecutorRequestedBytes, чтобы получить не зависящую от нагрузки стоимость на байт. Экспериментальная метрика, соответствует экспериментальному ReaderExecutor.

Полезные байты, которые ReaderExecutor передал в запросы чтения (полезная нагрузка запрошенного окна, без учёта избыточно прочитанных данных и обратной записи в кэш). Знаменатель для KPI смоделированной стоимости на байт (ReaderExecutorModeledCostMicroseconds / ReaderExecutorRequestedBytes).

Количество запросов к источнику, открытых ReaderExecutor (без повторного использования live-buffer).

Общее реальное время, проведённое внутри ReaderExecutor::readNextWindow (открытие, перемещение по файлу и чтение обрабатываемого окна). Напрямую влияет на задержку чтения запроса.

Общее время по реальным часам, затраченное потоками обработки (запросов и других задач) (обратите внимание, что это сумма).

Количество проекций, полностью перестроенных во время слияний MergeTree.

Сколько раз SELECT-запросу из refreshable materialized view приходилось переключаться на новую таблицу, потому что старая была удалена

Количество сбоев обновления refreshable materialized views

Сколько раз обновлялись refreshable materialized views

Сколько раз SELECT из refreshable materialized view завершался ошибкой и вызывал повторную попытку неявного SYNC REPLICA

Сколько раз запрос SELECT к refreshable materialized view неявно выполнял SYNC REPLICA

Количество случаев, когда скомпилированное регулярное выражение извлекалось из локального кэша.

Количество случаев, когда не удалось получить скомпилированное регулярное выражение из локального кэша.

Скомпилированы регулярные выражения с несколькими искомыми шаблонами (библиотека VectorScan).

Количество случаев, когда скомпилированное регулярное выражение с несколькими шаблонами (библиотека VectorScan) извлекалось из глобального кэша.

Число случаев, когда не удалось получить из глобального кэша скомпилированное регулярное выражение с несколькими шаблонами (библиотека VectorScan).

Количество случаев, когда операция INSERT блока в таблицу MergeTree была отклонена с исключением «Too many parts» из-за большого количества активных частей данных в партиции.

Количество случаев, когда легковесное обновление отклонялось из-за слишком большого числа несжатых байтов в Patches.

Количество случаев, когда мутация таблицы MergeTree была отклонена с исключением 'Too many mutations' из-за большого количества незавершённых мутаций в таблице.

Количество буферов, созданных при асинхронном чтении из удалённой файловой системы

Количество отменённых операций предварительного чтения (из-за операции seek)

Количество отложенных операций seek

Количество байтов из буфера предварительного чтения

Количество чтений из буфера предварительного чтения

Количество операций предварительного чтения при асинхронном чтении из удалённой файловой системы

Общее число операций seek в асинхронном буфере

Количество операций seek, приводящих к установлению нового соединения

Количество байтов из буфера без предварительной загрузки

Количество чтений из буфера без предварительной загрузки

Количество операций предварительного чтения, остававшихся в очереди на момент уничтожения буфера

Количество байт, прошедших через ограничитель скорости 'max_remote_read_network_bandwidth_for_server'/'max_remote_read_network_bandwidth'.

Общее время, в течение которого запрос ожидал из-за throttling для 'max_remote_read_network_bandwidth_for_server'/'max_remote_read_network_bandwidth'.

Количество байтов, прошедших через ограничитель 'max_remote_write_network_bandwidth_for_server'/'max_remote_write_network_bandwidth'.

Общее время, в течение которого выполнение запроса приостанавливалось для соблюдения ограничения пропускной способности max_remote_write_network_bandwidth_for_server/max_remote_write_network_bandwidth.

Общее время, затраченное при замене отсортированных столбцов

Сколько раз таблице Replicated приходится сбрасывать своё состояние из-за истечения срока действия сеанса в ZooKeeper. Состояние повторно инициализируется каждый раз, когда ZooKeeper снова становится доступен.

Используется для отладки. Количество частей в ZooKeeper, для которых существует покрывающая часть, но которые отсутствуют на диске. Проверяется при запуске сервера.

Количество случаев, когда нужная нам часть данных отсутствует ни на одной реплике (даже на тех репликах, которые сейчас офлайн). Эти части данных определенно потеряны. Это нормально при асинхронной репликации (если вставки по кворуму не были включены): если реплика, на которую была записана часть данных, вышла из строя, то после возвращения в онлайн эта часть данных на ней отсутствует.

Количество случаев, когда приходилось выполнять расширенный поиск части данных на репликах или уточнять необходимость в уже существующей части данных.

Количество случаев, когда расширенный поиск части данных на репликах не дал результатов или была обнаружена и перемещена неожиданная часть данных.

Количество случаев, когда не удалось загрузить часть данных из реплики таблицы ReplicatedMergeTree.

Количество загрузок части данных из реплики таблицы ReplicatedMergeTree.

Количество случаев, когда мы предпочитаем загружать уже слитую часть с реплики таблицы ReplicatedMergeTree вместо того, чтобы выполнять слияние самостоятельно (обычно мы предпочитаем выполнять слияние самостоятельно, чтобы экономить сетевой трафик). Это происходит, когда у нас отсутствуют не все исходные части, необходимые для слияния, или когда часть данных достаточно старая.

Количество случаев успешного слияния частей данных таблиц ReplicatedMergeTree.

Количество раз, когда части данных таблиц ReplicatedMergeTree были успешно обработаны мутацией.

Суммарный размер файлов, пропущенных при восстановлении частей

Количество файлов, пропущенных при восстановлении частей

Общее время, затраченное на пересчёт всех активных наборов включённых ролей (при удержании мьютекса кэша, который также захватывается при построении ContextAccess).

Количество случаев, когда кэш ролей пересчитывал все актуальные включенные наборы. Сводится к одному пересчёту на батч уведомлений об объектах управления доступом.

Общее время, затраченное на повторное комбинирование фильтров политик строк для всех активных включённых наборов (при удержании мьютекса кэша, который также захватывается при построении ContextAccess).

Количество раз, когда кэш политик строк заново объединял фильтры для всех активных включенных наборов. Объединяется в одно срабатывание на батч уведомлений об объекте управления доступом.

Количество строк, прочитанных из таблиц MergeTree основным механизмом чтения (после этапа PREWHERE).

Общее количество строк, прочитанных из таблиц MergeTree средствами чтения prewhere.

Собранная статистика о количестве байтов, которые реплики прочитали бы при выполнении запроса с параллельными репликами

Собранная статистика о количестве байтов, которые реплики отправили бы инициатору, если бы запрос выполнялся в режиме параллельных реплик

Количество блоков, обработанных фильтрами JOIN Runtime Filters

Количество блоков, пропущенных JOIN Runtime Filters без обработки, поскольку фильтр был динамически отключён из-за низкой эффективности фильтрации

Количество строк, проверенных фильтрами JOIN Runtime Filters

Количество строк, прошедших через JOIN Runtime Filters (не отфильтрованных ими)

Количество строк в блоках, пропущенных фильтрами JOIN Runtime Filters

Количество различных JOIN Runtime Filters, созданных в запросе

Количество вызовов API S3 AbortMultipartUpload.

Общее количество новых провайдеров учетных данных, добавленных в кэш

Общее количество провайдеров учетных данных, повторно использованных из кэша

Количество созданных клиентов S3.

Количество вызовов метода CompleteMultipartUpload API S3.

Количество вызовов метода CopyObject API S3.

Количество вызовов метода CreateMultipartUpload API S3.

Количество вызовов DeleteObject(s) API S3.

Количество вызовов метода GetObject API S3.

Количество вызовов метода GetObjectTagging API S3.

Количество запросов S3 GET и SELECT, заблокированных механизмом ограничения скорости.

Количество запросов S3 GET и SELECT, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос ожидал из-за ограничения скорости GET- и SELECT-запросов S3.

Количество вызовов метода HeadObject API S3.

Количество вызовов метода ListObjects API S3.

Количество вызовов метода PutObject API S3.

Количество запросов S3 PUT, COPY, POST и LIST, заблокированных ограничителем.

Количество запросов S3 PUT, COPY, POST и LIST, прошедших через ограничитель: заблокированных и незаблокированных.

Общее время, в течение которого запрос ожидал, чтобы соблюсти ограничение скорости запросов S3 PUT, COPY, POST и LIST.

Время, затраченное на пометку файла как Failed

Время, затраченное на то, чтобы пометить файл как обработанный

Время, затраченное на пометку файла как processing

Время выполнения запросов GET и HEAD к хранилищу S3.

Количество попыток для запросов GET и HEAD, включая первоначальную попытку и любые повторные попытки, но исключая повторные попытки, которые выполняются внутренней стратегией повторов S3

Количество ошибок, допускающих повторную попытку, для запросов GET и HEAD, без учета повторных попыток, выполняемых внутренней стратегией повторных попыток S3

Количество GET- и HEAD-запросов к хранилищу S3.

Количество ошибок, не связанных с ограничением скорости, в запросах GET и HEAD к хранилищу S3.

Количество перенаправлений в запросах GET и HEAD к хранилищу S3.

Количество ошибок 429 и 503 в запросах GET и HEAD к хранилищу S3.

Количество вызовов UploadPart в API S3.

Количество вызовов метода UploadPartCopy API S3.

Время выполнения запросов POST, DELETE, PUT и PATCH к хранилищу S3.

Количество попыток выполнения запросов POST, DELETE, PUT и PATCH, включая первоначальную и все повторные попытки, но без учёта повторных попыток, выполняемых внутренне стратегией повторных попыток

Количество ошибок, для которых возможна повторная попытка, для запросов POST, DELETE, PUT и PATCH, за исключением повторных попыток, выполняемых внутренней стратегией повторных попыток

Количество запросов POST, DELETE, PUT и PATCH к хранилищу S3.

Количество ошибок, не связанных с ограничением скорости, в запросах POST, DELETE, PUT и PATCH к хранилищу S3.

Количество перенаправлений для запросов POST, DELETE, PUT и PATCH к хранилищу S3.

Количество ошибок 429 и 503 в запросах POST, DELETE, PUT и PATCH к хранилищу S3.

Количество случаев, когда результат чтения из скалярного подзапроса не был взят из кэша и его пришлось вычислять полностью

Количество чтений из скалярного подзапроса с использованием глобального кэша

Количество раз, когда чтение из скалярного подзапроса выполнялось с использованием локального кэша

Количество байт, прошедших через планировщик при операциях чтения ввода-вывода.

Запросы ресурсов, передаваемые через планировщик для операций чтения ввода-вывода.

Общее время, в течение которого запрос ожидал выделения ресурсов для операций чтения IO.

Байты, переданные через планировщик для операций записи IO.

Запросы ресурсов, проходящие через планировщик для операций записи ввода-вывода.

Общее время, в течение которого запрос ожидал выделения ресурсов для операций записи IO.

Количество вытеснений схем из кэша из-за переполнения

Количество случаев, когда запрошенный источник найден в кэше схемы

Количество случаев, когда схема в кэше становилась недействительной из-за изменений в данных

Количество случаев, когда запрошенный источник отсутствует в кэше схемы

Количество случаев, когда при подсчёте по файлам число строк находилось в кэше схемы

Количество случаев, когда запрошенный источник есть в кеше, но число строк не закешировано при подсчёте по файлам

Количество случаев, когда схема находится в кэше схем при автоматическом определении схемы

Количество случаев, когда запрошенный источник есть в кеше, но схема отсутствует в кеше при автоматическом определении схемы

Сколько раз вызывалась функция 'lseek'.

Подсчёт запросов SELECT, в которых для проверки условия WHERE используется первичный ключ

Количество запросов SELECT, включая все подзапросы

То же, что и Query, но только для SELECT-запросов.

Суммарное время выполнения SELECT-запросов.

Количество байт (в несжатом виде; для столбцов — в том виде, в котором они хранятся в памяти), считанных оператором SELECT из всех таблиц.

Количество меток (гранул индекса), выбранных для чтения из таблицы MergeTree.

Общее количество меток (гранул индекса) до выбора тех, из которых будут читаться данные таблицы MergeTree.

Количество частей данных, выбранных для чтения из таблицы MergeTree.

Общее количество частей данных до выбора тех, которые будут читаться из таблицы MergeTree.

Количество (несмежных) диапазонов во всех частях данных, отобранных для чтения из таблицы MergeTree.

Количество строк, выбранных запросом SELECT из всех таблиц.

Количество async inserts в блоке, вставленном в таблицу ReplicatedMergeTree, дедуплицированных самой системой.

Время от запуска сервера до начала прослушивания сокетов, в миллисекундах

Общее время, затраченное на повторное слияние настроек и ограничений для всех активных включенных наборов (при удержании мьютекса cache, который также захватывается при сборке ContextAccess).

Количество случаев, когда кэш профиля настроек повторно объединял настройки и ограничения для всех активных включенных наборов. Выполняется не чаще одного раза на батч уведомлений об объекте управления доступом.

Количество сегментов, задействованных в запросе, в сумме по всем distributed таблицам и табличным функциям. Один и тот же хост учитывается несколько раз, если он присутствует в нескольких таблицах. Это число показывает общее ожидаемое количество сегментов, включая пропущенные сегменты при настройке skip_unavailable_shards.

Количество ошибок при применении нового состояния в SharedDatabaseCatalog

Общее время, затраченное на применение нового состояния в SharedDatabaseCatalog

Сколько запросов к ZooKeeper потребовалось для удаления частей, помеченных на удаление

Сколько раз не удалось получить блокировку из-за конфликта блокировок

Количество удалённых частей, помеченных на удаление

Количество попыток получить части данных

Сколько раз части данных были получены от peer

Время получения частей данных от peer, в микросекундах

Сколько раз части данных загружаются из S3

Сколько блокирующих частей нужно обрабатывать в scheduleDataProcessingJob

Время обработки блокирующих частей в задаче scheduleDataProcessingJob

Время обработки полученных частей в scheduleDataProcessingJob

Сколько устаревших частей следует обрабатывать в scheduleDataProcessingJob

Время обработки устаревших частей в задаче scheduleDataProcessingJob

Время загрузки loadColumnsChecksumsIndexes только для SharedMergeTree

Сколько раз предпринималась попытка назначить слияние или мутацию

Сколько раз не удалось назначить слияние или мутацию из-за конфликта в Keeper

Сколько раз не удавалось назначить слияние или мутацию, потому что нечего было сливать

Сколько раз выполнялась попытка назначить слияние или мутацию

Количество частей, перемещённых в каталог помеченных на удаление

Сколько частей было перемещено в каталог устаревших

Время задачи выбора слияний для SMT в микросекундах

Количество случаев, когда подсказка кэша метаданных находилась без обращения к Keeper

Выполнение асинхронных запросов OPTIMIZE

Выполнение синхронных запросов OPTIMIZE

Сколько раз выполнялось подтверждение устаревших частей

Сколько запросов к ZooKeeper было использовано для настройки устаревших частей

Сколько HTTP-запросов отправлено для подтверждения устаревших частей

Сколько HTTP-ответов было отправлено для подтверждения устаревших частей данных

Сколько раз операции на уровне партиции (DROP/MOVE/REPLACE/CLONE/TRUNCATE PARTITION) приходилось повторять multi-write в Keeper из-за параллельного изменения

Сколько времени занимает работа основного потока процесса удаления частей

Сколько частей было запланировано к удалению процессом удаления частей

Сколько времени занимает удаление частей (выполняется в нескольких потоках)

Сколько раз запускался процесс удаления частей

Сколько раз выполнялась задача updateReplicaSetTask

Сколько раз набор реплик обновлялся из ZooKeeper

Сколько времени уходит на обновление набора реплик

Общее количество запросов к ZooKeeper для обновления набора реплик

Сколько раз вызывался scheduleDataProcessingJob/

время выполнения задачи scheduleDataProcessingJob

Сколько раз вызывалась scheduleDataProcessingJob, но обрабатывать было нечего

Время выполнения selectPartsForCoordinatedFetch

Количество частей, выбранных функцией selectPartsForCoordinatedFetch

Время выполнения selectPartsForFullFetch

Количество частей, выбранных с помощью selectPartsForFullFetch

Время выполнения selectPartsForRendezvousFetch

Количество частей, выбранных функцией selectPartsForRendezvousFetch

Сколько раз SnapshotCleanerThread принимает решение об очистке части

Сколько времени работал SnapshotCleanerThread

Время, в течение которого поток SnapshotCleanerThread пытается очистить часть

Сколько времени SnapshotCleanerThread тратит на очистку частей

Сколько раз запускался SnapshotCleanerThread

Сколько раз SnapshotCleanerThread успешно очищал часть

Время выполнения tryUpdateDiskMetadataCacheForPart в scheduleDataProcessingJob

Обновление виртуальных частей, микросекунды

Количество обновлений виртуальных частей

Обновления виртуальных частей, выполняемые лидером

Обновления виртуальных частей из фоновой задачи, отличной от используемой по умолчанию

Количество обновлений виртуальных частей, полученных от peer

Обновления виртуальных частей от peer, микросекунды

Количество обновлений виртуальных частей из ZooKeeper

Обновления виртуальных частей из ZooKeeper в микросекундах

Не удалось выбрать лидера для обновлений виртуальных частей

Лидер обновлений виртуальных частей успешно выбран

Виртуальные обновления от peer завершились с ошибкой: никого не удалось найти

Общее время, в течение которого удерживалась блокировка общих частей данных в таблицах MergeTree

Общее время ожидания блокировки общих частей данных в таблицах MergeTree

Количество получений блокировки общих частей данных для таблиц MergeTree

Количество вызовов функций sleep (sleep, sleepEachRow).

Время, затраченное на приостановку выполнения в функции sleep (sleep, sleepEachRow).

Время ожидания, заданное в функции sleep (sleep, sleepEachRow).

Количество медленных чтений из файла. Это указывает на перегрузку системы. Пороговые значения задаются настройками read_backoff_*.

Количество мягких страничных ошибок в потоках выполнения запроса. Мягкая страничная ошибка обычно указывает на промах в кэше аллокатора памяти, из-за чего ОС должна создать новое отображение памяти и затем выделить страницу физической памяти.

Количество случаев, когда буфер в таблице Buffer не смог выполнить сброс из-за ошибки записи в целевую таблицу.

Количество раз, когда буфер в таблице 'Buffer' сбрасывался на диск.

Время ожидания слоя Buffer при чтении.

Время ожидания освобождения слоя Buffer для записи (может использоваться для настройки слоёв Buffer).

Количество случаев, когда для сброса буфера в таблице 'Buffer' были достигнуты все минимальные пороговые значения.

Количество случаев, когда в таблице 'Buffer' был достигнут порог фонового сброса по объёму байтов, чтобы выполнить сброс буфера. Это метрика только для экспертов. Если вы читаете это и не являетесь экспертом, дальше не читайте.

Количество раз, когда достигался порог максимального числа байтов, при котором выполняется сброс буфера в таблице 'Buffer'.

Количество случаев, когда для сброса буфера в таблице 'Buffer' был достигнут порог фонового сброса только по числу строк. Это метрика только для экспертов. Если вы читаете это и вы не эксперт, прекратите читать.

Количество случаев, когда для сброса буфера в таблице 'Buffer' был достигнут порог максимального числа строк.

Количество случаев, когда был достигнут временной порог фонового сброса, из-за чего в таблице 'Buffer' был сброшен буфер. Это метрика только для экспертов. Если вы читаете это и не являетесь экспертом, дальше не читайте.

Количество случаев, когда буфер в таблице 'Buffer' был сброшен при достижении максимального временного порога.

Количество созданных подключений к хранилищам

Общее время, затраченное на установление подключений к хранилищам

Количество случаев, когда не удалось создать соединение с хранилищем

Количество истёкших подключений к хранилищам

Количество сохранённых подключений к хранилищам

Количество сброшенных подключений к хранилищам

Количество повторно используемых подключений к хранилищам

Общее время, затраченное на суммирование отсортированных столбцов

Общее число случаев приостановки отправки запроса в сегмент, когда включен async_query_sending_for_remote.

Время, потраченное на ожидание синхронных чтений при асинхронном локальном чтении.

Время, затраченное на ожидание при синхронном удалённом чтении.

Количество случаев, когда не удалось выполнить сброс любого из системных журналов в соответствующую системную таблицу. Попытки сброса выполняются повторно.

Общее время, затраченное потоками обработки (запросов и других задач) на выполнение инструкций CPU в режиме ядра ОС. Это время, затраченное на системные вызовы, без учёта времени ожидания при блокирующих системных вызовах.

Количество вызовов табличной функции.

Число индексных гранул, для которых прямое чтение из текстового индекса было добавлено как подсказка, но затем отброшено из-за низкой селективности.

Количество случаев, когда сканирование словаря по шаблону регулярного выражения в текстовом индексе было отменено, поскольку число списков вхождений, которые требовалось прочитать, превысило порог.

Количество случаев, когда заголовок был найден в кэше.

Количество случаев, когда заголовок не находился в кэше.

Количество операций продвижения, выполненных в режиме ленивого списка вхождений.

Количество упакованных блоков, пропущенных, поскольку выходная область уже была определена (все единицы для OR, все нули для побитового И) в режиме ленивого списка вхождений.

Количество пересечений, выполненных методом полного перебора в режиме ленивого списка вхождений.

Количество пересечений методом leapfrog, выполненных в режиме ленивого списка вхождений.

Количество упакованных блоков, декодированных в режиме ленивого списка вхождений.

Количество сегментов, которые были фактически прочитаны и декодированы (промахи кэша) в режиме ленивого списка вхождений.

Количество подготовленных сегментов (считанных с диска или кэшированных) в режиме ленивого списка вхождений.

Количество полностью плотных сегментов, целиком заполняемых (memset для OR, инкремент для побитового И) вместо декодирования блоков, в режиме ленивого списка вхождений.

Количество сегментов, пропущенных из-за того, что выходная область уже была определена (все единицы для OR, все нули для побитового И) в режиме ленивого списка вхождений.

Общее время, затраченное на пересечение при поиске совпадений фраз roaringish.

Общее время, затраченное на декодирование списков позиций текстового индекса (.pos) для поиска по фразам.

Количество случаев, когда список вхождений текстового индекса находился в кэше.

Количество раз, когда список вхождений текстового индекса не был найден в кэше.

Количество раз, когда блок словаря текстового индекса считывался с диска.

Общее время, затраченное на чтение и анализ гранул текстового индекса.

Количество чтений списка вхождений из текстового индекса.

Количество обращений к блоку разреженного индекса при чтении из текстового индекса.

Общее время чтения текстового индекса.

Количество случаев, когда информация о токене текстового индекса была найдена в кеше.

Количество случаев, когда информация о токене текстового индекса отсутствовала в кэше.

Количество гранул индекса, для которых в качестве подсказки было добавлено и использовано прямое чтение из текстового индекса.

Количество использований списка вхождений, встроенного в словарь.

Количество случаев, когда чтение в ThreadPoolReader выполнялось из кэша страниц.

Количество байтов, прочитанных в ThreadPoolReader из кэша страниц.

Время чтения данных из кэша страниц в ThreadPoolReader.

Количество случаев, когда чтение внутри ThreadPoolReader выполнялось не из кэша страниц, а передавалось в пул потоков.

Количество байтов, прочитанных внутри ThreadPoolReader, когда чтение выполнялось не из кэша страниц, а передавалось в пул потоков.

Время, затраченное на чтение данных в рамках асинхронной задачи в ThreadPoolReader, когда чтение выполнялось не из кэша страниц.

Время, затраченное на подготовку (например, на вызов метода seek() у reader)

Байты, прочитанные в задаче пула потоков при асинхронном чтении

Байты, прочитанные задачей пула потоков при асинхронном чтении

Сколько времени заняла проверка, находится ли содержимое в кэше

Сколько раз задача не была отправлена в пул потоков, а чтение вместо этого выполнялось синхронно

Сколько байт было считано синхронно

Время, затраченное на синхронное чтение

Время, затраченное на получение данных при асинхронном чтении

Общее время, в течение которого запрос ожидал, чтобы соответствовать всем настройкам throttling.

Количество копий клиентов S3, повторно использующих существующий провайдер аутентификации другого клиента.

Количество случаев вычисления расстояния при добавлении векторов в индексы USearch.

Количество векторов, добавленных в индексы usearch.

Количество узлов, посещаемых при добавлении векторов в индексы usearch.

Количество вычислений расстояния при поиске по индексам USearch.

Количество поисковых операций, выполненных в индексах usearch.

Количество узлов, просмотренных при поиске по индексам usearch.

Количество раз, когда блок данных был найден в кэше несжатых данных, благодаря чему декомпрессия не потребовалась.

Количество случаев, когда блок данных не был найден в кэше несжатых данных (и потребовалась распаковка).

Количество байтов, вытесненных из несжатого кэша.

Время, затраченное на чтение и десериализацию вспомогательных файлов delete-bitmap для UNIQUE KEY при промахе кэша DeleteBitmapCache.

Количество записанных sidecar-файлов delete-bitmap для UNIQUE KEY (по одному на каждое вытеснение / DELETE-коммит).

Количество случаев, когда запись находилась в кэше индекса UNIQUE KEY, поэтому не требовалось загружать SST-блок.

Реальное время выполнения внутри UniqueKeyIndexCache::Lookup + UniqueKeyIndexCache::Insert (адаптер CacheBase на стороне ClickHouse для кэша блоков RocksDB).

Количество случаев, когда запись не находилась в кэше индекса UNIQUE KEY и приходилось загружать SST-блок с диска.

Общее реальное время, затраченное за время жизни SSTIndexWriter, — включает Open для SST, каждый Put в addEncoded, а также Finish + копирование через writeFile в finalizeToStorage. Не включает работу, которую статические вспомогательные функции выполняют до создания writer'а (кодирование + сортировка по неперекрёстному префиксу path). Метрика выдаётся один раз на каждый writer.

Байты, пропущенные через ограничитель 'max_network_bandwidth_for_user'.

Общее время, в течение которого запрос ожидал, чтобы соответствовать ограничению пропускной способности 'max_network_bandwidth_for_user'.

Общее время, в течение которого потоки, обрабатывающие запросы и другие задачи, выполняли инструкции CPU в пользовательском режиме. Сюда также входит время, когда конвейер CPU простаивал из-за доступа к оперативной памяти, промахов кэша, неверного предсказания ветвлений, гиперпоточности и т. д.

Количество случаев, когда гранула индекса обнаруживалась в кэше векторного индекса.

Количество случаев, когда index granule не удавалось найти в кэше векторного индекса и её приходилось считывать с диска.

Примерное количество байтов, вытесненных из кэша векторного индекса.

Общее время, затраченное на схлопывание по версии для отсортированных столбцов

Время, затраченное на загрузку марок

Время, затраченное на ожидание reader'а с предвыборкой

Время, потраченное на выполнение кода WebAssembly

Время выполнения кода WebAssembly

Общий объём памяти, выделенный для компартментов WebAssembly

Количество созданных компартментов WebAssembly

Время, затраченное на выполнение кода WebAssembly

Время, затраченное на выполнение кода WebAssembly

Количество операций записи (write/pwrite) в файловый дескриптор. Сокеты не учитываются.

Количество байтов, записанных в файловые дескрипторы. Если файл сжат, здесь отображается размер сжатых данных.

Количество случаев, когда запись (write/pwrite) в файловый дескриптор завершалась ошибкой.

Общий размер в байтах полезной нагрузки, полученной и отправленной через WriteBufferFromHTTP. HTTP-заголовки не включаются.

Количество HTTP-запросов, отправленных компонентом WriteBufferFromHTTP

Количество байтов, записанных в S3.

Время, затраченное на запись в S3.

Число исключений при записи в S3.

Время, затраченное на ожидание завершения части текущих запросов, когда их число достигло предела, заданного s3_max_inflight_parts_for_one_file.

Количество байтов, полученных по сети при обмене данными с ZooKeeper.

Количество байтов, отправленных по сети при взаимодействии с ZooKeeper.

Количество запросов 'check' к ZooKeeper. Обычно сами по себе они не имеют смысла, только как часть сложной транзакции.

Количество случаев, когда соединение с ZooKeeper было закрыто по собственной инициативе.

Количество запросов на создание в ZooKeeper.

Количество запросов «exists» к ZooKeeper.

Количество запросов 'get' к ZooKeeper.

Количество запросов getACL к ZooKeeper.

Количество исключений при работе с ZooKeeper, связанных с сетью (потеря соединения и т. п.).

Количество установленных соединений с ZooKeeper.

Количество запросов 'list' (getChildren) к ZooKeeper.

Количество запросов listRecursive к ZooKeeper.

Количество multi-запросов к ZooKeeper (составных транзакций).

Количество запросов multi на чтение к ZooKeeper (составные транзакции).

Количество запросов 'multi' на запись в ZooKeeper (составные транзакции).

Количество исключений при работе с ZooKeeper, за исключением ZooKeeperUserExceptions и ZooKeeperHardwareExceptions.

Количество запросов «reconfig» к ZooKeeper.

Количество запросов «remove» к ZooKeeper.

Количество запросов «set» к ZooKeeper.

Количество запросов sync к ZooKeeper. Такие запросы требуются и используются редко.

Количество операций ZooKeeper, включая операции чтения и записи, а также мультизакции.

Количество исключений при работе с ZooKeeper, связанных с данными (отсутствие узла, неверная версия и т. п.).

Количество микросекунд, потраченных на ожидание ответов от ZooKeeper после создания запроса, в сумме по всем потокам, отправляющим запросы.

Общее время, затраченное на обработку обратных вызовов наблюдений ZooKeeper (сетевой поток).

Количество исключений, возникших при выполнении обратных вызовов наблюдений ZooKeeper.

Количество уведомлений наблюдения, полученных от ZooKeeper.

Количество уведомлений наблюдения, направленных в координацию резервного копирования и восстановления.

Количество уведомлений наблюдения, отправленных в ClusterDiscovery.

Количество уведомлений наблюдения, направленных в очередь DDLWorker.

Количество уведомлений наблюдения, направленных в подсистему координации обновления MaterializedView.

Количество уведомлений наблюдения, отправленных в ObjectStorageQueue / S3Queue.

Количество уведомлений наблюдения, переданных некатегоризированным функциям обратного вызова.

Количество уведомлений наблюдения, переданных в ReplicatedAccessStorage.

Количество уведомлений наблюдения, направленных на выбор лидера / блокировки реплик в ReplicatedMergeTree.

Количество уведомлений наблюдения, отправленных для записей журнала ReplicatedMergeTree.

Количество уведомлений наблюдения, отправленных мутациям ReplicatedMergeTree.

Количество уведомлений наблюдения, отправленных в ожидании обработки репликами записей журнала (SYNC REPLICA, ALTER, мутации).

Количество уведомлений наблюдения, направленных в UserDefinedSQLObjectsZooKeeperStorage.

Количество уведомлений наблюдения, переданных в WorkloadEntityKeeperStorage.