ClickHouse/docs/ru/operations/system-tables/query_log.md

system.query_log

Содержит информацию о выполняемых запросах, например, время начала обработки, продолжительность обработки, сообщения об ошибках.

!!! note "Внимание" Таблица не содержит входных данных для запросов INSERT.

Настойки логгирования можно изменить в секции серверной конфигурации query_log.

Можно отключить логгирование настройкой log_queries = 0. По-возможности, не отключайте логгирование, поскольку информация из таблицы важна при решении проблем.

Период сброса данных в таблицу задаётся параметром flush_interval_milliseconds в конфигурационной секции query_log. Чтобы принудительно записать логи из буффера памяти в таблицу, используйте запрос SYSTEM FLUSH LOGS.

ClickHouse не удаляет данные из таблица автоматически. Смотрите Введение.

Таблица system.query_log содержит информацию о двух видах запросов:

1. Первоначальные запросы, которые были выполнены непосредственно клиентом.
2. Дочерние запросы, инициированные другими запросами (для выполнения распределенных запросов). Для дочерних запросов информация о первоначальном запросе содержится в столбцах initial_*.

В зависимости от статуса (столбец type) каждый запрос создаёт одну или две строки в таблице query_log:

1. Если запрос выполнен успешно, создаются два события типа QueryStart и QueryFinish.
2. Если во время обработки запроса возникла ошибка, создаются два события с типами QueryStart и ExceptionWhileProcessing.
3. Если ошибка произошла ещё до запуска запроса, создается одно событие с типом ExceptionBeforeStart.

Столбцы:

• type (Enum8) — тип события, произошедшего при выполнении запроса. Значения:
  • 'QueryStart' = 1 — успешное начало выполнения запроса.
  • 'QueryFinish' = 2 — успешное завершение выполнения запроса.
  • 'ExceptionBeforeStart' = 3 — исключение перед началом обработки запроса.
  • 'ExceptionWhileProcessing' = 4 — исключение во время обработки запроса.
• event_date (Date) — дата начала запроса.
• event_time (DateTime) — время начала запроса.
• query_start_time (DateTime) — время начала обработки запроса.
• query_start_time_microseconds (DateTime64) — время начала обработки запроса с точностью до микросекунд.
• query_duration_ms (UInt64) — длительность выполнения запроса в миллисекундах.
• read_rows (UInt64) — Общее количество строк, считанных из всех таблиц и табличных функций, участвующих в запросе. Включает в себя обычные подзапросы, подзапросы для IN и JOIN. Для распределенных запросов read_rows включает в себя общее количество строк, прочитанных на всех репликах. Каждая реплика передает собственное значение read_rows, а сервер-инициатор запроса суммирует все полученные и локальные значения. Объемы кэша не учитываюся.
• read_bytes (UInt64) — Общее количество байтов, считанных из всех таблиц и табличных функций, участвующих в запросе. Включает в себя обычные подзапросы, подзапросы для IN и JOIN. Для распределенных запросов read_bytes включает в себя общее количество байтов, прочитанных на всех репликах. Каждая реплика передает собственное значение read_bytes, а сервер-инициатор запроса суммирует все полученные и локальные значения. Объемы кэша не учитываюся.
• written_rows (UInt64) — количество записанных строк для запросов INSERT. Для других запросов, значение столбца 0.
• written_bytes (UInt64) — объём записанных данных в байтах для запросов INSERT. Для других запросов, значение столбца 0.
• result_rows (UInt64) — количество строк в результате запроса SELECT или количество строк в запросе INSERT.
• result_bytes (UInt64) — объём RAM в байтах, использованный для хранения результата запроса.
• memory_usage (UInt64) — потребление RAM запросом.
• query (String) — текст запроса.
• exception (String) — сообщение исключения, если запрос завершился по исключению.
• exception_code (Int32) — код исключения.
• stack_trace (String) — stack trace. Пустая строка, если запрос успешно завершен.
• is_initial_query (UInt8) — вид запроса. Возможные значения:
  • 1 — запрос был инициирован клиентом.
  • 0 — запрос был инициирован другим запросом при выполнении распределенного запроса.
• user (String) — пользователь, запустивший текущий запрос.
• query_id (String) — ID запроса.
• address (IPv6) — IP адрес, с которого пришел запрос.
• port (UInt16) — порт, с которого клиент сделал запрос
• initial_user (String) — пользователь, запустивший первоначальный запрос (для распределенных запросов).
• initial_query_id (String) — ID родительского запроса.
• initial_address (IPv6) — IP адрес, с которого пришел родительский запрос.
• initial_port (UInt16) — порт, с которого клиент сделал родительский запрос.
• interface (UInt8) — интерфейс, с которого ушёл запрос. Возможные значения:
  • 1 — TCP.
  • 2 — HTTP.
• os_user (String) — имя пользователя операционной системы, который запустил clickhouse-client.
• client_hostname (String) — имя сервера, с которого присоединился clickhouse-client или другой TCP клиент.
• client_name (String) — clickhouse-client или другой TCP клиент.
• client_revision (UInt32) — ревизия clickhouse-client или другого TCP клиента.
• client_version_major (UInt32) — старшая версия clickhouse-client или другого TCP клиента.
• client_version_minor (UInt32) — младшая версия clickhouse-client или другого TCP клиента.
• client_version_patch (UInt32) — патч clickhouse-client или другого TCP клиента.
• http_method (UInt8) — HTTP метод, инициировавший запрос. Возможные значения:
  • 0 — запрос запущен с интерфейса TCP.
  • 1 — GET.
  • 2 — POST.
• http_user_agent (String) — HTTP заголовок UserAgent.
• quota_key (String) — «ключ квоты» из настроек квот (см. keyed).
• revision (UInt32) — ревизия ClickHouse.
• thread_numbers (Array(UInt32)) — количество потоков, участвующих в обработке запросов.
• ProfileEvents.Names (Array(String)) — Счетчики для изменения различных метрик. Описание метрик можно получить из таблицы system.events(#system_tables-events
• ProfileEvents.Values (Array(UInt64)) — метрики, перечисленные в столбце ProfileEvents.Names.
• Settings.Names (Array(String)) — имена настроек, которые меняются, когда клиент выполняет запрос. Чтобы разрешить логирование изменений настроек, установите параметр log_query_settings равным 1.
• Settings.Values (Array(String)) — Значения настроек, которые перечислены в столбце Settings.Names.

Пример

SELECT * FROM system.query_log LIMIT 1 FORMAT Vertical;

Row 1:
──────
type:                 QueryStart
event_date:           2020-05-13
event_time:           2020-05-13 14:02:28
query_start_time:     2020-05-13 14:02:28
query_duration_ms:    0
read_rows:            0
read_bytes:           0
written_rows:         0
written_bytes:        0
result_rows:          0
result_bytes:         0
memory_usage:         0
query:                SELECT 1
exception_code:       0
exception:
stack_trace:
is_initial_query:     1
user:                 default
query_id:             5e834082-6f6d-4e34-b47b-cd1934f4002a
address:              ::ffff:127.0.0.1
port:                 57720
initial_user:         default
initial_query_id:     5e834082-6f6d-4e34-b47b-cd1934f4002a
initial_address:      ::ffff:127.0.0.1
initial_port:         57720
interface:            1
os_user:              bayonet
client_hostname:      clickhouse.ru-central1.internal
client_name:          ClickHouse client
client_revision:      54434
client_version_major: 20
client_version_minor: 4
client_version_patch: 1
http_method:          0
http_user_agent:
quota_key:
revision:             54434
thread_ids:           []
ProfileEvents.Names:  []
ProfileEvents.Values: []
Settings.Names:       ['use_uncompressed_cache','load_balancing','log_queries','max_memory_usage']
Settings.Values:      ['0','random','1','10000000000']

Смотрите также

• system.query_thread_log — в этой таблице содержится информация о цепочке каждого выполненного запроса.

Оригинальная статья