mirror of
https://github.com/ClickHouse/ClickHouse.git
synced 2024-12-16 19:32:07 +00:00
58786f9929
* DOCSUP-1036: Describe settings for different pools (#118) * describe settings for different pools * minor changes * add refs to and from distributed, server settings, kafka, replication, mergetree * changes in links description * add description and links to RU version * add descrtiption and links to ru version * minor changes * CLICKHOUSEDOCS-620: Returned text lost by the last merge. Co-authored-by: Evgenia Sudarikova <56156889+otrazhenia@users.noreply.github.com> Co-authored-by: Sergei Shtykov <bayonet@yandex-team.ru>
1225 lines
89 KiB
Markdown
1225 lines
89 KiB
Markdown
---
|
||
toc_priority: 60
|
||
toc_title: Settings
|
||
---
|
||
|
||
# Настройки {#settings}
|
||
|
||
## distributed\_product\_mode {#distributed-product-mode}
|
||
|
||
Изменяет поведение [распределенных подзапросов](../../sql-reference/operators/index.md).
|
||
|
||
ClickHouse применяет настройку в тех случаях, когда запрос содержит произведение распределённых таблиц, т.е. когда запрос к распределенной таблице содержит не-GLOBAL подзапрос к также распределенной таблице.
|
||
|
||
Условия применения:
|
||
|
||
- Только подзапросы для IN, JOIN.
|
||
- Только если в секции FROM используется распределённая таблица, содержащая более одного шарда.
|
||
- Если подзапрос касается распределенной таблицы, содержащей более одного шарда.
|
||
- Не используется в случае табличной функции [remote](../../sql-reference/table-functions/remote.md).
|
||
|
||
Возможные значения:
|
||
|
||
- `deny` — значение по умолчанию. Запрещает использование таких подзапросов (При попытке использование вернет исключение «Double-distributed IN/JOIN subqueries is denied»);
|
||
- `local` — заменяет базу данных и таблицу в подзапросе на локальные для конечного сервера (шарда), оставив обычный `IN`/`JOIN.`
|
||
- `global` — заменяет запрос `IN`/`JOIN` на `GLOBAL IN`/`GLOBAL JOIN.`
|
||
- `allow` — разрешает использование таких подзапросов.
|
||
|
||
## enable\_optimize\_predicate\_expression {#enable-optimize-predicate-expression}
|
||
|
||
Включает пробрасывание предикатов в подзапросы для запросов `SELECT`.
|
||
|
||
Пробрасывание предикатов может существенно уменьшить сетевой трафик для распределенных запросов.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
Использование
|
||
|
||
Рассмотрим следующие запросы:
|
||
|
||
1. `SELECT count() FROM test_table WHERE date = '2018-10-10'`
|
||
2. `SELECT count() FROM (SELECT * FROM test_table) WHERE date = '2018-10-10'`
|
||
|
||
Если `enable_optimize_predicate_expression = 1`, то время выполнения запросов одинаковое, так как ClickHouse применяет `WHERE` к подзапросу сразу при его обработке.
|
||
|
||
Если `enable_optimize_predicate_expression = 0`, то время выполнения второго запроса намного больше, потому что секция `WHERE` применяется к данным уже после завершения подзапроса.
|
||
|
||
## fallback\_to\_stale\_replicas\_for\_distributed\_queries {#settings-fallback_to_stale_replicas_for_distributed_queries}
|
||
|
||
Форсирует запрос в устаревшую реплику в случае, если актуальные данные недоступны. См. [Репликация](../../engines/table-engines/mergetree-family/replication.md).
|
||
|
||
Из устаревших реплик таблицы ClickHouse выбирает наиболее актуальную.
|
||
|
||
Используется при выполнении `SELECT` из распределенной таблицы, которая указывает на реплицированные таблицы.
|
||
|
||
По умолчанию - 1 (включена).
|
||
|
||
## force\_index\_by\_date {#settings-force_index_by_date}
|
||
|
||
Запрещает выполнение запросов, если использовать индекс по дате невозможно.
|
||
|
||
Работает с таблицами семейства MergeTree.
|
||
|
||
При `force_index_by_date=1` ClickHouse проверяет, есть ли в запросе условие на ключ даты, которое может использоваться для отсечения диапазонов данных. Если подходящего условия нет - кидается исключение. При этом не проверяется, действительно ли условие уменьшает объём данных для чтения. Например, условие `Date != '2000-01-01'` подходит даже в том случае, когда соответствует всем данным в таблице (т.е. для выполнения запроса требуется full scan). Подробнее про диапазоны данных в таблицах MergeTree читайте в разделе [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md).
|
||
|
||
## force\_primary\_key {#settings-force_primary_key}
|
||
|
||
Запрещает выполнение запросов, если использовать индекс по первичному ключу невозможно.
|
||
|
||
Работает с таблицами семейства MergeTree.
|
||
|
||
При `force_primary_key=1` ClickHouse проверяет, есть ли в запросе условие на первичный ключ, которое может использоваться для отсечения диапазонов данных. Если подходящего условия нет - кидается исключение. При этом не проверяется, действительно ли условие уменьшает объём данных для чтения. Подробнее про диапазоны данных в таблицах MergeTree читайте в разделе [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md).
|
||
|
||
## format\_schema {#format-schema}
|
||
|
||
Параметр применяется в том случае, когда используются форматы, требующие определения схемы, например [Cap’n Proto](https://capnproto.org/) или [Protobuf](https://developers.google.com/protocol-buffers/). Значение параметра зависит от формата.
|
||
|
||
## fsync\_metadata {#fsync-metadata}
|
||
|
||
Включает или отключает [fsync](http://pubs.opengroup.org/onlinepubs/9699919799/functions/fsync.html) при записи `.sql` файлов. По умолчанию включено.
|
||
|
||
Имеет смысл выключать, если на сервере миллионы мелких таблиц-чанков, которые постоянно создаются и уничтожаются.
|
||
|
||
## enable\_http\_compression {#settings-enable_http_compression}
|
||
|
||
Включает или отключает сжатие данных в ответе на HTTP-запрос.
|
||
|
||
Для получения дополнительной информации, читайте [Описание интерфейса HTTP](../../interfaces/http.md).
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## http\_zlib\_compression\_level {#settings-http_zlib_compression_level}
|
||
|
||
Задаёт уровень сжатия данных в ответе на HTTP-запрос, если [enable\_http\_compression = 1](#settings-enable_http_compression).
|
||
|
||
Возможные значения: числа от 1 до 9.
|
||
|
||
Значение по умолчанию: 3.
|
||
|
||
## http\_native\_compression\_disable\_checksumming\_on\_decompress {#settings-http_native_compression_disable_checksumming_on_decompress}
|
||
|
||
Включает или отключает проверку контрольной суммы при распаковке данных HTTP POST от клиента. Используется только для собственного (`Navite`) формата сжатия ClickHouse (ни `gzip`, ни `deflate`).
|
||
|
||
Для получения дополнительной информации, читайте [Описание интерфейса HTTP](../../interfaces/http.md).
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## send\_progress\_in\_http\_headers {#settings-send_progress_in_http_headers}
|
||
|
||
Включает или отключает HTTP-заголовки `X-ClickHouse-Progress` в ответах `clickhouse-server`.
|
||
|
||
Для получения дополнительной информации, читайте [Описание интерфейса HTTP](../../interfaces/http.md).
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## max\_http\_get\_redirects {#setting-max_http_get_redirects}
|
||
|
||
Ограничивает максимальное количество переходов по редиректам в таблицах с движком [URL](../../engines/table-engines/special/url.md) при выполнении HTTP запросов методом GET. Настройка применяется для обоих типов таблиц: созданных запросом [CREATE TABLE](../../sql_reference/create/#create-table-query) и с помощью табличной функции [url](../../sql-reference/table-functions/url.md).
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число переходов.
|
||
- 0 — переходы запрещены.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## input\_format\_allow\_errors\_num {#input-format-allow-errors-num}
|
||
|
||
Устанавливает максимальное количество допустимых ошибок при чтении из текстовых форматов (CSV, TSV и т.п.).
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
Используйте обязательно в паре с `input_format_allow_errors_ratio`. Для пропуска ошибок, значения обеих настроек должны быть больше 0.
|
||
|
||
Если при чтении строки возникла ошибка, но при этом счетчик ошибок меньше `input_format_allow_errors_num`, то ClickHouse игнорирует строку и переходит к следующей.
|
||
|
||
В случае превышения `input_format_allow_errors_num` ClickHouse генерирует исключение.
|
||
|
||
## input\_format\_allow\_errors\_ratio {#input-format-allow-errors-ratio}
|
||
|
||
Устанавливает максимальную долю допустимых ошибок при чтении из текстовых форматов (CSV, TSV и т.п.).
|
||
Доля ошибок задаётся в виде числа с плавающей запятой от 0 до 1.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
Используйте обязательно в паре с `input_format_allow_errors_num`. Для пропуска ошибок, значения обеих настроек должны быть больше 0.
|
||
|
||
Если при чтении строки возникла ошибка, но при этом текущая доля ошибок меньше `input_format_allow_errors_ratio`, то ClickHouse игнорирует строку и переходит к следующей.
|
||
|
||
В случае превышения `input_format_allow_errors_ratio` ClickHouse генерирует исключение.
|
||
|
||
## input\_format\_values\_interpret\_expressions {#settings-input_format_values_interpret_expressions}
|
||
|
||
Включает или отключает парсер SQL, если потоковый парсер не может проанализировать данные. Этот параметр используется только для формата [Values](../../interfaces/formats.md#data-format-values) при вставке данных. Дополнительные сведения о парсерах читайте в разделе [Синтаксис](../../sql-reference/syntax.md).
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
|
||
В этом случае необходимо вставлять форматированные данные. Смотрите раздел [Форматы](../../interfaces/formats.md).
|
||
|
||
- 1 — включена.
|
||
|
||
В этом случае вы можете использовать выражение SQL в качестве значения, но вставка данных намного медленнее. Если вы вставляете только форматированные данные, ClickHouse ведет себя так, как будто значение параметра равно 0.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
Пример использования:
|
||
|
||
Вставим значение типа [DateTime](../../sql-reference/data-types/datetime.md) при разных значения настройки.
|
||
|
||
``` sql
|
||
SET input_format_values_interpret_expressions = 0;
|
||
INSERT INTO datetime_t VALUES (now())
|
||
```
|
||
|
||
``` text
|
||
Exception on client:
|
||
Code: 27. DB::Exception: Cannot parse input: expected ) before: now()): (at row 1)
|
||
```
|
||
|
||
``` sql
|
||
SET input_format_values_interpret_expressions = 1;
|
||
INSERT INTO datetime_t VALUES (now())
|
||
```
|
||
|
||
``` text
|
||
Ok.
|
||
```
|
||
|
||
Последний запрос эквивалентен следующему:
|
||
|
||
``` sql
|
||
SET input_format_values_interpret_expressions = 0;
|
||
INSERT INTO datetime_t SELECT now()
|
||
```
|
||
|
||
``` text
|
||
Ok.
|
||
```
|
||
|
||
## input\_format\_values\_deduce\_templates\_of\_expressions {#settings-input_format_values_deduce_templates_of_expressions}
|
||
|
||
Включает или отключает попытку вычисления шаблона для выражений SQL в формате [Values](../../interfaces/formats.md#data-format-values). Это позволяет гораздо быстрее парсить и интерпретировать выражения в `Values`, если выражения в последовательных строках имеют одинаковую структуру. ClickHouse пытается вычислить шаблон выражения, распарсить следующие строки с помощью этого шаблона и вычислить выражение в пачке успешно проанализированных строк.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — Выключена.
|
||
- 1 — Включена.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
Для следующего запроса:
|
||
|
||
``` sql
|
||
INSERT INTO test VALUES (lower('Hello')), (lower('world')), (lower('INSERT')), (upper('Values')), ...
|
||
```
|
||
|
||
- Если `input_format_values_interpret_expressions=1` и `format_values_deduce_templates_of_expressions=0`, выражения интерпретируются отдельно для каждой строки (это очень медленно для большого количества строк).
|
||
- Если `input_format_values_interpret_expressions=0` и `format_values_deduce_templates_of_expressions=1`, выражения в первой, второй и третьей строках парсятся с помощью шаблона `lower(String)` и интерпретируется вместе, выражение в четвертой строке парсится с другим шаблоном (`upper(String)`).
|
||
- Если `input_format_values_interpret_expressions=1` и `format_values_deduce_templates_of_expressions=1`, то же самое, что и в предыдущем случае, но также позволяет выполнять резервную интерпретацию выражений отдельно, если невозможно вычислить шаблон.
|
||
|
||
## input\_format\_values\_accurate\_types\_of\_literals {#settings-input-format-values-accurate-types-of-literals}
|
||
|
||
Эта настройка используется, только когда `input_format_values_deduce_templates_of_expressions = 1`. Выражения для некоторых столбцов могут иметь одинаковую структуру, но содержат числовые литералы разных типов, например:
|
||
|
||
``` sql
|
||
(..., abs(0), ...), -- UInt64 literal
|
||
(..., abs(3.141592654), ...), -- Float64 literal
|
||
(..., abs(-1), ...), -- Int64 literal
|
||
```
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — Выключена.
|
||
|
||
В этом случае, ClickHouse может использовать более общий тип для некоторых литералов (например, `Float64` или `Int64` вместо `UInt64` для `42`), но это может привести к переполнению и проблемам с точностью.
|
||
|
||
- 1 — Включена.
|
||
|
||
В этом случае, ClickHouse проверяет фактический тип литерала и использует шаблон выражения соответствующего типа. В некоторых случаях это может значительно замедлить оценку выажения в `Values`.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
## input\_format\_defaults\_for\_omitted\_fields {#session_settings-input_format_defaults_for_omitted_fields}
|
||
|
||
При вставке данных запросом `INSERT`, заменяет пропущенные поля значениям по умолчанию для типа данных столбца.
|
||
|
||
Поддерживаемые форматы вставки:
|
||
|
||
- [JSONEachRow](../../interfaces/formats.md#jsoneachrow)
|
||
- [CSV](../../interfaces/formats.md#csv)
|
||
- [TabSeparated](../../interfaces/formats.md#tabseparated)
|
||
|
||
!!! note "Примечание"
|
||
Когда опция включена, сервер отправляет клиенту расширенные метаданные. Это требует дополнительных вычислительных ресурсов на сервере и может снизить производительность.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
## input\_format\_null\_as\_default {#settings-input-format-null-as-default}
|
||
|
||
Включает или отключает использование значений по умолчанию в случаях, когда во входных данных содержится `NULL`, но тип соответствующего столбца не `Nullable(T)` (для текстовых форматов).
|
||
|
||
## input\_format\_skip\_unknown\_fields {#settings-input-format-skip-unknown-fields}
|
||
|
||
Включает или отключает пропускание вставки неизвестных данных.
|
||
|
||
При записи данных, если входные данные содержат столбцы, которых нет в целевой таблице, ClickHouse генерирует исключение. Если пропускание вставки включено, ClickHouse не вставляет неизвестные данные и не генерирует исключение.
|
||
|
||
Поддерживаемые форматы:
|
||
|
||
- [JSONEachRow](../../interfaces/formats.md#jsoneachrow)
|
||
- [CSVWithNames](../../interfaces/formats.md#csvwithnames)
|
||
- [TabSeparatedWithNames](../../interfaces/formats.md#tabseparatedwithnames)
|
||
- [TSKV](../../interfaces/formats.md#tskv)
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## input\_format\_import\_nested\_json {#settings-input_format_import_nested_json}
|
||
|
||
Включает или отключает вставку данных JSON с вложенными объектами.
|
||
|
||
Поддерживаемые форматы:
|
||
|
||
- [JSONEachRow](../../interfaces/formats.md#jsoneachrow)
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
См. также:
|
||
|
||
- [Использование вложенных структур](../../interfaces/formats.md#jsoneachrow-nested) with the `JSONEachRow` format.
|
||
|
||
## input\_format\_with\_names\_use\_header {#settings-input-format-with-names-use-header}
|
||
|
||
Включает или отключает проверку порядка столбцов при вставке данных.
|
||
|
||
Чтобы повысить эффективность вставки данных, рекомендуем отключить эту проверку, если вы уверены, что порядок столбцов входных данных такой же, как в целевой таблице.
|
||
|
||
Поддерживаемые форматы:
|
||
|
||
- [CSVWithNames](../../interfaces/formats.md#csvwithnames)
|
||
- [TabSeparatedWithNames](../../interfaces/formats.md#tabseparatedwithnames)
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
## date\_time\_input\_format {#settings-date_time_input_format}
|
||
|
||
Выбор парсера для текстового представления дат и времени при обработке входного формата.
|
||
|
||
Настройка не применяется к [функциям для работы с датой и временем](../../sql-reference/functions/date-time-functions.md).
|
||
|
||
Возможные значения:
|
||
|
||
- `'best_effort'` — включает расширенный парсинг.
|
||
|
||
ClickHouse может парсить базовый формат `YYYY-MM-DD HH:MM:SS` и все форматы [ISO 8601](https://en.wikipedia.org/wiki/ISO_8601). Например, `'2018-06-08T01:02:03.000Z'`.
|
||
|
||
- `'basic'` — используется базовый парсер.
|
||
|
||
ClickHouse может парсить только базовый формат `YYYY-MM-DD HH:MM:SS`. Например, `'2019-08-20 10:18:56'`.
|
||
|
||
Значение по умолчанию: `'basic'`.
|
||
|
||
См. также:
|
||
|
||
- [Тип данных DateTime.](../../sql-reference/data-types/datetime.md)
|
||
- [Функции для работы с датой и временем.](../../sql-reference/functions/date-time-functions.md)
|
||
|
||
## join\_default\_strictness {#settings-join_default_strictness}
|
||
|
||
Устанавливает строгость по умолчанию для [JOIN](../../sql-reference/statements/select/join.md#select-join).
|
||
|
||
Возможные значения
|
||
|
||
- `ALL` — если в правой таблице несколько совпадающих строк, данные умножаются на количество этих строк. Это нормальное поведение `JOIN` как в стандартном SQL.
|
||
- `ANY` — если в правой таблице несколько соответствующих строк, то соединяется только первая найденная. Если в «правой» таблице есть не более одной подходящей строки, то результаты `ANY` и `ALL` совпадают.
|
||
- `Пустая строка` — если `ALL` или `ANY` не указаны в запросе, то ClickHouse генерирует исключение.
|
||
|
||
Значение по умолчанию: `ALL`.
|
||
|
||
## join\_any\_take\_last\_row {#settings-join_any_take_last_row}
|
||
|
||
Изменяет поведение операций, выполняемых со строгостью `ANY`.
|
||
|
||
!!! warning "Внимание"
|
||
Настройка применяется только для операций `JOIN`, выполняемых над таблицами с движком [Join](../../engines/table-engines/special/join.md).
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — если в правой таблице несколько соответствующих строк, то присоединяется только первая найденная строка.
|
||
- 1 — если в правой таблице несколько соответствующих строк, то присоединяется только последняя найденная строка.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
См. также:
|
||
|
||
- [Секция JOIN](../../sql-reference/statements/select/join.md#select-join)
|
||
- [Движок таблиц Join](../../engines/table-engines/special/join.md)
|
||
- [join\_default\_strictness](#settings-join_default_strictness)
|
||
|
||
## join\_use\_nulls {#join_use_nulls}
|
||
|
||
Устанавливает тип поведения [JOIN](../../sql-reference/statements/select/join.md). При объединении таблиц могут появиться пустые ячейки. ClickHouse заполняет их по-разному в зависимости от настроек.
|
||
|
||
Возможные значения
|
||
|
||
- 0 — пустые ячейки заполняются значением по умолчанию соответствующего типа поля.
|
||
- 1 — `JOIN` ведёт себя как в стандартном SQL. Тип соответствующего поля преобразуется в [Nullable](../../sql-reference/data-types/nullable.md#data_type-nullable), а пустые ячейки заполняются значениями [NULL](../../sql-reference/syntax.md).
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## max\_block\_size {#setting-max_block_size}
|
||
|
||
Данные в ClickHouse обрабатываются по блокам (наборам кусочков столбцов). Внутренние циклы обработки для одного блока достаточно эффективны, но есть заметные издержки на каждый блок. Настройка `max_block_size` — это рекомендация, какой размер блока (в количестве строк) загружать из таблиц. Размер блока не должен быть слишком маленьким, чтобы затраты на каждый блок были заметны, но не слишком велики, чтобы запрос с LIMIT, который завершается после первого блока, обрабатывался быстро. Цель состоит в том, чтобы не использовалось слишком много оперативки при вынимании большого количества столбцов в несколько потоков; чтобы оставалась хоть какая-нибудь кэш-локальность.
|
||
|
||
Значение по умолчанию: 65,536.
|
||
|
||
Из таблицы не всегда загружаются блоки размера `max_block_size`. Если ясно, что нужно прочитать меньше данных, то будет считан блок меньшего размера.
|
||
|
||
## preferred\_block\_size\_bytes {#preferred-block-size-bytes}
|
||
|
||
Служит для тех же целей что и `max_block_size`, но задает рекомендуемый размер блоков в байтах, выбирая адаптивное количество строк в блоке.
|
||
При этом размер блока не может быть более `max_block_size` строк.
|
||
По умолчанию: 1,000,000. Работает только при чтении из MergeTree-движков.
|
||
|
||
## merge\_tree\_uniform\_read\_distribution {#setting-merge-tree-uniform-read-distribution}
|
||
|
||
При чтении из таблиц [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md) ClickHouse использует несколько потоков. Этот параметр включает/выключает равномерное распределение заданий по рабочим потокам. Алгоритм равномерного распределения стремится сделать время выполнения всех потоков примерно равным для одного запроса `SELECT`.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — не использовать равномерное распределение заданий на чтение.
|
||
- 1 — использовать равномерное распределение заданий на чтение.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
## merge\_tree\_min\_rows\_for\_concurrent\_read {#setting-merge-tree-min-rows-for-concurrent-read}
|
||
|
||
Если количество строк, считываемых из файла таблицы [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md) превышает `merge_tree_min_rows_for_concurrent_read`, то ClickHouse пытается выполнить одновременное чтение из этого файла в несколько потоков.
|
||
|
||
Возможные значения:
|
||
|
||
- Любое положительное целое число.
|
||
|
||
Значение по умолчанию: 163840.
|
||
|
||
## merge\_tree\_min\_bytes\_for\_concurrent\_read {#setting-merge-tree-min-bytes-for-concurrent-read}
|
||
|
||
Если число байтов, которое должно быть прочитано из одного файла таблицы с движком [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md), превышает значение `merge_tree_min_bytes_for_concurrent_read`, то ClickHouse выполняет одновременное чтение в несколько потоков из этого файла.
|
||
|
||
Возможное значение:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 251658240.
|
||
|
||
## merge\_tree\_min\_rows\_for\_seek {#setting-merge-tree-min-rows-for-seek}
|
||
|
||
Если расстояние между двумя блоками данных для чтения в одном файле меньше, чем `merge_tree_min_rows_for_seek` строк, то ClickHouse не перескакивает (seek) через блоки, а считывает данные последовательно.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## merge\_tree\_min\_bytes\_for\_seek {#setting-merge-tree-min-bytes-for-seek}
|
||
|
||
Если расстояние между двумя блоками данных для чтения в одном файле меньше, чем `merge_tree_min_bytes_for_seek` байтов, то ClickHouse не перескакивает (seek) через блоки, а считывает данные последовательно.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## merge\_tree\_coarse\_index\_granularity {#setting-merge-tree-coarse-index-granularity}
|
||
|
||
При поиске данных ClickHouse проверяет засечки данных в файле индекса. Если ClickHouse обнаруживает, что требуемые ключи находятся в некотором диапазоне, он делит этот диапазон на `merge_tree_coarse_index_granularity` поддиапазонов и выполняет в них рекурсивный поиск нужных ключей.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 8.
|
||
|
||
## merge\_tree\_max\_rows\_to\_use\_cache {#setting-merge-tree-max-rows-to-use-cache}
|
||
|
||
Если требуется прочитать более, чем `merge_tree_max_rows_to_use_cache` строк в одном запросе, ClickHouse не используют кэш несжатых блоков.
|
||
|
||
Кэш несжатых блоков хранит данные, извлечённые при выполнении запросов. ClickHouse использует этот кэш для ускорения ответов на повторяющиеся небольшие запросы. Настройка защищает кэш от замусоривания запросами, для выполнения которых необходимо извлечь большое количество данных. Настройка сервера [uncompressed\_cache\_size](../server-configuration-parameters/settings.md#server-settings-uncompressed_cache_size) определяет размер кэша несжатых блоков.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 128 ✕ 8192.
|
||
|
||
## merge\_tree\_max\_bytes\_to\_use\_cache {#setting-merge-tree-max-bytes-to-use-cache}
|
||
|
||
Если требуется прочитать более, чем `merge_tree_max_bytes_to_use_cache` байтов в одном запросе, ClickHouse не используют кэш несжатых блоков.
|
||
|
||
Кэш несжатых блоков хранит данные, извлечённые при выполнении запросов. ClickHouse использует кэш для ускорения ответов на повторяющиеся небольшие запросы. Настройка защищает кэш от переполнения. Настройка сервера [uncompressed\_cache\_size](../server-configuration-parameters/settings.md#server-settings-uncompressed_cache_size) определяет размер кэша несжатых блоков.
|
||
|
||
Возможное значение:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 2013265920.
|
||
|
||
## min\_bytes\_to\_use\_direct\_io {#settings-min-bytes-to-use-direct-io}
|
||
|
||
Минимальный объём данных, необходимый для прямого (небуферизованного) чтения/записи (direct I/O) на диск.
|
||
|
||
ClickHouse использует этот параметр при чтении данных из таблиц. Если общий объём хранения всех данных для чтения превышает `min_bytes_to_use_direct_io` байт, тогда ClickHouse использует флаг `O_DIRECT` при чтении данных с диска.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — прямой ввод-вывод отключен.
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## log\_queries {#settings-log-queries}
|
||
|
||
Установка логирования запроса.
|
||
|
||
Запросы, переданные в ClickHouse с этой установкой, логируются согласно правилам конфигурационного параметра сервера [query\_log](../../operations/server-configuration-parameters/settings.md#server_configuration_parameters-query-log).
|
||
|
||
Пример:
|
||
|
||
``` text
|
||
log_queries=1
|
||
```
|
||
|
||
## log\_query\_threads {#settings-log-query-threads}
|
||
|
||
Установка логирования информации о потоках выполнения запроса.
|
||
|
||
Лог информации о потоках выполнения запросов, переданных в ClickHouse с этой установкой, записывается согласно правилам конфигурационного параметра сервера [query\_thread\_log](../server-configuration-parameters/settings.md#server_configuration_parameters-query_thread_log).
|
||
|
||
Пример:
|
||
|
||
``` text
|
||
log_query_threads=1
|
||
```
|
||
|
||
## max\_insert\_block\_size {#settings-max_insert_block_size}
|
||
|
||
Формировать блоки указанного размера, при вставке в таблицу.
|
||
Эта настройка действует только в тех случаях, когда сервер сам формирует такие блоки.
|
||
Например, при INSERT-е через HTTP интерфейс, сервер парсит формат данных, и формирует блоки указанного размера.
|
||
А при использовании clickhouse-client, клиент сам парсит данные, и настройка max\_insert\_block\_size на сервере не влияет на размер вставляемых блоков.
|
||
При использовании INSERT SELECT, настройка так же не имеет смысла, так как данные будут вставляться теми блоками, которые вышли после SELECT-а.
|
||
|
||
Значение по умолчанию: 1,048,576.
|
||
|
||
Это значение намного больше, чем `max_block_size`. Это сделано, потому что некоторые движки таблиц (`*MergeTree`) будут на каждый вставляемый блок формировать кусок данных на диске, что является довольно большой сущностью. Также, в таблицах типа `*MergeTree`, данные сортируются при вставке, и достаточно большой размер блока позволяет отсортировать больше данных в оперативке.
|
||
|
||
## min\_insert\_block\_size\_rows {#min-insert-block-size-rows}
|
||
|
||
Устанавливает минимальное количество строк в блоке, который может быть вставлен в таблицу запросом `INSERT`. Блоки меньшего размера склеиваются в блоки большего размера.
|
||
|
||
Возможные значения:
|
||
|
||
- Целое положительное число.
|
||
- 0 — Склейка блоков выключена.
|
||
|
||
Значение по умолчанию: 1048576.
|
||
|
||
## min\_insert\_block\_size\_bytes {#min-insert-block-size-bytes}
|
||
|
||
Устанавливает минимальное количество байтов в блоке, который может быть вставлен в таблицу запросом `INSERT`. Блоки меньшего размера склеиваются в блоки большего размера.
|
||
|
||
Возможные значения:
|
||
|
||
- Целое положительное число.
|
||
- 0 — Склейка блоков выключена.
|
||
|
||
Значение по умолчанию: 268435456.
|
||
|
||
## max\_replica\_delay\_for\_distributed\_queries {#settings-max_replica_delay_for_distributed_queries}
|
||
|
||
Отключает отстающие реплики при распределенных запросах. См. [Репликация](../../engines/table-engines/mergetree-family/replication.md).
|
||
|
||
Устанавливает время в секундах. Если отставание реплики больше установленного значения, то реплика не используется.
|
||
|
||
Значение по умолчанию: 300.
|
||
|
||
Используется при выполнении `SELECT` из распределенной таблицы, которая указывает на реплицированные таблицы.
|
||
|
||
## max_threads {#settings-max_threads}
|
||
|
||
Максимальное количество потоков обработки запроса без учёта потоков для чтения данных с удалённых серверов (смотрите параметр max\_distributed\_connections).
|
||
|
||
Этот параметр относится к потокам, которые выполняют параллельно одни стадии конвейера выполнения запроса.
|
||
Например, при чтении из таблицы, если есть возможность вычислять выражения с функциями, фильтровать с помощью WHERE и предварительно агрегировать для GROUP BY параллельно, используя хотя бы количество потоков max\_threads, то используются max\_threads.
|
||
|
||
Значение по умолчанию: количество процессорных ядер без учёта Hyper-Threading.
|
||
|
||
Если на сервере обычно исполняется менее одного запроса SELECT одновременно, то выставите этот параметр в значение чуть меньше количества реальных процессорных ядер.
|
||
|
||
Для запросов, которые быстро завершаются из-за LIMIT-а, имеет смысл выставить max\_threads поменьше. Например, если нужное количество записей находится в каждом блоке, то при max\_threads = 8 будет считано 8 блоков, хотя достаточно было прочитать один.
|
||
|
||
Чем меньше `max_threads`, тем меньше будет использоваться оперативки.
|
||
|
||
## max\_insert\_threads {#settings-max-insert-threads}
|
||
|
||
Максимальное количество потоков для выполнения запроса `INSERT SELECT`.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 (или 1) — `INSERT SELECT` не выполняется параллельно.
|
||
- Положительное целое число, больше 1.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
Параллельный `INSERT SELECT` действует только в том случае, если часть SELECT выполняется параллельно, см. настройку [max_threads](#settings-max_threads).
|
||
Чем больше значение `max_insert_threads`, тем больше потребление оперативной памяти.
|
||
|
||
## max\_compress\_block\_size {#max-compress-block-size}
|
||
|
||
Максимальный размер блоков не сжатых данных перед сжатием при записи в таблицу. По умолчанию - 1 048 576 (1 MiB). При уменьшении размера, незначительно уменьшается коэффициент сжатия, незначительно возрастает скорость сжатия и разжатия за счёт кэш-локальности, и уменьшается потребление оперативки. Как правило, не имеет смысла менять эту настройку.
|
||
|
||
Не путайте блоки для сжатия (кусок памяти, состоящий из байт) и блоки для обработки запроса (пачка строк из таблицы).
|
||
|
||
## min\_compress\_block\_size {#min-compress-block-size}
|
||
|
||
Для таблиц типа [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md). В целях уменьшения задержек при обработке запросов, блок сжимается при записи следующей засечки, если его размер не меньше min\_compress\_block\_size. По умолчанию - 65 536.
|
||
|
||
Реальный размер блока, если несжатых данных меньше max\_compress\_block\_size, будет не меньше этого значения и не меньше объёма данных на одну засечку.
|
||
|
||
Рассмотрим пример. Пусть index\_granularity, указанная при создании таблицы - 8192.
|
||
|
||
Пусть мы записываем столбец типа UInt32 (4 байта на значение). При записи 8192 строк, будет всего 32 КБ данных. Так как min\_compress\_block\_size = 65 536, сжатый блок будет сформирован на каждые две засечки.
|
||
|
||
Пусть мы записываем столбец URL типа String (средний размер - 60 байт на значение). При записи 8192 строк, будет, в среднем, чуть меньше 500 КБ данных. Так как это больше 65 536 строк, то сжатый блок будет сформирован на каждую засечку. В этом случае, при чтении с диска данных из диапазона в одну засечку, не будет разжато лишних данных.
|
||
|
||
Как правило, не имеет смысла менять эту настройку.
|
||
|
||
## max\_query\_size {#settings-max_query_size}
|
||
|
||
Максимальный кусок запроса, который будет считан в оперативку для разбора парсером языка SQL.
|
||
Запрос INSERT также содержит данные для INSERT-а, которые обрабатываются отдельным, потоковым парсером (расходующим O(1) оперативки), и не учитываются в этом ограничении.
|
||
|
||
Значение по умолчанию: 256 Кб.
|
||
|
||
## interactive\_delay {#interactive-delay}
|
||
|
||
Интервал в микросекундах для проверки, не запрошена ли остановка выполнения запроса, и отправки прогресса.
|
||
|
||
Значение по умолчанию: 100,000 (проверять остановку запроса и отправлять прогресс десять раз в секунду).
|
||
|
||
## connect\_timeout, receive\_timeout, send\_timeout {#connect-timeout-receive-timeout-send-timeout}
|
||
|
||
Таймауты в секундах на сокет, по которому идёт общение с клиентом.
|
||
|
||
Значение по умолчанию: 10, 300, 300.
|
||
|
||
## cancel\_http\_readonly\_queries\_on\_client\_close {#cancel-http-readonly-queries-on-client-close}
|
||
|
||
Отменяет HTTP readonly запросы (например, SELECT), когда клиент обрывает соединение до завершения получения данных.
|
||
|
||
Значение по умолчанию: 0
|
||
|
||
## poll\_interval {#poll-interval}
|
||
|
||
Блокироваться в цикле ожидания запроса в сервере на указанное количество секунд.
|
||
|
||
Значение по умолчанию: 10.
|
||
|
||
## max\_distributed\_connections {#max-distributed-connections}
|
||
|
||
Максимальное количество одновременных соединений с удалёнными серверами при распределённой обработке одного запроса к одной таблице типа Distributed. Рекомендуется выставлять не меньше, чем количество серверов в кластере.
|
||
|
||
Значение по умолчанию: 1024.
|
||
|
||
Следующие параметры имеют значение только на момент создания таблицы типа Distributed (и при запуске сервера), поэтому их не имеет смысла менять в рантайме.
|
||
|
||
## distributed\_connections\_pool\_size {#distributed-connections-pool-size}
|
||
|
||
Максимальное количество одновременных соединений с удалёнными серверами при распределённой обработке всех запросов к одной таблице типа Distributed. Рекомендуется выставлять не меньше, чем количество серверов в кластере.
|
||
|
||
Значение по умолчанию: 1024.
|
||
|
||
## connect\_timeout\_with\_failover\_ms {#connect-timeout-with-failover-ms}
|
||
|
||
Таймаут в миллисекундах на соединение с удалённым сервером, для движка таблиц Distributed, если используются секции shard и replica в описании кластера.
|
||
В случае неуспеха, делается несколько попыток соединений с разными репликами.
|
||
|
||
Значение по умолчанию: 50.
|
||
|
||
## connections\_with\_failover\_max\_tries {#connections-with-failover-max-tries}
|
||
|
||
Максимальное количество попыток соединения с каждой репликой, для движка таблиц Distributed.
|
||
|
||
Значение по умолчанию: 3.
|
||
|
||
## extremes {#extremes}
|
||
|
||
Считать ли экстремальные значения (минимумы и максимумы по столбцам результата запроса). Принимает 0 или 1. По умолчанию - 0 (выключено).
|
||
Подробнее смотрите раздел «Экстремальные значения».
|
||
|
||
## use\_uncompressed\_cache {#setting-use_uncompressed_cache}
|
||
|
||
Использовать ли кэш разжатых блоков. Принимает 0 или 1. По умолчанию - 0 (выключено).
|
||
|
||
Использование кэша несжатых блоков (только для таблиц семейства MergeTree) может существенно сократить задержку и увеличить пропускную способность при работе с большим количеством коротких запросов. Включите эту настройку для пользователей, от которых идут частые короткие запросы. Также обратите внимание на конфигурационный параметр [uncompressed\_cache\_size](../server-configuration-parameters/settings.md#server-settings-uncompressed_cache_size) (настраивается только в конфигурационном файле) – размер кэша разжатых блоков. По умолчанию - 8 GiB. Кэш разжатых блоков заполняется по мере надобности, а наиболее невостребованные данные автоматически удаляются.
|
||
|
||
Для запросов, читающих хоть немного приличный объём данных (миллион строк и больше), кэш разжатых блоков автоматически выключается, чтобы оставить место для действительно мелких запросов. Поэтому, можно держать настройку `use_uncompressed_cache` всегда выставленной в 1.
|
||
|
||
## replace\_running\_query {#replace-running-query}
|
||
|
||
При использовании интерфейса HTTP может быть передан параметр query\_id. Это любая строка, которая служит идентификатором запроса.
|
||
Если в этот момент, уже существует запрос от того же пользователя с тем же query\_id, то поведение определяется параметром replace\_running\_query.
|
||
|
||
`0` - (по умолчанию) кинуть исключение (не давать выполнить запрос, если запрос с таким же query\_id уже выполняется);
|
||
|
||
`1` - отменить старый запрос и начать выполнять новый.
|
||
|
||
Эта настройка, выставленная в 1, используется в Яндекс.Метрике для реализации suggest-а значений для условий сегментации. После ввода очередного символа, если старый запрос ещё не выполнился, его следует отменить.
|
||
|
||
## stream\_flush\_interval\_ms {#stream-flush-interval-ms}
|
||
|
||
Работает для таблиц со стриммингом в случае тайм-аута, или когда поток генерирует [max\_insert\_block\_size](#settings-max_insert_block_size) строк.
|
||
|
||
Значение по умолчанию: 7500.
|
||
|
||
Чем меньше значение, тем чаще данные сбрасываются в таблицу. Установка слишком низкого значения приводит к снижению производительности.
|
||
|
||
## load\_balancing {#settings-load_balancing}
|
||
|
||
Задает алгоритм выбора реплик, используемый при обработке распределенных запросов.
|
||
|
||
ClickHouse поддерживает следующие алгоритмы выбора реплик:
|
||
|
||
- [Random](#load_balancing-random) (by default)
|
||
- [Nearest hostname](#load_balancing-nearest_hostname)
|
||
- [In order](#load_balancing-in_order)
|
||
- [First or random](#load_balancing-first_or_random)
|
||
|
||
### Random (by Default) {#load_balancing-random}
|
||
|
||
``` sql
|
||
load_balancing = random
|
||
```
|
||
|
||
Для каждой реплики считается количество ошибок. Запрос отправляется на реплику с минимальным числом ошибок, а если таких несколько, то на случайную из них.
|
||
Недостатки: не учитывается близость серверов; если на репликах оказались разные данные, то вы будете получать так же разные данные.
|
||
|
||
### Nearest Hostname {#load_balancing-nearest_hostname}
|
||
|
||
``` sql
|
||
load_balancing = nearest_hostname
|
||
```
|
||
|
||
Для каждой реплики считается количество ошибок. Каждые 5 минут, число ошибок целочисленно делится на 2. Таким образом, обеспечивается расчёт числа ошибок за недавнее время с экспоненциальным сглаживанием. Если есть одна реплика с минимальным числом ошибок (то есть, на других репликах недавно были ошибки) - запрос отправляется на неё. Если есть несколько реплик с одинаковым минимальным числом ошибок, то запрос отправляется на реплику, имя хоста которой в конфигурационном файле минимально отличается от имени хоста сервера (по количеству отличающихся символов на одинаковых позициях, до минимальной длины обеих имён хостов).
|
||
|
||
Для примера, example01-01-1 и example01-01-2.yandex.ru отличаются в одной позиции, а example01-01-1 и example01-02-2 - в двух.
|
||
Этот метод может показаться примитивным, но он не требует внешних данных о топологии сети и не сравнивает IP-адреса, что было бы сложно для наших IPv6-адресов.
|
||
|
||
Таким образом, если есть равнозначные реплики, предпочитается ближайшая по имени.
|
||
Также можно сделать предположение, что при отправке запроса на один и тот же сервер, в случае отсутствия сбоев, распределённый запрос будет идти тоже на одни и те же серверы. То есть, даже если на репликах расположены разные данные, запрос будет возвращать в основном одинаковые результаты.
|
||
|
||
### In Order {#load_balancing-in_order}
|
||
|
||
``` sql
|
||
load_balancing = in_order
|
||
```
|
||
|
||
Реплики с одинаковым количеством ошибок опрашиваются в порядке, определённом конфигурацией.
|
||
Этот способ подходит для тех случаев, когда вы точно знаете, какая реплика предпочтительнее.
|
||
|
||
### First or Random {#load_balancing-first_or_random}
|
||
|
||
``` sql
|
||
load_balancing = first_or_random
|
||
```
|
||
|
||
Алгоритм выбирает первую реплику или случайную реплику, если первая недоступна. Он эффективен в топологиях с перекрестной репликацией, но бесполезен в других конфигурациях.
|
||
|
||
Алгоритм `first or random` решает проблему алгоритма `in order`. При использовании `in order`, если одна реплика перестаёт отвечать, то следующая за ней принимает двойную нагрузку, в то время как все остальные обрабатываю свой обычный трафик. Алгоритм `first or random` равномерно распределяет нагрузку между репликами.
|
||
|
||
## prefer\_localhost\_replica {#settings-prefer-localhost-replica}
|
||
|
||
Включает или выключает предпочтительное использование localhost реплики при обработке распределенных запросов.
|
||
|
||
Возможные значения:
|
||
|
||
- 1 — ClickHouse всегда отправляет запрос на localhost реплику, если она существует.
|
||
- 0 — ClickHouse использует балансировку, заданную настройкой [load\_balancing](#settings-load_balancing).
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
!!! warning "Warning"
|
||
Отключайте эту настройку при использовании [max\_parallel\_replicas](#settings-max_parallel_replicas).
|
||
|
||
## totals\_mode {#totals-mode}
|
||
|
||
Каким образом вычислять TOTALS при наличии HAVING, а также при наличии max\_rows\_to\_group\_by и group\_by\_overflow\_mode = ‘any’.
|
||
Смотрите раздел «Модификатор WITH TOTALS».
|
||
|
||
## totals\_auto\_threshold {#totals-auto-threshold}
|
||
|
||
Порог для `totals_mode = 'auto'`.
|
||
Смотрите раздел «Модификатор WITH TOTALS».
|
||
|
||
## max\_parallel\_replicas {#settings-max_parallel_replicas}
|
||
|
||
Максимальное количество используемых реплик каждого шарда при выполнении запроса.
|
||
Для консистентности (чтобы получить разные части одного и того же разбиения), эта опция работает только при заданном ключе сэмплирования.
|
||
Отставание реплик не контролируется.
|
||
|
||
## compile {#compile}
|
||
|
||
Включить компиляцию запросов. По умолчанию - 0 (выключено).
|
||
|
||
Компиляция предусмотрена только для части конвейера обработки запроса - для первой стадии агрегации (GROUP BY).
|
||
В случае, если эта часть конвейера была скомпилирована, запрос может работать быстрее, за счёт разворачивания коротких циклов и инлайнинга вызовов агрегатных функций. Максимальный прирост производительности (до четырёх раз в редких случаях) достигается на запросах с несколькими простыми агрегатными функциями. Как правило, прирост производительности незначителен. В очень редких случаях возможно замедление выполнения запроса.
|
||
|
||
## min\_count\_to\_compile {#min-count-to-compile}
|
||
|
||
После скольких раз, когда скомпилированный кусок кода мог пригодиться, выполнить его компиляцию. По умолчанию - 3.
|
||
Для тестирования можно установить значение 0: компиляция выполняется синхронно, и запрос ожидает окончания процесса компиляции перед продолжением выполнения. Во всех остальных случаях используйте значения, начинающиеся с 1. Как правило, компиляция занимает по времени около 5-10 секунд.
|
||
В случае, если значение равно 1 или больше, компиляция выполняется асинхронно, в отдельном потоке. При готовности результата, он сразу же будет использован, в том числе, уже выполняющимися в данный момент запросами.
|
||
|
||
Скомпилированный код требуется для каждого разного сочетания используемых в запросе агрегатных функций и вида ключей в GROUP BY.
|
||
Результаты компиляции сохраняются в директории build в виде .so файлов. Количество результатов компиляции не ограничено, так как они не занимают много места. При перезапуске сервера, старые результаты будут использованы, за исключением случая обновления сервера - тогда старые результаты удаляются.
|
||
|
||
## input\_format\_skip\_unknown\_fields {#input-format-skip-unknown-fields}
|
||
|
||
Если значение равно true, то при выполнении INSERT входные данные из столбцов с неизвестными именами будут пропущены. В противном случае эта ситуация создаст исключение.
|
||
Работает для форматов JSONEachRow и TSKV.
|
||
|
||
## output\_format\_json\_quote\_64bit\_integers {#session_settings-output_format_json_quote_64bit_integers}
|
||
|
||
Если значение истинно, то при использовании JSON\* форматов UInt64 и Int64 числа выводятся в кавычках (из соображений совместимости с большинством реализаций JavaScript), иначе - без кавычек.
|
||
|
||
## format\_csv\_delimiter {#settings-format_csv_delimiter}
|
||
|
||
Символ, интерпретируемый как разделитель в данных формата CSV. По умолчанию — `,`.
|
||
|
||
## input\_format\_csv\_unquoted\_null\_literal\_as\_null {#settings-input_format_csv_unquoted_null_literal_as_null}
|
||
|
||
Для формата CSV включает или выключает парсинг неэкранированной строки `NULL` как литерала (синоним для `\N`)
|
||
|
||
## output\_format\_csv\_crlf\_end\_of\_line {#settings-output-format-csv-crlf-end-of-line}
|
||
|
||
Использовать в качестве разделителя строк для CSV формата CRLF (DOS/Windows стиль) вместо LF (Unix стиль).
|
||
|
||
## output\_format\_tsv\_crlf\_end\_of\_line {#settings-output-format-tsv-crlf-end-of-line}
|
||
|
||
Использовать в качестве разделителя строк для TSV формата CRLF (DOC/Windows стиль) вместо LF (Unix стиль).
|
||
|
||
## insert\_quorum {#settings-insert_quorum}
|
||
|
||
Включает кворумную запись.
|
||
|
||
- Если `insert_quorum < 2`, то кворумная запись выключена.
|
||
- Если `insert_quorum >= 2`, то кворумная запись включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
Кворумная запись
|
||
|
||
`INSERT` завершается успешно только в том случае, когда ClickHouse смог без ошибки записать данные в `insert_quorum` реплик за время `insert_quorum_timeout`. Если по любой причине количество реплик с успешной записью не достигнет `insert_quorum`, то запись считается не состоявшейся и ClickHouse удалит вставленный блок из всех реплик, куда уже успел записать данные.
|
||
|
||
Все реплики в кворуме консистентны, т.е. содержат данные всех более ранних запросов `INSERT`. Последовательность `INSERT` линеаризуется.
|
||
|
||
При чтении данных, записанных с `insert_quorum` можно использовать настройку [select\_sequential\_consistency](#settings-select_sequential_consistency).
|
||
|
||
ClickHouse генерирует исключение
|
||
|
||
- Если количество доступных реплик на момент запроса меньше `insert_quorum`.
|
||
- При попытке записать данные в момент, когда предыдущий блок ещё не вставлен в `insert_quorum` реплик. Эта ситуация может возникнуть, если пользователь вызвал `INSERT` прежде, чем завершился предыдущий с `insert_quorum`.
|
||
|
||
См. также:
|
||
|
||
- [insert\_quorum\_timeout](#settings-insert_quorum_timeout)
|
||
- [select\_sequential\_consistency](#settings-select_sequential_consistency)
|
||
|
||
## insert\_quorum\_timeout {#settings-insert_quorum_timeout}
|
||
|
||
Время ожидания кворумной записи в секундах. Если время прошло, а запись так не состоялась, то ClickHouse сгенерирует исключение и клиент должен повторить запрос на запись того же блока на эту же или любую другую реплику.
|
||
|
||
Значение по умолчанию: 60 секунд.
|
||
|
||
См. также:
|
||
|
||
- [insert\_quorum](#settings-insert_quorum)
|
||
- [select\_sequential\_consistency](#settings-select_sequential_consistency)
|
||
|
||
## select\_sequential\_consistency {#settings-select_sequential_consistency}
|
||
|
||
Включает или выключает последовательную консистентность для запросов `SELECT`.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
Использование
|
||
|
||
Когда последовательная консистентность включена, то ClickHouse позволит клиенту выполнить запрос `SELECT` только к тем репликам, которые содержат данные всех предыдущих запросов `INSERT`, выполненных с `insert_quorum`. Если клиент обратится к неполной реплике, то ClickHouse сгенерирует исключение. В запросе SELECT не будут участвовать данные, которые ещё не были записаны на кворум реплик.
|
||
|
||
См. также:
|
||
|
||
- [insert\_quorum](#settings-insert_quorum)
|
||
- [insert\_quorum\_timeout](#settings-insert_quorum_timeout)
|
||
|
||
## insert\_deduplicate {#settings-insert-deduplicate}
|
||
|
||
Включает и выключает дедупликацию для запросов `INSERT` (для Replicated\* таблиц).
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 1.
|
||
|
||
По умолчанию блоки, вставляемые в реплицируемые таблицы оператором `INSERT`, дедуплицируются (см. [Репликация данных](../../engines/table-engines/mergetree-family/replication.md)).
|
||
|
||
## deduplicate\_blocks\_in\_dependent\_materialized\_views {#settings-deduplicate-blocks-in-dependent-materialized-views}
|
||
|
||
Включает и выключает проверку дедупликации для материализованных представлений, которые получают данные из Replicated\* таблиц.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — выключена.
|
||
- 1 — включена.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
По умолчанию проверка дедупликации у материализованных представлений не производится, а наследуется от Replicated\* (основной) таблицы, за которой «следит» материализованное представление.
|
||
Т.е. если `INSERT` в основную таблицу д.б. пропущен (сдедуплицирован), то автоматически не будет вставки и в материализованные представления. Это имплементировано для того, чтобы работали материализованные представления, которые сильно группируют данные основных `INSERT`, до такой степени что блоки вставляемые в материализованные представления получаются одинаковыми для разных `INSERT` в основную таблицу.
|
||
Одновременно это «ломает» идемпотентность вставки в материализованные представления. Т.е. если `INSERT` был успешен в основную таблицу и неуспешен в таблицу материализованного представления (напр. из-за сетевого сбоя при коммуникации с Zookeeper), клиент получит ошибку и попытается повторить `INSERT`. Но вставки в материализованные представления произведено не будет, потому что дедупликация сработает на основной таблице. Настройка `deduplicate_blocks_in_dependent_materialized_views` позволяет это изменить. Т.е. при повторном `INSERT` будет произведена дедупликация на таблице материализованного представления, и повторный инсерт вставит данные в таблицу материализованного представления, которые не удалось вставить из-за сбоя первого `INSERT`.
|
||
|
||
## count\_distinct\_implementation {#settings-count_distinct_implementation}
|
||
|
||
Задаёт, какая из функций `uniq*` используется при выполнении конструкции [COUNT(DISTINCT …)](../../sql-reference/aggregate-functions/reference.md#agg_function-count).
|
||
|
||
Возможные значения:
|
||
|
||
- [uniq](../../sql-reference/aggregate-functions/reference.md#agg_function-uniq)
|
||
- [uniqCombined](../../sql-reference/aggregate-functions/reference.md#agg_function-uniqcombined)
|
||
- [uniqCombined64](../../sql-reference/aggregate-functions/reference.md#agg_function-uniqcombined64)
|
||
- [uniqHLL12](../../sql-reference/aggregate-functions/reference.md#agg_function-uniqhll12)
|
||
- [uniqExact](../../sql-reference/aggregate-functions/reference.md#agg_function-uniqexact)
|
||
|
||
Значение по умолчанию: `uniqExact`.
|
||
|
||
## max\_network\_bytes {#settings-max-network-bytes}
|
||
|
||
Ограничивает объём данных (в байтах), который принимается или передается по сети при выполнении запроса. Параметр применяется к каждому отдельному запросу.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
- 0 — контроль объёма данных отключен.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## max\_network\_bandwidth {#settings-max-network-bandwidth}
|
||
|
||
Ограничивает скорость обмена данными по сети в байтах в секунду. Параметр применяется к каждому отдельному запросу.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
- 0 — контроль скорости передачи данных отключен.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## max\_network\_bandwidth\_for\_user {#settings-max-network-bandwidth-for-user}
|
||
|
||
Ограничивает скорость обмена данными по сети в байтах в секунду. Этот параметр применяется ко всем одновременно выполняемым запросам, запущенным одним пользователем.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
- 0 — управление скоростью передачи данных отключено.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## max\_network\_bandwidth\_for\_all\_users {#settings-max-network-bandwidth-for-all-users}
|
||
|
||
Ограничивает скорость обмена данными по сети в байтах в секунду. Этот параметр применяется ко всем одновременно выполняемым запросам на сервере.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое число.
|
||
- 0 — управление скоростью передачи данных отключено.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## skip\_unavailable\_shards {#settings-skip_unavailable_shards}
|
||
|
||
Включает или отключает тихий пропуск недоступных шардов.
|
||
|
||
Шард считается недоступным, если все его реплики недоступны. Реплика недоступна в следующих случаях:
|
||
|
||
- ClickHouse не может установить соединение с репликой по любой причине.
|
||
|
||
ClickHouse предпринимает несколько попыток подключиться к реплике. Если все попытки оказались неудачными, реплика считается недоступной.
|
||
|
||
- Реплика не может быть разрешена с помощью DNS.
|
||
|
||
Если имя хоста реплики не может быть разрешено с помощью DNS, это может указывать на следующие ситуации:
|
||
|
||
- Нет записи DNS для хоста. Это может происходить в системах с динамическим DNS, например, [Kubernetes](https://kubernetes.io), где отключенные ноды не разрешаться с помощью DNS и это не ошибка.
|
||
|
||
- Ошибка конфигурации. Конфигурационный файл ClickHouse может содержать неправильное имя хоста.
|
||
|
||
Возможные значения:
|
||
|
||
- 1 — пропуск включен.
|
||
|
||
Если шард недоступен, то ClickHouse возвращает результат, основанный на неполных данных и не оповещает о проблемах с доступностью хостов.
|
||
|
||
- 0 — пропуск выключен.
|
||
|
||
Если шард недоступен, то ClickHouse генерирует исключение.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## optimize_skip_unused_shards {#optimize-skip-unused-shards}
|
||
|
||
Включает или отключает пропуск неиспользуемых шардов для запросов [SELECT](../../sql-reference/statements/select/index.md) , в которых условие ключа шардирования задано в секции `WHERE/PREWHERE`. Предполагается, что данные распределены с помощью ключа шардирования, в противном случае настройка ничего не делает.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — Выключена.
|
||
- 1 — Включена.
|
||
|
||
Значение по умолчанию: 0
|
||
|
||
## force_optimize_skip_unused_shards {#force-optimize-skip-unused-shards}
|
||
|
||
Разрешает или запрещает выполнение запроса, если настройка [optimize_skip_unused_shards](#optimize-skip-unused-shards) включена, а пропуск неиспользуемых шардов невозможен. Если данная настройка включена и пропуск невозможен, ClickHouse генерирует исключение.
|
||
|
||
Возможные значения:
|
||
|
||
- 0 — Выключена. ClickHouse не генерирует исключение.
|
||
- 1 — Включена. Выполнение запроса запрещается, только если у таблицы есть ключ шардирования.
|
||
- 2 — Включена. Выполнение запроса запрещается, даже если для таблицы не определен ключ шардирования.
|
||
|
||
Значение по умолчанию: 0
|
||
|
||
## optimize\_throw\_if\_noop {#setting-optimize_throw_if_noop}
|
||
|
||
Включает или отключает генерирование исключения в в случаях, когда запрос [OPTIMIZE](../../sql-reference/statements/misc.md#misc_operations-optimize) не выполняет мёрж.
|
||
|
||
По умолчанию, `OPTIMIZE` завершается успешно и в тех случаях, когда он ничего не сделал. Настройка позволяет отделить подобные случаи и включает генерирование исключения с поясняющим сообщением.
|
||
|
||
Возможные значения:
|
||
|
||
- 1 — генерирование исключения включено.
|
||
- 0 — генерирование исключения выключено.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## distributed\_directory\_monitor\_sleep\_time\_ms {#distributed_directory_monitor_sleep_time_ms}
|
||
|
||
Основной интервал отправки данных движком таблиц [Distributed](../../engines/table-engines/special/distributed.md). Фактический интервал растёт экспоненциально при возникновении ошибок.
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое количество миллисекунд.
|
||
|
||
Значение по умолчанию: 100 миллисекунд.
|
||
|
||
## distributed\_directory\_monitor\_max\_sleep\_time\_ms {#distributed_directory_monitor_max_sleep_time_ms}
|
||
|
||
Максимальный интервал отправки данных движком таблиц [Distributed](../../engines/table-engines/special/distributed.md). Ограничивает экпоненциальный рост интервала, установленого настройкой [distributed\_directory\_monitor\_sleep\_time\_ms](#distributed_directory_monitor_sleep_time_ms).
|
||
|
||
Возможные значения:
|
||
|
||
- Положительное целое количество миллисекунд.
|
||
|
||
Значение по умолчанию: 30000 миллисекунд (30 секунд).
|
||
|
||
## distributed\_directory\_monitor\_batch\_inserts {#distributed_directory_monitor_batch_inserts}
|
||
|
||
Включает/выключает пакетную отправку вставленных данных.
|
||
|
||
Если пакетная отправка включена, то движок таблиц [Distributed](../../engines/table-engines/special/distributed.md) вместо того, чтобы отправлять каждый файл со вставленными данными по отдельности, старается отправить их все за одну операцию. Пакетная отправка улучшает производительность кластера за счет более оптимального использования ресурсов сервера и сети.
|
||
|
||
Возможные значения:
|
||
|
||
- 1 — включено.
|
||
- 0 — выключено.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## os\_thread\_priority {#setting-os-thread-priority}
|
||
|
||
Устанавливает приоритет ([nice](https://en.wikipedia.org/wiki/Nice_(Unix))) для потоков, исполняющих запросы. Планировщик ОС учитывает эти приоритеты при выборе следующего потока для исполнения на доступном ядре CPU.
|
||
|
||
!!! warning "Предупреждение"
|
||
Для использования этой настройки необходимо установить свойство `CAP_SYS_NICE`. Пакет `clickhouse-server` устанавливает его во время инсталляции. Некоторые виртуальные окружения не позволяют установить `CAP_SYS_NICE`. В этом случае, `clickhouse-server` выводит сообщение при запуске.
|
||
|
||
Допустимые значения:
|
||
|
||
- Любое значение из диапазона `[-20, 19]`.
|
||
|
||
Более низкие значения означают более высокий приоритет. Потоки с низкими значениями приоритета `nice` выполняются чаще, чем потоки с более высокими значениями. Высокие значения предпочтительно использовать для долгих неинтерактивных запросов, поскольку это позволяет бысто выделить ресурс в пользу коротких интерактивных запросов.
|
||
|
||
Значение по умолчанию: 0.
|
||
|
||
## query\_profiler\_real\_time\_period\_ns {#query_profiler_real_time_period_ns}
|
||
|
||
Sets the period for a real clock timer of the [query profiler](../../operations/optimizing-performance/sampling-query-profiler.md). Real clock timer counts wall-clock time.
|
||
|
||
Possible values:
|
||
|
||
- Positive integer number, in nanoseconds.
|
||
|
||
Recommended values:
|
||
|
||
- 10000000 (100 times a second) nanoseconds and less for single queries.
|
||
- 1000000000 (once a second) for cluster-wide profiling.
|
||
|
||
- 0 for turning off the timer.
|
||
|
||
Type: [UInt64](../../sql-reference/data-types/int-uint.md).
|
||
|
||
Default value: 1000000000 nanoseconds (once a second).
|
||
|
||
See also:
|
||
|
||
- System table [trace\_log](../../operations/system-tables.md#system_tables-trace_log)
|
||
|
||
## query\_profiler\_cpu\_time\_period\_ns {#query_profiler_cpu_time_period_ns}
|
||
|
||
Sets the period for a CPU clock timer of the [query profiler](../../operations/optimizing-performance/sampling-query-profiler.md). This timer counts only CPU time.
|
||
|
||
Possible values:
|
||
|
||
- Positive integer number of nanoseconds.
|
||
|
||
Recommended values:
|
||
|
||
- 10000000 (100 times a second) nanosecods and more for for single queries.
|
||
- 1000000000 (once a second) for cluster-wide profiling.
|
||
|
||
- 0 for turning off the timer.
|
||
|
||
Type: [UInt64](../../sql-reference/data-types/int-uint.md).
|
||
|
||
Default value: 1000000000 nanoseconds.
|
||
|
||
See also:
|
||
|
||
- System table [trace\_log](../../operations/system-tables.md#system_tables-trace_log)
|
||
|
||
## allow\_introspection\_functions {#settings-allow_introspection_functions}
|
||
|
||
Enables of disables [introspections functions](../../sql-reference/functions/introspection.md) for query profiling.
|
||
|
||
Possible values:
|
||
|
||
- 1 — Introspection functions enabled.
|
||
- 0 — Introspection functions disabled.
|
||
|
||
Default value: 0.
|
||
|
||
**See Also**
|
||
|
||
- [Sampling Query Profiler](../optimizing-performance/sampling-query-profiler.md)
|
||
- System table [trace\_log](../../operations/system-tables.md#system_tables-trace_log)
|
||
|
||
## background\_pool\_size {#background_pool_size}
|
||
|
||
Задает количество потоков для выполнения фоновых операций в движках таблиц (например, слияния в таблицах c движком [MergeTree](../../engines/table-engines/mergetree-family/index.md)). Настройка применяется при запуске сервера ClickHouse и не может быть изменена во пользовательском сеансе. Настройка позволяет управлять загрузкой процессора и диска. Чем меньше пулл, тем ниже нагрузка на CPU и диск, при этом фоновые процессы замедляются, что может повлиять на скорость выполнения запроса.
|
||
|
||
Допустимые значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 16.
|
||
|
||
## background_buffer_flush_schedule_pool_size {#background_buffer_flush_schedule_pool_size}
|
||
|
||
Задает количество потоков для выполнения фонового сброса данных в таблицах с движком [Buffer](../../engines/table-engines/special/buffer.md). Настройка применяется при запуске сервера ClickHouse и не может быть изменена в пользовательском сеансе.
|
||
|
||
Допустимые значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 16.
|
||
|
||
## background_move_pool_size {#background_move_pool_size}
|
||
|
||
Задает количество потоков для фоновых перемещений кусков между дисками. Работает для таблиц с движком [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md#table_engine-mergetree-multiple-volumes). Настройка применяется при запуске сервера ClickHouse и не может быть изменена в пользовательском сеансе.
|
||
|
||
Допустимые значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 8.
|
||
|
||
## background_schedule_pool_size {#background_schedule_pool_size}
|
||
|
||
Задает количество потоков для выполнения фоновых задач. Работает для [реплицируемых](../../engines/table-engines/mergetree-family/replication.md) таблиц, стримов в [Kafka](../../engines/table-engines/integrations/kafka.md) и обновления IP адресов у записей во внутреннем [DNS кеше](../server-configuration-parameters/settings.md#server-settings-dns-cache-update-period). Настройка применяется при запуске сервера ClickHouse и не может быть изменена в пользовательском сеансе.
|
||
|
||
Допустимые значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 16.
|
||
|
||
## background_distributed_schedule_pool_size {#background_distributed_schedule_pool_size}
|
||
|
||
Задает количество потоков для выполнения фоновых задач. Работает для таблиц с движком [Distributed](../../engines/table-engines/special/distributed.md). Настройка применяется при запуске сервера ClickHouse и не может быть изменена в пользовательском сеансе.
|
||
|
||
Допустимые значения:
|
||
|
||
- Положительное целое число.
|
||
|
||
Значение по умолчанию: 16.
|
||
|
||
[Оригинальная статья](https://clickhouse.tech/docs/ru/operations/settings/settings/) <!--hide-->
|