mirror of
https://github.com/ClickHouse/ClickHouse.git
synced 2024-11-22 07:31:57 +00:00
Merge pull request #24764 from adevyatova/annadevyatova-DOCSUP-8347-non_replicated
DOCSUP-8347: Document the non_replicated_deduplication_window setting
This commit is contained in:
commit
fe49574e41
@ -123,6 +123,19 @@ The `Insert` command creates one or more blocks (parts). When inserting into Rep
|
|||||||
A large number of `replicated_deduplication_window` slows down `Inserts` because it needs to compare more entries.
|
A large number of `replicated_deduplication_window` slows down `Inserts` because it needs to compare more entries.
|
||||||
The hash sum is calculated from the composition of the field names and types and the data of the inserted part (stream of bytes).
|
The hash sum is calculated from the composition of the field names and types and the data of the inserted part (stream of bytes).
|
||||||
|
|
||||||
|
## non_replicated_deduplication_window {#non-replicated-deduplication-window}
|
||||||
|
|
||||||
|
The number of the most recently inserted blocks in the non-replicated [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md) table for which hash sums are stored to check for duplicates.
|
||||||
|
|
||||||
|
Possible values:
|
||||||
|
|
||||||
|
- Any positive integer.
|
||||||
|
- 0 (disable deduplication).
|
||||||
|
|
||||||
|
Default value: 0.
|
||||||
|
|
||||||
|
A deduplication mechanism is used, similar to replicated tables (see [replicated_deduplication_window](#replicated-deduplication-window) setting). The hash sums of the created parts are written to a local file on a disk.
|
||||||
|
|
||||||
## replicated_deduplication_window_seconds {#replicated-deduplication-window-seconds}
|
## replicated_deduplication_window_seconds {#replicated-deduplication-window-seconds}
|
||||||
|
|
||||||
The number of seconds after which the hash sums of the inserted blocks are removed from Zookeeper.
|
The number of seconds after which the hash sums of the inserted blocks are removed from Zookeeper.
|
||||||
|
@ -120,6 +120,19 @@ Eсли суммарное число активных кусков во все
|
|||||||
Команда `Insert` создает один или несколько блоков (кусков). При вставке в Replicated таблицы ClickHouse для [дедупликации вставок](../../engines/table-engines/mergetree-family/replication.md) записывает в Zookeeper хеш-суммы созданных кусков. Но хранятся хеш-суммы не всех кусков, а только последние `replicated_deduplication_window`. Наиболее старые хеш-суммы удаляются из Zookeeper.
|
Команда `Insert` создает один или несколько блоков (кусков). При вставке в Replicated таблицы ClickHouse для [дедупликации вставок](../../engines/table-engines/mergetree-family/replication.md) записывает в Zookeeper хеш-суммы созданных кусков. Но хранятся хеш-суммы не всех кусков, а только последние `replicated_deduplication_window`. Наиболее старые хеш-суммы удаляются из Zookeeper.
|
||||||
Большое число `replicated_deduplication_window` замедляет `Insert`-ы. Хеш-сумма рассчитывается от композиции имен и типов полей, а также данных вставленного куска (потока байт).
|
Большое число `replicated_deduplication_window` замедляет `Insert`-ы. Хеш-сумма рассчитывается от композиции имен и типов полей, а также данных вставленного куска (потока байт).
|
||||||
|
|
||||||
|
## non_replicated_deduplication_window {#non-replicated-deduplication-window}
|
||||||
|
|
||||||
|
Количество последних вставленных блоков в нереплицированной [MergeTree](../../engines/table-engines/mergetree-family/mergetree.md) таблице, для которых хранятся хеш-суммы для проверки дубликатов.
|
||||||
|
|
||||||
|
Возможные значения:
|
||||||
|
|
||||||
|
- Положительное целое число.
|
||||||
|
- 0 (дедупликация отключена).
|
||||||
|
|
||||||
|
Значение по умолчанию: 0.
|
||||||
|
|
||||||
|
Используется механизм дедупликации, аналогичный реплицированным таблицам (см. описание настройки [replicated_deduplication_window](#replicated-deduplication-window)). Хеш-суммы вставленных кусков записываются в локальный файл на диске.
|
||||||
|
|
||||||
## replicated_deduplication_window_seconds {#replicated-deduplication-window-seconds}
|
## replicated_deduplication_window_seconds {#replicated-deduplication-window-seconds}
|
||||||
|
|
||||||
Число секунд, после которых хеш-суммы вставленных блоков удаляются из Zookeeper.
|
Число секунд, после которых хеш-суммы вставленных блоков удаляются из Zookeeper.
|
||||||
|
Loading…
Reference in New Issue
Block a user