2018-12-06 12:15:49 +00:00
|
|
|
|
# ClickHouse的独特功能
|
|
|
|
|
|
|
|
|
|
|
|
## 真正的列式数据库管理系统
|
|
|
|
|
|
|
|
|
|
|
|
在一个真正的列式数据库管理系统中，除了数据本身外不应该存在其他额外的数据。这意味着为了避免在值旁边存储它们的长度“number”，你必须支持固定长度数值类型。例如，10亿个UInt8类型的数据在未压缩的情况下大约消耗1GB左右的空间，如果不是这样的话，这将对CPU的使用产生强烈影响。即使是在未压缩的情况下，紧凑的存储数据也是非常重要的，因为解压缩的速度主要取决于未压缩数据的大小。
|
|
|
|
|
|
|
|
|
|
|
|
这是非常值得注意的，因为在一些其他系统中也可以将不同的列分别进行存储，但由于对其他场景进行的优化，使其无法有效的处理分析查询。例如： HBase，BigTable，Cassandra，HyperTable。在这些系统中，你可以得到每秒数十万的吞吐能力，但是无法得到每秒几亿行的吞吐能力。
|
|
|
|
|
|
|
|
|
|
|
|
需要说明的是，ClickHouse不单单是一个数据库， 它是一个数据库管理系统。因为它允许在运行时创建表和数据库、加载数据和运行查询，而无需重新配置或重启服务。
|
|
|
|
|
|
|
|
|
|
|
|
## 数据压缩
|
|
|
|
|
|
|
|
|
|
|
|
在一些列式数据库管理系统中(例如：InfiniDB CE and MonetDB) 不是用数据压缩。但是, 数据压缩在实现优异的存储系统中确实起着关键的作用。
|
|
|
|
|
|
|
|
|
|
|
|
## 数据的磁盘存储
|
|
|
|
|
|
|
|
|
|
|
|
许多的列式数据库(如 SAP HANA, Google PowerDrill)只能在内存中工作，这种方式会造成比实际更多的设备预算。ClickHouse被设计用于工作在传统磁盘上的系统，它提供每GB更低的存储成本，但如果有可以使用SSD和内存，它也会合理的利用这些资源。
|
|
|
|
|
|
|
|
|
|
|
|
## 多核心并行处理
|
|
|
|
|
|
|
|
|
|
|
|
大型查询可以以很自然的方式在ClickHouse中进行并行化处理，以此来使用当前服务器上可用的所有资源。
|
|
|
|
|
|
|
|
|
|
|
|
## 多服务器分布式处理
|
|
|
|
|
|
|
|
|
|
|
|
上面提到的列式数据库管理系统中，几乎没有一个支持分布式的查询处理。
|
|
|
|
|
|
在ClickHouse中，数据可以保存在不同的shard上，每一个shard都由一组用于容错的replica组成，查询可以并行的在所有shard上进行处理。这些对用户来说是透明的
|
|
|
|
|
|
|
|
|
|
|
|
## 支持SQL
|
|
|
|
|
|
|
|
|
|
|
|
ClickHouse支持基于SQL的查询语言，该语言大部分情况下是与SQL标准兼容的。
|
|
|
|
|
|
支持的查询包括 GROUP BY，ORDER BY，IN，JOIN以及非相关子查询。
|
|
|
|
|
|
不支持窗口函数和相关子查询。
|
|
|
|
|
|
|
|
|
|
|
|
## 向量引擎
|
|
|
|
|
|
|
|
|
|
|
|
为了高效的使用CPU，数据不仅仅按列存储，同时还按向量(列的一部分)进行处理。
|
|
|
|
|
|
|
|
|
|
|
|
## 实时的数据更新
|
|
|
|
|
|
|
|
|
|
|
|
ClickHouse支持在表中定义主键。为了使查询能够快速在主键中进行范围查找，数据总是以增量的方式有序的存储在MergeTree中。因此，数据可以持续不断高效的写入到表中，并且写入的过程中不会存在任何加锁的行为。
|
|
|
|
|
|
|
|
|
|
|
|
## 索引
|
|
|
|
|
|
|
|
|
|
|
|
按照主键对数据进行排序，这将帮助ClickHouse以几十毫秒的低延迟对数据进行特定值查找或范围查找。
|
|
|
|
|
|
|
|
|
|
|
|
## 适合在线查询
|
|
|
|
|
|
|
|
|
|
|
|
在线查询意味着在没有对数据做任何预处理的情况下以极低的延迟处理查询并将结果加载到用户的页面中。
|
|
|
|
|
|
|
|
|
|
|
|
## 支持近似计算
|
|
|
|
|
|
|
|
|
|
|
|
ClickHouse提供各种各样在允许牺牲数据精度的情况下对查询进行加速的方法：
|
|
|
|
|
|
|
|
|
|
|
|
1. 用于近似计算的各类聚合函数，如：distinct values, medians, quantiles
|
|
|
|
|
|
2. 基于数据的部分样本进行近似查询。这时，仅会从磁盘检索少部分比例的数据。
|
|
|
|
|
|
3. 不使用全部的聚合条件，通过随机选择有限个数据聚合条件进行聚合。这在数据聚合条件满足某些分布条件下，在提供相当准确的聚合结果的同时降低了计算资源的使用。
|
|
|
|
|
|
|
|
|
|
|
|
## 支持数据复制和数据完整性
|
|
|
|
|
|
|
|
|
|
|
|
ClickHouse使用异步的多主复制技术。当数据被写入任何一个可用副本后，系统会在后台将数据分发给其他副本，以保证系统在不同副本上保持相同的数据。在大多数情况下ClickHouse能在故障后自动恢复，在一些复杂的情况下需要少量的手动恢复。
|
|
|
|
|
|
|
2018-12-25 15:25:43 +00:00
|
|
|
|
更多信息，参见 [数据复制](../operations/table_engines/replication.md)。
|
2018-12-06 12:15:49 +00:00
|
|
|
|
|
|
|
|
|
|
[来源文章](https://clickhouse.yandex/docs/en/introduction/distinctive_features/) <!--hide-->
|
