#pragma once #include #include #include #include #include namespace DB { /// Cluster содержит пулы соединений до каждого из узлов /// С локальными узлами соединение не устанавливается, а выполяется запрос напрямую. /// Поэтому храним только количество локальных узлов /// В конфиге кластер включает в себя узлы или class Cluster { public: Cluster(const Settings & settings, const String & cluster_name); /// Построить кластер по именам шардов и реплик. Локальные обрабатываются так же как удаленные. Cluster(const Settings & settings, const std::vector> & names, const String & username, const String & password); Cluster(const Cluster &) = delete; Cluster & operator=(const Cluster &) = delete; /// используеться для выставления ограничения на размер таймаута static Poco::Timespan saturate(const Poco::Timespan & v, const Poco::Timespan & limit); public: struct Address { /** In configuration file, * addresses are located either in elements: * * example01-01-1 * 9000 * * * ... * or in and inside in elements: * * * example01-01-1 * 9000 * * * */ Poco::Net::SocketAddress resolved_address; String host_name; UInt16 port; String user; String password; String default_database; /// this database is selected when no database is specified for Distributed table UInt32 replica_num; Address(const String & config_prefix); Address(const String & host_port_, const String & user_, const String & password_); }; using Addresses = std::vector
; using AddressesWithFailover = std::vector; struct ShardInfo { public: bool isLocal() const { return !local_addresses.empty(); } bool hasRemoteConnections() const { return pool.get() != nullptr; } size_t getLocalNodeCount() const { return local_addresses.size(); } public: /// contains names of directories for asynchronous write to StorageDistributed std::vector dir_names; UInt32 shard_num; /// Номер шарда, начиная с 1. int weight; Addresses local_addresses; mutable ConnectionPoolPtr pool; }; using ShardsInfo = std::vector; String getHashOfAddresses() const { return hash_of_addresses; } const ShardsInfo & getShardsInfo() const { return shards_info; } const Addresses & getShardsAddresses() const { return addresses; } const AddressesWithFailover & getShardsWithFailoverAddresses() const { return addresses_with_failover; } const ShardInfo & getAnyShardInfo() const { if (shards_info.empty()) throw Exception("Cluster is empty", ErrorCodes::LOGICAL_ERROR); return shards_info.front(); } /// Количество удалённых шардов. size_t getRemoteShardCount() const { return remote_shard_count; } /// Количество узлов clickhouse сервера, расположенных локально /// к локальным узлам обращаемся напрямую. size_t getLocalShardCount() const { return local_shard_count; } /// Количество всех шардов. size_t getShardCount() const { return shards_info.size(); } /// Получить подкластер, состоящий из одного шарда - index по счёту (с нуля) шарда данного кластера. std::unique_ptr getClusterWithSingleShard(size_t index) const; private: using SlotToShard = std::vector; SlotToShard slot_to_shard; public: const SlotToShard & getSlotToShard() const { return slot_to_shard; } private: void initMisc(); /// Hash list of addresses and ports. /// We need it in order to be able to perform resharding requests /// on tables that have the distributed engine. void calculateHashOfAddresses(); /// Для реализации getClusterWithSingleShard. Cluster(const Cluster & from, size_t index); String hash_of_addresses; /// Описание шардов кластера. ShardsInfo shards_info; /// Любой удалённый шард. ShardInfo * any_remote_shard_info = nullptr; /// Непустым является либо addresses, либо addresses_with_failover. /// Размер и порядок элементов в соответствующем массиве соответствует shards_info. /// Массив шардов. Каждый шард - адреса одного сервера. Addresses addresses; /// Массив шардов. Для каждого шарда - массив адресов реплик (серверов, считающихся идентичными). AddressesWithFailover addresses_with_failover; size_t remote_shard_count = 0; size_t local_shard_count = 0; }; class Clusters { public: Clusters(const Settings & settings, const String & config_name = "remote_servers"); Clusters(const Clusters &) = delete; Clusters & operator=(const Clusters &) = delete; public: using Impl = std::map; public: Impl impl; }; }