ClickHouse/dbms/include/DB/Storages/StorageDistributed.h

128 lines
4.8 KiB
C
Raw Normal View History

2012-05-21 20:38:34 +00:00
#pragma once
#include <DB/Storages/IStorage.h>
#include <DB/Client/ConnectionPool.h>
#include <DB/Client/ConnectionPoolWithFailover.h>
2012-07-26 20:16:57 +00:00
#include <DB/Interpreters/Settings.h>
2013-09-23 12:01:19 +00:00
#include <DB/Interpreters/Context.h>
2012-05-21 20:38:34 +00:00
namespace DB
{
/** Распределённая таблица, находящаяся на нескольких серверах.
* Использует данные заданной БД и таблицы на каждом сервере.
2012-05-30 04:45:49 +00:00
*
* Можно передать один адрес, а не несколько.
* В этом случае, таблицу можно считать удалённой, а не распределённой.
2012-05-21 20:38:34 +00:00
*/
class StorageDistributed : public IStorage
{
public:
2013-08-10 09:04:45 +00:00
struct Address
{
Poco::Net::SocketAddress host_port;
String user;
String password;
Address(const Poco::Net::SocketAddress & host_port_, const String & user_, const String & password_)
: host_port(host_port_), user(user_), password(password_) {}
};
/// Массив шардов. Каждый шард - адреса одного сервера.
2013-08-10 09:04:45 +00:00
typedef std::vector<Address> Addresses;
/// Массив шардов. Для каждого шарда - массив адресов реплик (серверов, считающихся идентичными).
typedef std::vector<Addresses> AddressesWithFailover;
static StoragePtr create(
2012-05-21 20:38:34 +00:00
const std::string & name_, /// Имя таблицы.
NamesAndTypesListPtr columns_, /// Список столбцов.
const Addresses & addresses, /// Адреса удалённых серверов.
2012-05-21 20:38:34 +00:00
const String & remote_database_, /// БД на удалённых серверах.
const String & remote_table_, /// Имя таблицы на удалённых серверах.
2012-08-02 17:33:31 +00:00
const DataTypeFactory & data_type_factory_,
const Settings & settings,
2013-09-23 12:01:19 +00:00
const Context & context_,
const String & sign_column_name_ = "");
/// Использовать реплики для отказоустойчивости.
static StoragePtr create(
const std::string & name_, /// Имя таблицы.
NamesAndTypesListPtr columns_, /// Список столбцов.
const AddressesWithFailover & addresses, /// Адреса удалённых серверов с учётом реплик.
const String & remote_database_, /// БД на удалённых серверах.
const String & remote_table_, /// Имя таблицы на удалённых серверах.
const DataTypeFactory & data_type_factory_,
const Settings & settings,
2013-09-23 12:01:19 +00:00
const Context & context_,
const String & sign_column_name_ = "");
2012-05-21 20:38:34 +00:00
std::string getName() const { return "Distributed"; }
std::string getTableName() const { return name; }
std::string getSignColumnName() const { return sign_column_name; };
2012-12-15 04:39:13 +00:00
bool supportsSampling() const { return true; }
bool supportsFinal() const { return !sign_column_name.empty(); }
2012-05-21 20:38:34 +00:00
const NamesAndTypesList & getColumnsList() const { return *columns; }
bool isRemote() const { return true; }
2012-05-21 20:38:34 +00:00
BlockInputStreams read(
const Names & column_names,
ASTPtr query,
const Settings & settings,
2012-05-22 18:32:45 +00:00
QueryProcessingStage::Enum & processed_stage,
2012-05-21 20:38:34 +00:00
size_t max_block_size = DEFAULT_BLOCK_SIZE,
2012-05-30 04:45:49 +00:00
unsigned threads = 1);
2012-05-21 20:38:34 +00:00
void dropImpl() {}
2012-06-18 06:19:13 +00:00
void rename(const String & new_path_to_db, const String & new_name) { name = new_name; }
2013-09-23 12:01:19 +00:00
/// в подтаблицах добавлять и удалять столбы нужно вручную
/// структура подтаблиц не проверяется
void alter(const ASTAlterQuery::Parameters &params);
2012-05-21 20:38:34 +00:00
private:
StorageDistributed(
const std::string & name_,
NamesAndTypesListPtr columns_,
const Addresses & addresses,
const String & remote_database_,
const String & remote_table_,
const DataTypeFactory & data_type_factory_,
const Settings & settings,
2013-09-23 12:01:19 +00:00
const Context & context_,
const String & sign_column_name_ = "");
/// Использовать реплики для отказоустойчивости.
StorageDistributed(
const std::string & name_,
NamesAndTypesListPtr columns_,
const AddressesWithFailover & addresses,
const String & remote_database_,
const String & remote_table_,
const DataTypeFactory & data_type_factory_,
const Settings & settings,
2013-09-23 12:01:19 +00:00
const Context & context_,
const String & sign_column_name_ = "");
bool checkLocalReplics(const Address & address);
2012-06-18 06:19:13 +00:00
String name;
2012-05-21 20:38:34 +00:00
NamesAndTypesListPtr columns;
String remote_database;
String remote_table;
2012-08-02 17:33:31 +00:00
const DataTypeFactory & data_type_factory;
String sign_column_name;
2012-05-21 20:38:34 +00:00
2013-09-23 12:01:19 +00:00
const Context & context;
2012-05-21 20:38:34 +00:00
/// Соединения с удалёнными серверами.
ConnectionPools pools;
/// количество реплик clickhouse сервера, расположенных локально
/// к локальным репликам обращаемся напрямую
size_t local_replics_num;
2012-05-21 20:38:34 +00:00
};
}