#pragma once #include #include #include #include #include #include #include #include #include #include #include #include #include "DatabaseDropper.h" #include namespace DB { class Context; /** Хранилище. Отвечает за: * - хранение данных таблицы; * - определение, в каком файле (или не файле) хранятся данные; * - поиск данных и обновление данных; * - структура хранения данных (сжатие, etc.) * - конкуррентный доступ к данным (блокировки, etc.) */ class IStorage : private boost::noncopyable { public: /// Основное имя типа таблицы (например, StorageWithoutKey). virtual std::string getName() const = 0; /// Имя самой таблицы (например, hits) virtual std::string getTableName() const = 0; /** Получить список имён и типов столбцов таблицы. */ virtual const NamesAndTypesList & getColumnsList() const = 0; const DataTypePtr getDataTypeByName(const String & column_name) const; /** То же самое, но в виде блока-образца. */ Block getSampleBlock() const; /** Возвращает true, если хранилище получает данные с удалённого сервера или серверов. */ virtual bool isRemote() const { return false; } /** Возвращает true, если хранилище поддерживает запросы с секцией SAMPLE. */ virtual bool supportsSampling() const { return false; } /** Возвращает true, если хранилище поддерживает запросы с секцией FINAL. */ virtual bool supportsFinal() const { return false; } /** Читать набор столбцов из таблицы. * Принимает список столбцов, которых нужно прочитать, а также описание запроса, * из которого может быть извлечена информация о том, каким способом извлекать данные * (индексы, блокировки и т. п.) * Возвращает поток с помощью которого можно последовательно читать данные * или несколько потоков для параллельного чтения данных. * Также в processed_stage записывается, до какой стадии запрос был обработан. * (Обычно функция только читает столбцы из списка, но в других случаях, * например, запрос может быть частично обработан на удалённом сервере.) * * settings - настройки на один запрос. * Обычно Storage не заботится об этих настройках, так как они применяются в интерпретаторе. * Но, например, при распределённой обработке запроса, настройки передаются на удалённый сервер. * * threads - рекомендация, сколько потоков возвращать, * если хранилище может возвращать разное количество потоков. */ virtual BlockInputStreams read( const Names & column_names, ASTPtr query, const Settings & settings, QueryProcessingStage::Enum & processed_stage, size_t max_block_size = DEFAULT_BLOCK_SIZE, unsigned threads = 1) { throw Exception("Method read is not supported by storage " + getName(), ErrorCodes::NOT_IMPLEMENTED); } /** Пишет данные в таблицу. * Принимает описание запроса, в котором может содержаться информация о методе записи данных. * Возвращает объект, с помощью которого можно последовательно писать данные. */ virtual BlockOutputStreamPtr write( ASTPtr query) { throw Exception("Method write is not supported by storage " + getName(), ErrorCodes::NOT_IMPLEMENTED); } /** Удалить данные таблицы. После вызова этого метода, использование объекта некорректно (его можно лишь уничтожить). */ void drop() { drop_on_destroy = true; } /** Вызывается перед удалением директории с данными и вызовом деструктора. * Если не требуется никаких действий, кроме удаления директории с данными, этот метод можно оставить пустым. */ virtual void dropImpl() {} /** Переименовать таблицу. * Переименование имени в файле с метаданными, имени в списке таблиц в оперативке, осуществляется отдельно. * В этой функции нужно переименовать директорию с данными, если она есть. */ virtual void rename(const String & new_path_to_db, const String & new_name) { throw Exception("Method rename is not supported by storage " + getName(), ErrorCodes::NOT_IMPLEMENTED); } /** ALTER таблицы в виде изменения столбцов, не затрагивающий изменение Storage или его параметров. * (ALTER, затрагивающий изменение движка, делается внешним кодом, путём копирования данных.) */ virtual void alter(const ASTAlterQuery::Parameters & params) { throw Exception("Method alter is not supported by storage " + getName(), ErrorCodes::NOT_IMPLEMENTED); } /** Выполнить какую-либо фоновую работу. Например, объединение кусков в таблице типа MergeTree. * Возвращает - была ли выполнена какая-либо работа. */ virtual bool optimize() { throw Exception("Method optimize is not supported by storage " + getName(), ErrorCodes::NOT_IMPLEMENTED); } /** Получить запрос CREATE TABLE, который описывает данную таблицу. * Обычно этот запрос хранится и достаётся из .sql файла из директории с метаданными. * Этот метод используется и имеет смысл только если для таблицы не создаётся .sql файл * - то есть, только для таблиц, которые создаются не пользователем, а самой системой - например, для таблиц типа ChunkRef. */ virtual ASTPtr getCustomCreateQuery(const Context & context) const { throw Exception("Method getCustomCreateQuery is not supported by storage " + getName(), ErrorCodes::NOT_IMPLEMENTED); } /** Если при уничтожении объекта надо сделать какую-то сложную работу - сделать её заранее. * Например, если таблица содержит какие-нибудь потоки для фоновой работы - попросить их завершиться и дождаться завершения. * По-умолчанию - ничего не делать. */ virtual void shutdown() {} virtual ~IStorage() {} /** Проверить, что все запрошенные имена есть в таблице и заданы корректно. * (список имён не пустой и имена не повторяются) */ void check(const Names & column_names) const; /** Проверить, что блок с данными для записи содержит все столбцы таблицы с правильными типами, * содержит только столбцы таблицы, и все столбцы различны. * Если need_all, еще проверяет, что все столбцы таблицы есть в блоке. */ void check(const Block & block, bool need_all = false) const; /** Возвращает владеющий указатель на себя. */ StoragePtr thisPtr() { if (!this_ptr.lock()) { boost::shared_ptr p(new StoragePtr::Wrapper(this)); this_ptr = p; return StoragePtr(this_ptr); } else { return StoragePtr(this_ptr); } } /** Не дает удалить БД до удаления таблицы. Присваивается перед удалением таблицы или БД. */ DatabaseDropperPtr database_to_drop; bool drop_on_destroy; /** Директория с данными. Будет удалена после удаления таблицы (после вызова dropImpl). */ std::string path_to_remove_on_drop; protected: IStorage() : drop_on_destroy(false) {} /// реализация alter, модифицирующая список столбцов. void alterColumns(const ASTAlterQuery::Parameters & params, NamesAndTypesListPtr & columns, const Context & context) const; private: boost::weak_ptr this_ptr; }; typedef std::vector StorageVector; }