2013-02-07 13:03:19 +00:00
|
|
|
|
#pragma once
|
|
|
|
|
|
|
|
|
|
#include <DB/Storages/StorageLog.h>
|
|
|
|
|
#include <DB/Interpreters/Context.h>
|
|
|
|
|
#include <statdaemons/CounterInFile.h>
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
namespace DB
|
|
|
|
|
{
|
|
|
|
|
|
|
|
|
|
/** Хранит несколько кусков данных. Читает из всех кусков.
|
|
|
|
|
* Запись не поддерживается. Для записи используются таблицы типа ChunkMerger.
|
|
|
|
|
* Таблицы типа ChunkRef могут ссылаться на отдельные куски внутри таблицы типа Chunks.
|
|
|
|
|
* Хранит количество ссылающихся таблиц ChunkRef и удаляет себя, когда оно становится нулевым.
|
2013-06-17 07:01:31 +00:00
|
|
|
|
* Сразу после создания CREATE-ом, счетчик ссылок имеет значение 1
|
|
|
|
|
* (потом, движок ChunkMerger добавляет ссылки от созданных ChunkRef-ов и затем вычитает 1).
|
2013-02-07 13:03:19 +00:00
|
|
|
|
*/
|
|
|
|
|
class StorageChunks : public StorageLog
|
|
|
|
|
{
|
|
|
|
|
public:
|
2013-02-08 17:06:29 +00:00
|
|
|
|
static StoragePtr create(const std::string & path_,
|
|
|
|
|
const std::string & name_,
|
|
|
|
|
const std::string & database_name_,
|
|
|
|
|
NamesAndTypesListPtr columns_,
|
2013-05-05 18:02:05 +00:00
|
|
|
|
Context & context_,
|
2013-02-08 17:06:29 +00:00
|
|
|
|
bool attach);
|
2013-02-07 13:03:19 +00:00
|
|
|
|
|
|
|
|
|
void addReference();
|
|
|
|
|
void removeReference();
|
|
|
|
|
|
|
|
|
|
std::string getName() const { return "Chunks"; }
|
|
|
|
|
|
|
|
|
|
BlockInputStreams readFromChunk(
|
|
|
|
|
const std::string & chunk_name,
|
|
|
|
|
const Names & column_names,
|
|
|
|
|
ASTPtr query,
|
|
|
|
|
const Settings & settings,
|
|
|
|
|
QueryProcessingStage::Enum & processed_stage,
|
|
|
|
|
size_t max_block_size = DEFAULT_BLOCK_SIZE,
|
|
|
|
|
unsigned threads = 1);
|
2014-01-16 14:52:13 +00:00
|
|
|
|
|
|
|
|
|
NameAndTypePair getColumn(const String &column_name) const;
|
|
|
|
|
bool hasColumn(const String &column_name) const;
|
|
|
|
|
|
2013-02-07 13:03:19 +00:00
|
|
|
|
BlockOutputStreamPtr writeToNewChunk(
|
|
|
|
|
const std::string & chunk_name);
|
|
|
|
|
|
|
|
|
|
/// Если бы запись была разрешена, непонятно, как назвать новый чанк.
|
|
|
|
|
BlockOutputStreamPtr write(
|
|
|
|
|
ASTPtr query)
|
|
|
|
|
{
|
|
|
|
|
throw Exception("Table doesn't support writing", ErrorCodes::NOT_IMPLEMENTED);
|
|
|
|
|
}
|
|
|
|
|
|
|
|
|
|
/// Переименование испортило бы целостность количества ссылок из таблиц ChunkRef.
|
|
|
|
|
void rename(const String & new_path_to_db, const String & new_name)
|
|
|
|
|
{
|
|
|
|
|
throw Exception("Table doesn't support renaming", ErrorCodes::NOT_IMPLEMENTED);
|
|
|
|
|
}
|
2014-01-17 15:19:20 +00:00
|
|
|
|
|
|
|
|
|
protected:
|
|
|
|
|
/// Виртуальная функция из StorageLog
|
|
|
|
|
/// По номеру засечки получить имя таблицы, из которой идет чтение и номер последней засечки из этой таблицы.
|
|
|
|
|
std::pair<String, size_t> getTableFromMark(size_t mark) const;
|
|
|
|
|
|
2013-02-07 13:03:19 +00:00
|
|
|
|
private:
|
2013-06-17 07:01:31 +00:00
|
|
|
|
/// Имя чанка - номер (в последовательности, как чанки записаны в таблице).
|
2013-02-07 13:03:19 +00:00
|
|
|
|
typedef std::map<String, size_t> ChunkIndices;
|
2013-06-17 07:01:31 +00:00
|
|
|
|
/// Номер чанка - засечка, с которой начинаются данные таблицы.
|
|
|
|
|
typedef std::vector<size_t> ChunkNumToMark;
|
2014-01-17 15:19:20 +00:00
|
|
|
|
/// Номер чанка - имя чанка.
|
|
|
|
|
typedef std::vector<String> ChunkNumToChunkName;
|
|
|
|
|
|
2013-02-07 13:03:19 +00:00
|
|
|
|
String database_name;
|
|
|
|
|
|
2013-06-17 07:01:31 +00:00
|
|
|
|
ChunkNumToMark chunk_num_to_marks;
|
2013-02-07 13:03:19 +00:00
|
|
|
|
ChunkIndices chunk_indices;
|
2014-01-17 15:19:20 +00:00
|
|
|
|
ChunkNumToChunkName chunk_names;
|
2013-02-07 13:03:19 +00:00
|
|
|
|
|
|
|
|
|
CounterInFile reference_counter;
|
2013-05-05 18:02:05 +00:00
|
|
|
|
Context & context;
|
2013-02-07 13:03:19 +00:00
|
|
|
|
|
2013-02-11 12:28:43 +00:00
|
|
|
|
Logger * log;
|
|
|
|
|
|
2013-02-08 17:06:29 +00:00
|
|
|
|
StorageChunks(const std::string & path_,
|
|
|
|
|
const std::string & name_,
|
|
|
|
|
const std::string & database_name_,
|
|
|
|
|
NamesAndTypesListPtr columns_,
|
|
|
|
|
Context & context_,
|
|
|
|
|
bool attach);
|
2013-02-07 13:03:19 +00:00
|
|
|
|
|
|
|
|
|
void dropThis();
|
|
|
|
|
|
|
|
|
|
void loadIndex();
|
2013-02-11 11:42:36 +00:00
|
|
|
|
void appendChunkToIndex(const std::string & chunk_name, size_t mark);
|
2013-02-07 13:03:19 +00:00
|
|
|
|
};
|
|
|
|
|
|
|
|
|
|
}
|