#pragma once #include #include #include #include #include namespace DB { /** Соединяет несколько сортированных потоков в один. */ class MergingSortedBlockInputStream : public IProfilingBlockInputStream { public: /// limit - если не 0, то можно выдать только первые limit строк в сортированном порядке. MergingSortedBlockInputStream(BlockInputStreams inputs_, const SortDescription & description_, size_t max_block_size_, size_t limit_ = 0) : description(description_), max_block_size(max_block_size_), limit(limit_), total_merged_rows(0), first(true), has_collation(false), num_columns(0), source_blocks(inputs_.size()), cursors(inputs_.size()), log(&Logger::get("MergingSortedBlockInputStream")) { children.insert(children.end(), inputs_.begin(), inputs_.end()); } String getName() const { return "MergingSortedBlockInputStream"; } String getID() const { std::stringstream res; res << "MergingSorted("; Strings children_ids(children.size()); for (size_t i = 0; i < children.size(); ++i) children_ids[i] = children[i]->getID(); /// Порядок не имеет значения. std::sort(children_ids.begin(), children_ids.end()); for (size_t i = 0; i < children_ids.size(); ++i) res << (i == 0 ? "" : ", ") << children_ids[i]; for (size_t i = 0; i < description.size(); ++i) res << ", " << description[i].getID(); res << ")"; return res.str(); } protected: Block readImpl(); void readSuffixImpl(); /// Инициализирует очередь и следующий блок результата. void init(Block & merged_block, ColumnPlainPtrs & merged_columns); /// Достаёт из источника, соответствующего current следующий блок. template void fetchNextBlock(const TSortCursor & current, std::priority_queue & queue); SortDescription description; size_t max_block_size; size_t limit; size_t total_merged_rows; bool first; bool has_collation; /// Текущие сливаемые блоки. size_t num_columns; Blocks source_blocks; typedef std::vector CursorImpls; CursorImpls cursors; typedef std::priority_queue Queue; Queue queue; typedef std::priority_queue QueueWithCollation; QueueWithCollation queue_with_collation; /// Эти методы используются в Collapsing/Summing/Aggregating SortedBlockInputStream-ах. /// Сохранить строчку, на которую указывает cursor, в row. template void setRow(Row & row, TSortCursor & cursor) { for (size_t i = 0; i < num_columns; ++i) cursor->all_columns[i]->get(cursor->pos, row[i]); } /// Сохранить первичный ключ, на который указывает cursor в row. template void setPrimaryKey(Row & row, TSortCursor & cursor) { for (size_t i = 0; i < cursor->sort_columns_size; ++i) cursor->sort_columns[i]->get(cursor->pos, row[i]); } private: /** Делаем поддержку двух разных курсоров - с Collation и без. * Шаблоны используем вместо полиморфных SortCursor'ов и вызовов виртуальных функций. */ template void initQueue(std::priority_queue & queue); template void merge(Block & merged_block, ColumnPlainPtrs & merged_columns, std::priority_queue & queue); Logger * log; }; }