ClickHouse/dbms/include/DB/IO/AsynchronousWriteBuffer.h

97 lines
1.9 KiB
C
Raw Normal View History

#pragma once
#include <math.h>
#include <vector>
#include <Poco/SharedPtr.h>
#include <Poco/Net/NetException.h>
2015-10-05 00:52:29 +00:00
#include <common/threadpool.hpp>
#include <DB/IO/WriteBuffer.h>
namespace DB
{
using Poco::SharedPtr;
/** Записывает данные асинхронно с помощью двойной буферизации.
*/
class AsynchronousWriteBuffer : public WriteBuffer
{
private:
WriteBuffer & out; /// Основной буфер, отвечает за запись данных.
std::vector<char> memory; /// Кусок памяти для дублирования буфера.
boost::threadpool::pool pool; /// Для асинхронной записи данных.
bool started; /// Была ли запущена асинхронная запись данных.
/// Менять местами основной и дублирующий буферы.
void swapBuffers()
{
buffer().swap(out.buffer());
std::swap(position(), out.position());
}
void nextImpl()
{
if (!offset())
return;
if (started)
pool.wait();
else
started = true;
if (exception)
2015-10-05 05:40:27 +00:00
std::rethrow_exception(exception);
swapBuffers();
/// Данные будут записываться в отельном потоке.
pool.schedule([this] { thread(); });
}
public:
2014-04-08 07:58:53 +00:00
AsynchronousWriteBuffer(WriteBuffer & out_) : WriteBuffer(nullptr, 0), out(out_), memory(out.buffer().size()), pool(1), started(false)
{
/// Данные пишутся в дублирующий буфер.
set(&memory[0], memory.size());
}
~AsynchronousWriteBuffer()
{
2013-11-18 17:17:45 +00:00
try
{
if (started)
pool.wait();
2013-11-18 17:17:45 +00:00
swapBuffers();
out.next();
}
catch (...)
{
2013-11-18 19:18:03 +00:00
tryLogCurrentException(__PRETTY_FUNCTION__);
2013-11-18 17:17:45 +00:00
}
}
2015-10-05 05:40:27 +00:00
std::exception_ptr exception;
/// То, что выполняется в отдельном потоке
void thread()
{
try
{
out.next();
}
catch (...)
{
2015-10-05 05:40:27 +00:00
exception = std::current_exception();
}
}
};
}