2015-03-04 10:47:53 +00:00
|
|
|
#pragma once
|
|
|
|
|
2015-03-30 15:39:55 +00:00
|
|
|
#include <DB/IO/WriteBufferFromFileBase.h>
|
2015-03-04 10:47:53 +00:00
|
|
|
#include <DB/IO/WriteBuffer.h>
|
|
|
|
#include <DB/IO/BufferWithOwnMemory.h>
|
2015-03-19 10:06:11 +00:00
|
|
|
#include <DB/Core/Defines.h>
|
2015-10-05 01:11:12 +00:00
|
|
|
#include <DB/Common/AIO.h>
|
2016-01-21 01:47:28 +00:00
|
|
|
#include <DB/Common/CurrentMetrics.h>
|
2015-03-04 10:47:53 +00:00
|
|
|
|
2015-03-13 11:02:43 +00:00
|
|
|
#include <string>
|
2015-03-05 14:21:55 +00:00
|
|
|
#include <unistd.h>
|
|
|
|
#include <fcntl.h>
|
|
|
|
|
2016-10-24 04:06:27 +00:00
|
|
|
|
|
|
|
namespace CurrentMetrics
|
|
|
|
{
|
|
|
|
extern const Metric OpenFileForWrite;
|
|
|
|
}
|
|
|
|
|
2015-03-04 10:47:53 +00:00
|
|
|
namespace DB
|
|
|
|
{
|
|
|
|
|
2015-03-10 17:14:07 +00:00
|
|
|
/** Класс для асинхронной записи данных.
|
|
|
|
*/
|
2015-03-30 15:39:55 +00:00
|
|
|
class WriteBufferAIO : public WriteBufferFromFileBase
|
2015-03-04 10:47:53 +00:00
|
|
|
{
|
|
|
|
public:
|
|
|
|
WriteBufferAIO(const std::string & filename_, size_t buffer_size_ = DBMS_DEFAULT_BUFFER_SIZE, int flags_ = -1, mode_t mode_ = 0666,
|
|
|
|
char * existing_memory_ = nullptr);
|
|
|
|
~WriteBufferAIO() override;
|
|
|
|
|
|
|
|
WriteBufferAIO(const WriteBufferAIO &) = delete;
|
|
|
|
WriteBufferAIO & operator=(const WriteBufferAIO &) = delete;
|
|
|
|
|
2015-03-30 15:39:55 +00:00
|
|
|
off_t getPositionInFile() override;
|
|
|
|
void sync() override;
|
2015-04-14 11:35:10 +00:00
|
|
|
std::string getFileName() const override { return filename; }
|
|
|
|
int getFD() const override { return fd; }
|
2015-03-04 10:47:53 +00:00
|
|
|
|
|
|
|
private:
|
2015-04-07 11:43:23 +00:00
|
|
|
void nextImpl() override;
|
2015-04-03 13:45:44 +00:00
|
|
|
off_t doSeek(off_t off, int whence) override;
|
2015-04-30 15:04:42 +00:00
|
|
|
void doTruncate(off_t length) override;
|
2016-10-24 04:06:27 +00:00
|
|
|
|
2015-03-13 11:46:04 +00:00
|
|
|
/// Если в буфере ещё остались данные - запишем их.
|
|
|
|
void flush();
|
2015-03-13 11:02:43 +00:00
|
|
|
/// Ждать окончания текущей асинхронной задачи.
|
2015-04-06 23:21:20 +00:00
|
|
|
bool waitForAIOCompletion();
|
2015-04-07 11:43:23 +00:00
|
|
|
/// Подготовить асинхронный запрос.
|
2015-04-06 22:33:52 +00:00
|
|
|
void prepare();
|
|
|
|
///
|
|
|
|
void finalize();
|
2015-03-04 10:47:53 +00:00
|
|
|
|
|
|
|
private:
|
2015-03-10 17:14:07 +00:00
|
|
|
/// Буфер для асинхронных операций записи данных.
|
|
|
|
BufferWithOwnMemory<WriteBuffer> flush_buffer;
|
2015-03-10 11:43:30 +00:00
|
|
|
|
2015-03-30 09:59:16 +00:00
|
|
|
/// Описание асинхронного запроса на запись.
|
2015-05-13 21:28:28 +00:00
|
|
|
iocb request = { 0 };
|
2015-03-16 10:49:27 +00:00
|
|
|
std::vector<iocb *> request_ptrs{&request};
|
|
|
|
std::vector<io_event> events{1};
|
2015-03-10 11:43:30 +00:00
|
|
|
|
2015-03-16 10:41:58 +00:00
|
|
|
AIOContext aio_context{1};
|
2015-03-11 14:32:32 +00:00
|
|
|
|
|
|
|
const std::string filename;
|
|
|
|
|
2015-03-30 09:59:16 +00:00
|
|
|
/// Количество байтов, которые будут записаны на диск.
|
2015-03-23 09:43:06 +00:00
|
|
|
off_t bytes_to_write = 0;
|
2015-04-15 08:45:22 +00:00
|
|
|
/// Количество записанных байт при последнем запросе.
|
2015-04-07 11:43:23 +00:00
|
|
|
off_t bytes_written = 0;
|
2015-03-30 09:59:16 +00:00
|
|
|
/// Количество нулевых байтов, которые надо отрезать c конца файла
|
|
|
|
/// после завершения операции записи данных.
|
2015-03-25 16:44:30 +00:00
|
|
|
off_t truncation_count = 0;
|
2015-03-20 16:58:57 +00:00
|
|
|
|
2015-03-25 14:58:23 +00:00
|
|
|
/// Текущая позиция в файле.
|
2015-03-11 17:27:34 +00:00
|
|
|
off_t pos_in_file = 0;
|
2015-03-25 14:58:23 +00:00
|
|
|
/// Максимальная достигнутая позиция в файле.
|
|
|
|
off_t max_pos_in_file = 0;
|
|
|
|
|
2015-04-07 11:43:23 +00:00
|
|
|
/// Начальная позиция выровненного региона диска, в который записываются данные.
|
2015-04-06 22:33:52 +00:00
|
|
|
off_t region_aligned_begin = 0;
|
2015-04-07 11:43:23 +00:00
|
|
|
/// Размер выровненного региона диска.
|
|
|
|
size_t region_aligned_size = 0;
|
2015-04-06 22:33:52 +00:00
|
|
|
|
2015-03-25 14:58:23 +00:00
|
|
|
/// Файловый дескриптор для записи.
|
2015-03-11 14:32:32 +00:00
|
|
|
int fd = -1;
|
2015-03-10 11:43:30 +00:00
|
|
|
|
2015-04-07 11:43:23 +00:00
|
|
|
/// Буфер данных, которые хотим записать на диск.
|
|
|
|
Position buffer_begin = nullptr;
|
|
|
|
|
2015-03-30 09:59:16 +00:00
|
|
|
/// Асинхронная операция записи ещё не завершилась?
|
2015-03-04 10:47:53 +00:00
|
|
|
bool is_pending_write = false;
|
2015-04-07 12:08:08 +00:00
|
|
|
/// Асинхронная операция завершилась неудачно?
|
|
|
|
bool aio_failed = false;
|
2016-01-21 01:47:28 +00:00
|
|
|
|
|
|
|
CurrentMetrics::Increment metric_increment{CurrentMetrics::OpenFileForWrite};
|
2015-03-04 10:47:53 +00:00
|
|
|
};
|
|
|
|
|
|
|
|
}
|