ClickHouse/dbms/include/DB/Interpreters/Dictionaries.h

173 lines
4.1 KiB
C
Raw Normal View History

2012-12-19 20:15:15 +00:00
#pragma once
#include <thread>
2012-12-19 20:15:15 +00:00
#include <Yandex/MultiVersion.h>
#include <Yandex/logger_useful.h>
#include <statdaemons/RegionsHierarchies.h>
2012-12-19 20:15:15 +00:00
#include <statdaemons/TechDataHierarchy.h>
#include <statdaemons/RegionsNames.h>
2012-12-19 20:15:15 +00:00
namespace DB
{
class Context;
2012-12-19 20:15:15 +00:00
/// Словари Метрики, которые могут использоваться в функциях.
class Dictionaries
{
private:
MultiVersion<RegionsHierarchies> regions_hierarchies;
MultiVersion<TechDataHierarchy> tech_data_hierarchy;
MultiVersion<RegionsNames> regions_names;
2012-12-19 20:15:15 +00:00
/// Периодичность обновления справочников, в секундах.
int reload_period;
std::thread reloading_thread;
Poco::Event destroy;
2012-12-19 20:15:15 +00:00
Logger * log;
2012-12-19 20:15:15 +00:00
void handleException(const bool throw_on_error) const
{
const auto exception_ptr = std::current_exception();
try
{
throw;
}
catch (const Poco::Exception & e)
{
LOG_ERROR(log, "Cannot load dictionary! You must resolve this manually. " << e.displayText());
}
catch (...)
{
LOG_ERROR(log, "Cannot load dictionary! You must resolve this manually.");
}
if (throw_on_error)
std::rethrow_exception(exception_ptr);
}
2012-12-19 20:15:15 +00:00
/// Обновляет справочники.
void reloadImpl(const bool throw_on_error = false)
2012-12-19 20:15:15 +00:00
{
/** Если не удаётся обновить справочники, то несмотря на это, не кидаем исключение (используем старые справочники).
* Если старых корректных справочников нет, то при использовании функций, которые от них зависят,
* будет кидаться исключение.
* Производится попытка загрузить каждый справочник по-отдельности.
2012-12-19 20:15:15 +00:00
*/
LOG_INFO(log, "Loading dictionaries.");
auto & config = Poco::Util::Application::instance().config();
bool was_exception = false;
if (config.has(TechDataHierarchy::required_key))
2012-12-19 20:15:15 +00:00
{
try
{
auto new_tech_data_hierarchy = std::make_unique<TechDataHierarchy>();
tech_data_hierarchy.set(new_tech_data_hierarchy.release());
}
catch (...)
{
handleException(throw_on_error);
was_exception = true;
}
}
if (config.has(RegionsHierarchies::required_key))
{
try
{
auto new_regions_hierarchies = std::make_unique<RegionsHierarchies>();
new_regions_hierarchies->reload();
regions_hierarchies.set(new_regions_hierarchies.release());
}
catch (...)
{
handleException(throw_on_error);
was_exception = true;
}
}
if (config.has(RegionsNames::required_key))
2012-12-19 20:15:15 +00:00
{
try
{
auto new_regions_names = std::make_unique<RegionsNames>();
new_regions_names->reload();
regions_names.set(new_regions_names.release());
}
catch (...)
{
handleException(throw_on_error);
was_exception = true;
}
2012-12-19 20:15:15 +00:00
}
if (!was_exception)
LOG_INFO(log, "Loaded dictionaries.");
2012-12-19 20:15:15 +00:00
}
2012-12-19 20:15:15 +00:00
/// Обновляет каждые reload_period секунд.
void reloadPeriodically()
{
while (true)
{
if (destroy.tryWait(reload_period * 1000))
return;
reloadImpl();
2012-12-19 20:15:15 +00:00
}
}
public:
/// Справочники будут обновляться в отдельном потоке, каждые reload_period секунд.
Dictionaries(const bool throw_on_error, const int reload_period_)
: reload_period(reload_period_), log(&Logger::get("Dictionaries"))
2012-12-19 20:15:15 +00:00
{
reloadImpl(throw_on_error);
reloading_thread = std::thread([this] { reloadPeriodically(); });
2012-12-19 20:15:15 +00:00
}
Dictionaries(const bool throw_on_error)
: Dictionaries(throw_on_error,
Application::instance().config()
.getInt("builtin_dictionaries_reload_interval", 3600))
{}
2012-12-19 20:15:15 +00:00
~Dictionaries()
{
destroy.set();
reloading_thread.join();
}
MultiVersion<RegionsHierarchies>::Version getRegionsHierarchies() const
2012-12-19 20:15:15 +00:00
{
return regions_hierarchies.get();
2012-12-19 20:15:15 +00:00
}
MultiVersion<TechDataHierarchy>::Version getTechDataHierarchy() const
2012-12-19 20:15:15 +00:00
{
return tech_data_hierarchy.get();
}
MultiVersion<RegionsNames>::Version getRegionsNames() const
{
return regions_names.get();
}
2012-12-19 20:15:15 +00:00
};
}