2020-10-26 10:29:30 +00:00
---
2022-04-09 13:29:05 +00:00
sidebar_position: 45
sidebar_label: hdfs
2020-10-26 10:29:30 +00:00
---
2020-03-20 18:20:59 +00:00
# hdfs {#hdfs}
2019-09-03 14:23:51 +00:00
2019-09-20 11:26:00 +00:00
Создаёт таблицу из файла в HDFS. Данная табличная функция похожа на табличные функции [url ](url.md ) и [file ](file.md ).
2019-09-03 14:23:51 +00:00
2020-03-20 18:20:59 +00:00
``` sql
2019-09-03 14:23:51 +00:00
hdfs(URI, format, structure)
```
**Входные параметры**
2020-03-21 04:11:51 +00:00
- `URI` — URI файла в HDFS. Путь к файлу поддерживает следующие шаблоны в режиме доступа только для чтения `*` , `?` , `{abc,def}` и `{N..M}` , где `N` , `M` — числа, \``'abc', 'def'` — строки.
- `format` — [формат ](../../interfaces/formats.md#formats ) файла.
- `structure` — структура таблицы. Формат `'column1_name column1_type, column2_name column2_type, ...'` .
2019-09-03 14:23:51 +00:00
**Возвращаемое значение**
Таблица с указанной структурой, предназначенная для чтения или записи данных в указанном файле.
**Пример**
Таблица из `hdfs://hdfs1:9000/test` и выборка первых двух строк из неё:
2020-03-20 18:20:59 +00:00
``` sql
2019-09-03 14:23:51 +00:00
SELECT *
FROM hdfs('hdfs://hdfs1:9000/test', 'TSV', 'column1 UInt32, column2 UInt32, column3 UInt32')
LIMIT 2
```
2020-03-20 18:20:59 +00:00
``` text
2019-09-03 14:23:51 +00:00
┌─column1─┬─column2─┬─column3─┐
│ 1 │ 2 │ 3 │
│ 3 │ 2 │ 1 │
└─────────┴─────────┴─────────┘
```
2019-09-20 11:26:00 +00:00
**Шаблоны в пути**
2019-09-04 11:11:30 +00:00
2020-03-21 04:11:51 +00:00
- `*` — Заменяет любое количество любых символов кроме `/` , включая отсутствие символов.
- `?` — Заменяет ровно один любой символ.
- `{some_string,another_string,yet_another_one}` — Заменяет любую из строк `'some_string', 'another_string', 'yet_another_one'` .
2020-04-01 15:18:16 +00:00
- `{N..M}` — Заменяет любое число в интервале от `N` до `M` включительно (может содержать ведущие нули).
2019-09-20 11:26:00 +00:00
Конструкция с `{}` аналогична табличной функции [remote ](remote.md ).
2019-09-04 11:11:30 +00:00
2022-04-09 13:29:05 +00:00
:::danger "Warning"
2019-09-04 11:11:30 +00:00
Если ваш список файлов содержит интервал с ведущими нулями, используйте конструкцию с фигурными скобками для каждой цифры по отдельности или используйте `?` .
Шаблоны могут содержаться в разных частях пути. Обрабатываться будут ровно те файлы, которые и удовлетворяют всему шаблону пути, и существуют в файловой системе.
2020-03-20 18:20:59 +00:00
## Виртуальные столбцы {#virtualnye-stolbtsy}
2020-01-15 07:52:45 +00:00
2020-03-21 04:11:51 +00:00
- `_path` — Путь к файлу.
- `_file` — Имя файла.
2020-01-15 07:52:45 +00:00
**Смотрите также**
2020-03-21 04:11:51 +00:00
- [Виртуальные столбцы ](index.md#table_engines-virtual_columns )
2020-01-15 07:52:45 +00:00