Экспорт данных [Документация VAS Experts]

Различия

Показаны различия между двумя версиями страницы.

Ссылка на это сравнение

Предыдущая версия справа и слеваПредыдущая версия
Следующая версия
Предыдущая версия
dpi:dpi_components:qoestor:data_export [2021/01/07 07:56] – удалено arusnakdpi:dpi_components:qoestor:data_export [2025/05/23 14:21] (текущий) elena.krasnobryzh
Строка 1: Строка 1:
 +===== Экспорт данных =====
 +{{indexmenu_n>6}}
 +
 +При необходимости вы можете самостоятельно без дополнительных  инструментов сформировать собственные отчеты и выгрузить данные в любом формате CSV, JSON, TabSeparated.
 +
 +Данные хранятся в 4 основных логах
 +  * qoestor.fullflow – полный netflow лог, период хранения – 2 часа по умолчанию
 +  * qoestor.clicksteam – полный clickstream лог, период хранения – 2 часа по умолчанию
 +  * qoestor.fullflow_agg – предагрегированный netflow лог, период хранения - 14 дней по умолчанию 
 +  * qoestor.clicksteam_agg – предагрегированный clickstream лог, период хранения - 14 дней по умолчанию 
 +
 +Формат команды следущий <code>clickhouse-client --database=qoestor  --query="Ваш sql тут"</code>
 +
 +По умолчанию данные выгружаются в формате TabSeparated.
 +
 +**Пример**. Клиент попросил лог соединений с определенным хостом в формате CSV
 +
 +<code>clickhouse-client --database=qoestor --query="select * from fullflow prewhere flow_start_date = '2018-10-04' where (source_ipv4 = '10.64.66.100' or destination_ipv4 = '10.64.66.100') and host = 'google.com' ORDER BY flow_start_time limit 10 format CSV"</code>
 +
 +Подробную информацию по SQL ClickHouse смотрите по ссылке [[https://clickhouse.com/docs/ru/sql-reference/statements/select]]
 +