Информация о версиях [Документация VAS Experts]
Документация VAS Experts Документация VAS Experts-mobile
in

Настройки

  • Показать страницу
  • История страницы
  • Экспорт в PDF
  • Свернуть / развернуть всё
  • Ссылки сюда
  • Показать страницу
  • История страницы
  • Экспорт в PDF
  • Свернуть / развернуть всё
  • Ссылки сюда

    • Различия

    Показаны различия между двумя версиями страницы.

    Ссылка на это сравнение

    Следующая версия    		Предыдущая версия
    dpi:dpi_components:qoestor:install_and_update:version_information [2021/08/05 16:18] – создано arusnakdpi:dpi_components:qoestor:install_and_update:version_information [2024/09/26 15:29] (текущий) – внешнее изменение 127.0.0.1
    Строка 1: Строка 1:
    -===== 2 Рекомендации к оборудованию ===== +===== Информация о версиях ===== 
    -{{indexmenu_n>2}}+{{indexmenu_n>1}}
      
    -<note important>Не устанавливайте модуль на сервер с DPI платформой!</note>+=== Версия v.1.25.12 (03.04.2024) ===
      
    -=== Минимальные требования ===+  * Значительно снижено потребление памяти за счет механизма lazy loading. Особенно актуально для тех, кто хранит данные длительное время.
      
    -Для подсистемы можно использовать оборудование или виртуальные машины со сл.характеристиками: +=== Версия v.1.24.7 (14.02.2024) ===
    -  - Процессор (CPU) 2.5 ГГц - 1 шт +
    -  - Оперативная память (RAM) - от 16 Гб +
    -  - Жесткий диск (SSD крайне желательно) - от 500 Гб +
    -  - Операционная система - CentOS 7+ или CentOS 8+ +
    -  - Сетевая плата (NIC) - от 1 Гбит/сек +
    -<note important>{{ :dpi:dpi_components:capacity_space_for_qoe_and_hardware_example.xlsx |Калькулятор с примером оборудования}}</note>+
      
    -== Процессор ==+  * Прием и хранение DNS логов: сырого и агрегированного 
     +  * Прием и хранение MPLS меток в сыром логе. Статистика в агрегированном 
     +  * Возможность получения и хранения всех значений DSCP (0-64) 
     +  * Оптимизация и ускорение отчетов при работе в кластере
      
    -Требуется поддержка набора инструкций SSE 4.2.+=== Версия v.1.19.1 (08.08.2023) ===
      
    -Выбирайте процессоры с большим числом ядер. Тактовая частота менее важна. Например, 16 ядер с 2600 МГц лучше, чем 8 ядер 3600 МГц.+  * Новая функция: Возможность хранения одновременно до трех агрегированных fullflow логов с разным периодом агрегации 
     +  * Улучшение: Сбор данных по медиане RTT
      
    -<note important>Не отключайте Hyper-threading и Turbo-Boost.</note>+=== Версия v.1.18.1 (26.06.2023) ===
      
    -== Оперативная память ==+  * Новая функция: Компрессия сырого лога fullflow 
     +  * Баг-фикс
      
    -Памяти должно быть не меньше чем объем запрашиваемых данных.+=== Версия v.1.17.3 (21.03.2023) ===
      
    -Чем больше памяти, тем лучше производительность при построении отчетов.+  * Новая функция: Фиды Касперского 
     +  * Баг-фикс
      
    -Чем больше памяти, тем меньше нагрузка на диск. 
      
    -Минимальное требование - 16Гб.+=== Версия v.1.14.1 (06.09.2022) ===
      
    -Всегда отключайте файл подкачки.+  * Новая функция: Cервис OpenCellID
      
    -== Жесткий диск ==+=== Версия v.1.12.9 (20.10.2021) ===
      
    -Требуемое место на диске от 16ГБ на каждый день хранения в зависимости от трафика. Подсчитано, что 10 Гбит/с среднесуточного трафика генерирует примерно 25 ГБ данных за один час в QoE Store.+  * Обновление версии Clickhouse до 21.10+ 
     +  * Консольная команда вывода статистики - statdpi 
     +  * База данных доменов
      
    -Если ваш бюджет позволяет использовать SSD, используйте SSD (крайне рекомендуется). В противном случае используйте HDD. SATA HDDs 7200 RPM подойдут.+=== Версия v.1.11.3 (32.08.2021) ===
      
    -При использовании HDD можно объединить их RAID-10, RAID-5, RAID-6 или RAID-50.+  * Поддержка кластера 
     +  * Поддержка шардирования 
     +  * Поддержка пользовательских протоколов
      
    -Основной объем данных хранится в каталоге /var/lib/clickhouse. +=== Версия v.1.10.7 (05.08.2021) ===
      
    -Временные данные (дампы ipfix) хранятся в каталоге /var/qoestor/backend/dump. +  * Обновление версии Clickhouse до 21.7+
      
    -Для лучшей производительности важно (рекомендуется), чтобы эти каталоги находились на отдельном диске или массиве. См. [[dpi:dpi_components:qoestor:configuration:disc:start|Настройка дискового пространства]] 
      
    -=== Советы по эксплуатации от Яндекс ClickHouse ===+=== Версия v.1.9.0 (28.12.2020) ===
      
    -Советы по эксплуатации от Яндекс ClickHouse вы можете прочитать по ссылке [[https://clickhouse.yandex/docs/ru/operations/tips/|https://clickhouse.yandex/docs/ru/operations/tips/]].+  * Прием Netstream NAT от сторонних систем в QoE Stor. Автоматическое связывание IP-LOGIN в NAT логах 
     + 
     + 
     +=== Версия v.1.8.1 (12.11.2020) === 
     + 
     +  * Гибкая настройка агрегации fullflow и clickstream в QoE Stor 
     + 
     +=== Версия v.1.7.3 (15.10.2020) === 
     + 
     +  * Возможность хранение данных на HOT и COLD дисках 
     +  * Прием и хранение NAT логов. Опция формирования NAT лога из fullflow. Возможность гибкой настройки периода агрегации и списка полей, подлежащих агрегации 
     +  * Прием и хранение GTP логов 
     + 
     + 
     +=== Версия v.1.6.0 (14.09.2020) === 
     + 
     +  * Опция: подмена поля Логин значением из поля vchannel 
     +  * Баг фикс 
     + 
     +=== Версия v.1.4.2 (01.06.2020) === 
     + 
     +  * Баг фикс 
     + 
     +=== Версия v.1.4.0 (04.05.2020) === 
     + 
     +  * Поддержка совместимости с Clickhouse 20.3 
     +  * Возможность установки на CentOS 8 
     + 
     +=== Версия v.1.3.8 (09.04.2020) === 
     + 
     +  * Обновлены справочники протоколов 
     +  * Добавлено автообновление справочника АС 
     + 
     +=== Версия v.1.3.6 (25.11.2019) === 
     + 
     +  * Обновлены справочники протоколов 
     + 
     +=== Версия v.1.3.5 (06.11.2019) === 
     + 
     +  * Исправлено поведение справочника локальных подсетей (попадали лишние адреса) 
     +  * Адаптирована загрузка кликстрима для правильной работы ЛК в dpiui2-2.8.2 
     + 
     +=== Версия v.1.3.4 (25.10.2019) === 
     + 
     +  * Locked в кликстрим 
     + 
     +=== Версия v.1.3.3 (15.10.2019) === 
     + 
     +  * Обновление Кликхаус до последней версии ( >= 19.15 ) 
     +  * Улучшен метод загрузки и обработки логов 
     +  * Подготовлена база для анализа сырых логов 
     +  * Соединение логов Клистрим и Нетфлоу 
     + 
     + 
     +=== Версия v.1.1.1 (06.09.2019) === 
     + 
     +  * Обновление Кликхаус до последней версии 
     +  * Справочники asnum_exclude_diс, subnets_exclude_dic и соответствующий режим фильтрации по этим справочникам 
     + 
     + 
     +=== Версия v.1.0.9 (21.02.2019) === 
     + 
     +  * Устранен баг с неверным распознаванием магистральных коммутаторов 
     +  * Обновлен справочник protocols_dic 
     + 
     +=== Версия v.1.0.7 хот фиксы (24.12.2018) === 
     + 
     +  * Предусмотрен реэкспорт ipfix в конфигах ресивера: IPFIX_FULLFLOW_EXPORT и IPFIX_CLICKSTREAM_EXPORT 
     + 
     +=== Версия v.1.0.6 хот фиксы (04.12.2018) === 
     + 
     +  * Исправлены баги в работе справочника subnets_local_dic (типа A call to function range would produce 12884901882 array elements) 
     +  * Исправлена конфигурация ресиверов ipfixreceiver2 (FileWriter queue is full. Records dropped.) 
     + 
     +=== Версия v.1.0.5 (03.12.2018) === 
     + 
     +  * Справочники по Категориям хостов 
     +  * Переход на ipfixreceiver2 
     + 
     +<note important> 
     +  - Перед обновлением не забудьте обновить скрипт установки (в разделе Инсталляция). Для обновления используйте скрипт установки. 
     +  - После обновления, проверьте, запустились ли ресиверы (netstat -nlpa | grep 1500 и netstat -nlpa | grep 1501). Сокеты должны прослушиваться ipfixreceiver2 
     +  - Если ресиверы не запустились, выполните скрипт sudo sh /var/qoestor/backend/qoestor-config.sh 
     +</note> 
     + 
     +=== Версия v.1.0.4 (02.11.2018) === 
     + 
     +  * Внедрена предагрегация, которая сокращает нетфлоу в 6-7 раз, кликстрим в 3 раза 
     +  * Внедрены справочники: абоненты, коммутаторы, автономные системы (AS), crc 
     +  * Добавлена опция определения направления трафика и фильтрация абонентов (разделение IP хостов и IP абонентов) по AS и CIDR. Опция актуальна в случае установки СКАТ DPI на зеркале. 
     + 
     +Данная версия QoE Stor работает с версией DPIUI2-2.1.5+ 
     + 
     +<note important>Если вы успели поставить версию 1.0.0, перед установкой новой версии необходимо удалить БД (полная несовместимость версий). 
     +Для этого выполните команду  <code>clickhouse-client --query="drop database qoestor"</code></note> 
     + 
     + 
     +=== Версия v.1.0.0 (20.09.2018) === 
     + 
     +  * Создан новый модуль – QoE Stor