О версии 2.9

Особенности обновления

При обновлении системы до версии 2.9.0 имеется ряд особенностей. Подробности приведены в разделе Обновление системы.

Новые возможности

Открытие конвейера

Упрощены способы открытия конвейера. Теперь перейти к конфигурации конвейера можно:

PipelinesInGrid

Точка входа WebSocket

  WebSocket

Добавлена точка входа WebSocket, предназначенная для подключения к серверу и сбора данных с него с помощью одноименного протокола связи.

Новая точка входа WMI

  WMI

Добавлена новая точка входа типа WMI (WinRM).

Ключевые изменения относительно ранее существовавшей точки входа:

  • Для сбора событий достаточно ограниченных прав доступа.

  • Значительно оптимизирована производительность.

  • Добавлены дополнительные настройки, такие как выбор журналов, из которых будут собираться события.

Прежняя точка входа WMI помечена как "deprecated" и будет исключена в будущих релизах. Рекомендуется после обновления заменить старые точки входа WMI (deprecated) на новые — WMI (WinRM).

Дата начала сбора в SMB

  SMB

В точку входа SMB добавлено поле Дата начала сбора для указания даты, с которой начнется сбор данных. В обработку попадают только те файлы, которые были созданы в указанную дату или позже.

Подтверждения NATS JetStream

  NATSJetStreamAck

Для точки входа NATS JetStream расширены настройки отправки подтверждений (acknowledgements) сообщений в NATS.

Теперь можно самостоятельно выбрать вариант отправки:

  • Без подтверждения — подтверждения не отправляются.

  • Подтверждение при получении — подтверждение отправляется сразу при поступлении сообщения в точку входа.

  • Сквозное подтверждение — подтверждение отправляется после обработки сообщения конвейером.

Создание элементов конвейера со связью

Теперь элементы можно создавать при наведении связи на свободное пространство на диаграмме. Такие элементы будут автоматически связываться с исходным элементом.

CreateElementWithBinding

Массовое удаление элементов конвейера

Добавлена возможность массового выделения элементов конвейера и/или связей между ними с помощью клавиш CTRL и SHIFT. Выделенные элементы можно удалять с помощью клавиш DELETE и BACKSPACE.

ElementsMassSelection

Изменения в интерфейсе конфигурации конвейера

Названия кнопок на панели инструментов конфигурации сокращены до одного слова. Также выбор режима конфигурации теперь осуществляется с помощью переключателя, а не выпадающего списка.

Pipeline

Новые действия над элементами конвейера

  ElementActions

Добавлены новые команды в меню действий элементов конвейера:

  • Создание копии элемента.

  • Сброс позиции чтения — для точек входа:

    • Database;

    • FTP;

    • HTTP Client;

    • SFTP;

    • SMB;

    • WMI (WinRM).

    Сброс происходит при установке конвейера.

Для каждой команды в выпадающем списке добавлены иконки.

Просмотр логов конвейера

Теперь можно просматривать логи не только всего коллектора, но и отдельного конвейера. Для этого необходимо нажать на соответствующую кнопку в окне конфигурации конвейера.

ViewPipelineLogs

PipelineLogsWindow

Кодировка символов в секретах

  ConnectionStringSecret

Использование строки подключения с логином и/или паролем, содержащими специальные символы, может привести к ошибкам аутентификации при подключении к внешней системе.

Поэтому в окне добавления секрета типа Строка подключения появилось поле Кодировщик, с помощью которого можно закодировать специальные символы в строке подключения.

В разделе Поиск в качестве источника данных можно выбрать несколько активных списков сразу.

MultipleActiveListsSearch

Расширение функционала JOIN

В RQL-запросах теперь можно выполнять присоединение с помощью оператора JOIN не только для активных списков, но и для хранилищ событий. В одном запросе можно использовать несколько конструкций с JOIN.

MultipleJoins

Иконки типов полей

  EventFieldDataTypesImages

В карточке события или записи активного списка на вкладке Информация типы данных полей теперь обозначаются соответствующими иконками.

Конструктор хранилища событий

Теперь настройка хранилища событий при его создании осуществляется в специальном конструкторе.

Добавлена возможность выбирать движок таблицы ClickHouse для определения логики хранения и обработки данных, а также настраивать первичный (PRIMARY KEY) и сортировочный (ORDER BY) ключи, которые определяют логику сортировки и поиска данных.

EventStorageBuilder

Удаление оповещений

Теперь можно удалять оповещения в системе. Удаление оповещения генерирует соответствующее событие аудита.

При удалении можно указать комментарий, который отобразится в поле data.description в событии аудита.

DeleteAlertsButton

DeleteAlerts

Отображение столбчатых диаграмм

В диаграммы типов Столбчатая диаграмма и Столбчатая диаграмма с накоплением внесены следующие улучшения:

  • Теперь подписи столбцов отображаются под наклоном и не перекрывают друг друга.

  • Убрано ограничение на количество записей в легенде.

BarChart

Отображение круговых диаграмм

Для всех виджетов с круговыми диаграммами добавлена настройка, позволяющая выбрать формат отображения значений:

  • Относительные — отображение процентных значений.

  • Абсолютные — отображение абсолютных численных значений.

Данная настройка доступна для следующих виджетов:

  • Виджетов оповещений со следующими типами данных:

    • Активные;

    • Новые;

    • Распределение по атрибуту.

  • Виджетов событий и виджетов активных списков типа Круговая диаграмма.

PieChartParameters

PieChartExample

Улучшения и доработки

Секреты

  • Хранение учетных данных для внешних систем в защищенном виде: повышена защищенность секретов, используемых элементами конвейеров на коллекторах, таких как строки подключения, учетные данные и токены.

Коллекторы и конвейеры

  • Автоматический выбор узла для коллектора: теперь при настройке распределенной корреляции в коллекторе выбор узла происходит автоматически, если система была установлена без развертывания объектов ClusterRole.

  • Изменение логики расположения элементов: теперь элементы конвейера не могут накладываться друг на друга.

  • Унификация полей точек входа: поля в точках входа приведены к единому виду.

Поиск и исключения

  • Информация об источнике данных поиска: в карточку записи данных добавлены поля с информацией о хранилище или активном списке, в котором хранится эта запись. При этом информация о хранилище в карточке события теперь отображается всегда, а не только при поиске по нескольким хранилищам.

  • Настройки отображения панели группировки: для панели группировки появился вариант отображения в виде таблицы и изменение ширины панели. При нажатии на карточку или строку группы отображается статистика для этой группы.

Хранилища и БД событий

  • Минимальный срок хранения событий: в хранилищах событий добавлен минимальный срок хранения данных суммарно по всем томам. По умолчанию данный срок составляет 1 день, при необходимости он может быть изменен.

  • Удаление дубликатов в хранилищах: в хранилищах событий добавлена возможность выбирать движок таблицы ClickHouse. При выборе движка ReplacingMergeTree доступна возможность настройки удаления дублирующихся записей в хранилище.

  • Новая логика расчета метрик HDD для БД событий: теперь для каждого тома указываются физические пути к его дискам. Если несколько дисков имеют одинаковый физический путь, то итоговый показатель HDD отображается только для одного из дисков, иначе — суммируется по всем дискам.

Аудит источников

  • Входящий EPS в аудите источников: в карточках источников событий на вкладках Источники и Точки входа раздела Инструменты → Аудит источников добавлены графики поступающих событий в секунду (EPS).

Дашборды и виджеты

  • Выбор нескольких хранилищ или активных списков для виджетов: виджеты событий и активных списков теперь могут получать данные из нескольких источников.

Общее

  • Обновление компонентов: Vector обновлен до версии 0.56, что включает повышение версии VRL до 0.33.1.

  • Архитектурные доработки для повышения отказоустойчивости: добавлена возможность использовать выделенные узлы для хранилища конфигураций etcd в целях повышения отказоустойчивости центрального кластера. Регистрацию выделенных узлов etcd можно проводить во время развертывания кластера Kubernetes с помощью Kubespray.

  • Использование конфигурационного файла при интерактивной установке: теперь вы можете использовать заранее созданный файл с переменными конфигурации при установке системы не только в неинтерактивном режиме, но и с помощью интерактивного установщика. В этом случае этапы установки, связанные с указанными в файле переменными, будут пропущены.

  • Выборочная установка компонентов инфраструктуры: теперь при установке системы можно выбрать, какие компоненты модуля evo.infra, такие как провайдер хранилища local-path-provisioner или система сбора и хранения логов Loki, будут установлены.

  • Настройка режима развертывания Ingress-ресурсов: теперь при установке системы можно выбрать, будут ли развернуты отдельные Ingress-ресурсы для каждого сервиса, к которому требуется внешний сетевой доступ, или единый обратный прокси-сервер (reverse proxy). Единый прокси-сервер обязателен при установке системы в кластер, в Ingress-контроллере которого отключена поддержка сниппетов (snippets).

Пользовательский интерфейс и опыт

  • Обновление оповещений: добавлена возможность обновлять список оповещений в таблице раздела Оповещения.

  • Переход к событиям оповещения: из карточки оповещения теперь можно перейти в раздел Поиск с фильтром по идентификаторам событий.

  • Копирование полей сущностей: добавлена возможность копирования данных полей в карточке оповещения. Также переработан функционал копирования полей сущностей в разделах Поиск, Ресурсы → Коллекторы и Инструменты → Диспетчер запросов.

  • Оптимизация запросов поиска: проведены работы по оптимизации в целях снижения задержек и риска сбоев при выполнении запросов в разделе Поиск.

  • Размер активного списка: теперь на странице просмотра активного списка отображается его размер в МБ.

  • Фильтрация каталогов в шаблоне поиска: в окне создания шаблона поиска добавлена возможность быстрого поиска каталогов экспертизы.

  • Упрощение добавления связей в сервисе оповещений: в окно добавления или изменения связей между правилом сегментации и правилами корреляции добавлена возможность быстрого поиска правил корреляции, а также отображения только выбранных правил.

  • Новый способ добавления событий в точке входа Demo Logs: появилась возможность добавлять события в формате shuffle с помощью массива.

  • Изменение списка цветов для источников виджета: из палитры базовых цветов для источников исключен серый цвет.

  • Переработка отображения количества записей: в таблицах разделов переработана логика отображения поля Всего записей. Теперь, если при загрузке элементов таблицы происходит ошибка, в поле отображается прочерк.

Исправление проблем

  • Исправлена проблема, при которой изменение срока хранения событий в томах хранилищ завершалось с ошибкой.

  • Исправлена проблема, при которой добавление таблиц обогащения на коллектор приводило к перезапуску системного менеджера коллекторов.

  • Исправлена проблема, при которой добавление некорректного сертификата в точку входа или конечную точку на конвейере приводило к сбою в работе всего коллектора.

  • Исправлена проблема, при которой из точки входа SMB не поступали события.

  • Исправлена проблема, при которой точка входа SMB передавала события со значительной задержкой.

Была ли полезна эта страница?

Обратная связь