Skip to main content

Поднимаем SySlogServer (rsyslog) с кооперацией с logrotate и Zabbix

Общая информация

Уровни и каталогизация логов

В проекте используется несколько уровней раскладки удаленных syslog-сообщений:

- полный лог по каждому устройству:
 

 /var/log/remote/<IP_ИСТОЧНИКА>/all.log 

- раскладка по facility:
  

/var/log/remote/<IP_ИСТОЧНИКА>/facility/<facility>.log

- раскладка по severity:
  

/var/log/remote/<IP_ИСТОЧНИКА>/severity/<severity>.log

- alert-файлы для последующей обработки:
  

/var/log/remote/_alerts/

Каталоги по устройствам формируются по реальному IP-адресу источника сообщения (`fromhost-ip`), а не по `hostname`. Это исключает смешивание логов от разных устройств с одинаковыми именами.

Уровни severity:

  • emerg — авария максимального уровня
  • alert — критичное событие, требующее немедленного внимания
  • crit — критическая ошибка
  • err — ошибка
  • warning — предупреждение
  • notice — важное служебное сообщение
  • info — информационное сообщение
  • debug — отладочное сообщение

Дополнительно формируются отдельные alert-файлы:

  • high.log — все сообщения уровня err и выше
  • alerts_critical.log — немедленные аварийные события
  • alerts_warning.log — важные предупреждающие события
  • alerts_behavior.log — накопительные признаки нестабильности второго уровня сети

Общая логика

Обычные события вида %LINK-3-UPDOWN и %LINEPROTO-5-UPDOWN лучше оставлять для истории и разбора, а не делать на них основную тревожную логику через syslog, потому что состояние интерфейсов Zabbix и так хорошо видит напрямую. Через syslog есть смысл забирать именно то, что плохо видно стандартными шаблонами: срабатывания защит второго уровня сети, перемещение MAC-адресов, частые изменения дерева STP и похожие аномалии.

Какие события предлагается мониторить

1. Сразу авария

Эти сообщения я бы поднимал в Zabbix сразу, без накопления:

  • PM-4-ERR_DISABLE — порт переведен в аварийную блокировку err-disable. Это уже не просто потеря линка, а именно защитная реакция коммутатора.
  • SPANTREE-2-BLOCK_BPDUGUARD — на порт с BPDU Guard пришел BPDU, и Cisco отключила интерфейс. Для пользовательских портов это очень сильный признак неправильного подключения.
  • UDLD-4-UDLD_PORT_DISABLED — UDLD отключил интерфейс из-за ненормального состояния линии. Особенно полезно на оптике и межкоммутаторных связях.
  • SPANTREE-2-CHNL_MISCFG — обнаружена петля из-за неправильной настройки EtherChannel. Это очень ценный сигнал для межкоммутаторных связей.
  • STORM_CONTROL-3-SHUTDOWN — storm-control уже довел ситуацию до отключения порта.

2. Сразу предупреждение

Эти сообщения тоже важны, но не всегда означают немедленную потерю связи:

  • SPANTREE-2-LOOPGUARD_BLOCK — Loop Guard заблокировал порт, потому что перестали приходить BPDU, которые должны были приходить. Это не err-disable, но очень серьезный симптом.
  • SPANTREE-2-ROOTGUARD_BLOCK — Root Guard заблокировал порт, чтобы не допустить нежелательную смену корневого коммутатора.
  • STORM_CONTROL-3-FILTERED — коммутатор уже режет лишний трафик, хотя порт еще не отключен. Это хороший ранний индикатор шторма.

3. Считать за интервал

Эти события я бы не поднимал как немедленную аварию по одному сообщению, а именно считал за 5–10 минут:

  • MAC_MOVE-4-NOTIF — один и тот же MAC-адрес появляется на разных портах. Это один из лучших признаков петли, неправильной коммутации или нестабильного поведения на втором уровне.
  • SW_MATM-4-MACFLAP_NOTIF - то же самое для серии С9000
  • SPANTREE-5-TOPOTRAP — произошло изменение топологии STP. Однократное событие может быть допустимым, частая серия — уже подозрительна.
  • SPANTREE-5-ROOTCHANGE — изменился корневой путь или корневой коммутатор для экземпляра STP. Повторяемость такого события — сильный симптом нестабильности.

Практически я бы стартовал с таких порогов:

  • MAC_MOVE-4-NOTIF: 2 за 5 минут — предупреждение, 5 за 5 минут — высокая важность.
  • SW_MATM-4-MACFLAP_NOTIF: 2 за 5 минут — предупреждение, 5 за 5 минут — высокая важность.
  • SPANTREE-5-TOPOTRAP: 5 за 5 минут — предупреждение, 15 за 5 минут — высокая важность.
  • SPANTREE-5-ROOTCHANGE: 1 за 10 минут — предупреждение, 2 за 10 минут — высокая важность.

Это уже не правило Cisco, а разумная начальная схема, чтобы не утонуть в шуме.


Теперь главное: что такое log[], logrt[], log.count[] и logrt.count[]

Zabbix прямо разделяет мониторинг журналов на четыре основных ключа. Все они относятся к мониторингу журналов и должны быть настроены как активные проверки агента — то есть тип элемента данных должен быть Zabbix agent (active). Для работы нужны сам агент на узле и корректно заданный ServerActive; для log[] и logrt[] еще важны права чтения файла для пользователя zabbix.

log[]

log[] используется для обычного файла журнала без ротации. Он читает новые строки, ищет совпадение по регулярному выражению и отправляет в Zabbix саму строку журнала. Тип данных для такого элемента — обычно Log. Если задать параметр output, можно отправлять не всю строку, а только извлеченную часть или преобразованное содержимое. Если вручную выбрать не тип Log, а, например, числовой, Zabbix предупреждает, что тогда потеряется локальная отметка времени журнала.

Когда это удобно:

  • когда у тебя есть один конкретный файл, например /var/log/alerts.log;
  • когда важно видеть сам текст события в Zabbix;
  • когда нужно строить триггер по наличию конкретной строки.

Пример идеи:

log[/var/log/cisco/alerts_critical.log,"PM-4-ERR_DISABLE|SPANTREE-2-BLOCK_BPDUGUARD"]

logrt[]

logrt[] — это почти то же самое, но для журналов с ротацией. Zabbix ищет не один файл, а набор файлов по шаблону имени и отслеживает текущий активный файл плюс ротированные. Документация отдельно подчеркивает, что logrt[] рассчитан на один активный журнал и несколько старых ротированных, а не на множество одновременно активно пишущихся файлов. Если один logrt[] начнет охватывать слишком много активных файлов, это может привести к избыточному расходу памяти и проблемам мониторинга. Ротация для logrt[] определяется по времени изменения файлов.

Когда это удобно:

  • когда у тебя rsyslog или logrotate переименовывает файлы;
  • когда сегодня пишется alerts.log, а завтра появится alerts.log-2026-04-23 или похожий вариант;
  • когда не хочешь потерять события при ротации.

Пример идеи:

logrt[/var/log/remote/_alerts/alerts_critical\.log,"PM-4-ERR_DISABLE|SPANTREE-2-BLOCK_BPDUGUARD"]

log.count[]

log.count[] нужен не для чтения текста строки, а для подсчета количества совпадений в обычном, не ротируемом журнале. Возвращаемый тип данных — целое без знака. Документация отдельно пишет, что считаются совпадения в новых строках с момента предыдущей проверки агента, поэтому результат зависит от интервала обновления элемента.

Когда это удобно:

  • когда тебе не нужно хранить в значении сам текст события;
  • когда важна именно частота;
  • когда строишь пороги типа “5 событий за 5 минут”.

Пример идеи:

log.count[/var/log/cisco/alerts_behavior.log,"MAC_MOVE-4-NOTIF"]

logrt.count[]

logrt.count[] — это подсчет совпадений, но уже для ротируемых журналов. По сути, это самый удобный ключ для накопительных событий в syslog-схеме, где журналы ежедневно или еженедельно переименовываются. Как и log.count[], он считает совпадения в новых строках с момента предыдущей проверки, поэтому поведение тоже зависит от интервала опроса.

Когда это удобно:

  • когда файл ротируется;
  • когда нужны не строки, а число событий за интервал;
  • когда мониторишь повторяемость MAC_MOVE, TOPOTRAP, ROOTCHANGE.

Пример идеи:

logrt.count[/var/log/remote/_alerts/alerts_behavior\.log,"MAC_MOVE-4-NOTIF|SPANTREE-5-TOPOTRAP|SPANTREE-5-ROOTCHANGE"]

Что из этого лучше выбрать

Для немедленных аварийных событий — logrt[]

Почему именно так: тебе важно не количество, а сам факт и текст события. По одному сообщению PM-4-ERR_DISABLE или SPANTREE-2-BLOCK_BPDUGUARD уже можно сразу открывать проблему.

Под это я бы выделил файл, например alerts_critical.log, и читал его через logrt[].

Подходящая группа сообщений:

PM-4-ERR_DISABLE|SPANTREE-2-BLOCK_BPDUGUARD|UDLD-4-UDLD_PORT_DISABLED|SPANTREE-2-CHNL_MISCFG|STORM_CONTROL-3-SHUTDOWN

Для важных, но не максимальных событий — тоже logrt[]

Тут логика такая же: событие само по себе уже полезно и его хочется видеть как отдельную запись.

Для файла, например alerts_warning.log:

SPANTREE-2-LOOPGUARD_BLOCK|SPANTREE-2-ROOTGUARD_BLOCK|STORM_CONTROL-3-FILTERED

Для накопительных признаков — logrt.count[]

Вот здесь уже удобнее не тащить каждый текст в отдельный problem event, а считать количество.

Для файла alerts_behavior.log:

MAC_MOVE-4-NOTIF|SPANTREE-5-TOPOTRAP|SPANTREE-5-ROOTCHANGE

И дальше уже делать триггеры по числу совпадений за интервал.

Важные нюансы по работе этих ключей

Есть несколько моментов, которые реально влияют на поведение.

Во-первых, для всех ключей мониторинга журналов Zabbix требует активную проверку агента. То есть эти элементы нужно создавать не как обычный Zabbix agent, а именно как Zabbix agent (active).

Во-вторых, log[] и logrt[] возвращают либо строку журнала, либо результат, сформированный через параметр output. А log.count[] и logrt.count[] возвращают только число совпадений.

В-третьих, и log.count[], и logrt.count[] считают совпадения только в строках, появившихся с момента предыдущей проверки, поэтому итог зависит от интервала обновления. Иными словами, если поставить интервал 60 секунд, ты будешь получать число совпадений за последнюю минуту; если 10 секунд — за последние 10 секунд.

В-четвертых, logrt[] и logrt.count[] стоит использовать именно там, где файл ротируется. Zabbix отслеживает такие файлы по времени изменения, а также ведет внутренние счетчики размера и состояния чтения, чтобы не начинать разбор с нуля каждый раз. Для Linux дополнительно используются inode, для Windows — файловые индексы.

В-пятых, если журналов много и они все активно пишутся, не надо пытаться одной маской logrt[] охватить весь мир. Документация прямо предупреждает, что logrt[] рассчитан на один активный журнал и несколько ротированных копий; если под одну маску попадет слишком много активных файлов, это может создать проблемы.

Как это оформить

В практическом виде я бы предложил три файла и три группы элементов.

1. Аварийные события

Файл:

/var/log/remote/_alerts/alerts_critical.log

Элемент:

logrt[/var/log/remote/_alerts/alerts_critical\.log,"PM-4-ERR_DISABLE|SPANTREE-2-BLOCK_BPDUGUARD|UDLD-4-UDLD_PORT_DISABLED|SPANTREE-2-CHNL_MISCFG|STORM_CONTROL-3-SHUTDOWN"]

Смысл: по каждой строке сразу открывается проблема.

2. Предупреждения

Файл:

/var/log/remote/_alerts/alerts_warning.log

Элемент:

logrt[/var/log/remote/_alerts/alerts_warning\.log,"SPANTREE-2-LOOPGUARD_BLOCK|SPANTREE-2-ROOTGUARD_BLOCK|STORM_CONTROL-3-FILTERED"]

Смысл: тоже читать сами строки, но делать менее высокий уровень важности.

3. Накопительные признаки

Файл:

/var/log/remote/_alerts/alerts_behavior.log

Элемент:

logrt.count[/var/log/remote/_alerts/alerts_behavior\.log,"MAC_MOVE-4-NOTIF|SPANTREE-5-TOPOTRAP|SPANTREE-5-ROOTCHANGE"]

И уже отдельные элементы под каждый тип, если хочешь разные пороги:

logrt.count[/var/log/remote/_alerts/alerts_behavior\.log,"MAC_MOVE-4-NOTIF"]
logrt.count[/var/log/remote/_alerts/alerts_behavior\.log,"SPANTREE-5-TOPOTRAP"]
logrt.count[/var/log/remote/_alerts/alerts_behavior\.log,"SPANTREE-5-ROOTCHANGE"]

Так даже удобнее, потому что триггеры будут понятнее.


Итоговая рекомендация

Если сформулировать совсем практично:

  • log[] — читать строки из одного обычного файла журнала.
  • logrt[] — читать строки из файла журнала с ротацией.
  • log.count[] — считать количество совпадений в одном обычном файле.
  • logrt.count[] — считать количество совпадений в ротируемом журнале.

Для твоего syslog-сервера почти наверняка базовым выбором будут именно logrt[] и logrt.count[], потому что журналы у тебя ротируются.
logrt[] хорошо подходит для событий, которые нужно поднимать сразу.
logrt.count[] — для MAC flapping, частых перестроений STP и похожих повторяющихся признаков.

Приступим.

Устанавливаем на сервер Ubuntu Server Minimal 24.04
Далее обновляем систему 

sudo apt update
sudo apt upgrade

Устанавливаем сервер rsyslog и каталогизатор logrotate и редактор nano

sudo apt install -y rsyslog logrotate nano

Устанавливаем iputils-ping

sudo apt install iputils-ping

Устанавливаем для теста tcpdump

sudo apt install tcpdump

Что бы работала автоподстановка устанавливаем 

sudo apt install bash-completion

Подготавливаем папки

sudo mkdir -p /var/log/remote/_alerts
sudo chmod 0755 /var/log/remote

Меняем права на папку

sudo chown -R syslog:syslog /var/log/remote

Запускаем сервис в автозагрузку и смотрим статус 

sudo systemctl enable --now rsyslog
sudo systemctl status rsyslog --no-pager

Создаем файл конфигурации rsyslog

touch /etc/rsyslog.d/10-remote-collector.conf

Открываем конфиг

nano /etc/rsyslog.d/10-remote-collector.conf

Вставляем туда конфиг

# Загружаем модули приема удаленных syslog-сообщений по UDP и TCP
module(load="imudp")
module(load="imtcp")

# -----------------------------
# Шаблоны путей
# -----------------------------
# Каталоги строим по реальному IP источника.
# Это исключает смешивание устройств с одинаковым hostname.

template(name="RemoteAllPath" type="list") {
    constant(value="/var/log/remote/")
    property(name="fromhost-ip" securePath="replace")
    constant(value="/all.log")
}

template(name="RemoteFacilityPath" type="list") {
    constant(value="/var/log/remote/")
    property(name="fromhost-ip" securePath="replace")
    constant(value="/facility/")
    property(name="syslogfacility-text" securePath="replace")
    constant(value=".log")
}

template(name="RemoteSeverityPath" type="list") {
    constant(value="/var/log/remote/")
    property(name="fromhost-ip" securePath="replace")
    constant(value="/severity/")
    property(name="syslogseverity-text" securePath="replace")
    constant(value=".log")
}
# -----------------------------
# Шаблон строки для _alerts
# -----------------------------
template(name="AlertsFileFormat" type="string"
         string="%timereported:::date-rfc3339% %fromhost-ip% %syslogtag% %msg:::drop-last-lf%\n")

ruleset(name="RemoteLogs") {

    # Полный лог по устройству
    action(type="omfile"
           dynaFile="RemoteAllPath"
           template="RSYSLOG_TraditionalFileFormat"
           createDirs="on"
           dirCreateMode="0750"
           fileCreateMode="0640"
           dirGroup="syslog"
           fileGroup="syslog")

    # Раскладка по facility
    action(type="omfile"
           dynaFile="RemoteFacilityPath"
           template="RSYSLOG_TraditionalFileFormat"
           createDirs="on"
           dirCreateMode="0750"
           fileCreateMode="0640"
           dirGroup="syslog"
           fileGroup="syslog")

    # Раскладка по severity
    action(type="omfile"
           dynaFile="RemoteSeverityPath"
           template="RSYSLOG_TraditionalFileFormat"
           createDirs="on"
           dirCreateMode="0750"
           fileCreateMode="0640"
           dirGroup="syslog"
           fileGroup="syslog")

 # Общий технический файл ошибок
    if ($syslogseverity <= 3) then {
        action(type="omfile"
               file="/var/log/remote/_alerts/high.log"
               template="AlertsFileFormat"
               createDirs="on"
               dirCreateMode="0750"
               fileCreateMode="0640"
               dirGroup="syslog"
               fileGroup="syslog")
    }

    # 1. Немедленная авария
    if ($msg contains "PM-4-ERR_DISABLE"
        or $msg contains "SPANTREE-2-BLOCK_BPDUGUARD"
        or $msg contains "UDLD-4-UDLD_PORT_DISABLED"
        or $msg contains "SPANTREE-2-CHNL_MISCFG"
        or $msg contains "STORM_CONTROL-3-SHUTDOWN") then {
        action(type="omfile"
               file="/var/log/remote/_alerts/alerts_critical.log"
               template="AlertsFileFormat"
               createDirs="on"
               dirCreateMode="0750"
               fileCreateMode="0640"
               dirGroup="syslog"
               fileGroup="syslog")
    }

    # 2. Немедленное предупреждение
    if ($msg contains "SPANTREE-2-LOOPGUARD_BLOCK"
        or $msg contains "SPANTREE-2-ROOTGUARD_BLOCK"
        or $msg contains "STORM_CONTROL-3-FILTERED") then {
        action(type="omfile"
               file="/var/log/remote/_alerts/alerts_warning.log"
               template="AlertsFileFormat"
               createDirs="on"
               dirCreateMode="0750"
               fileCreateMode="0640"
               dirGroup="syslog"
               fileGroup="syslog")
    }
    # 3. Накопительные признаки
    if ($msg contains "MAC_MOVE-4-NOTIF"
        or $msg contains "SW_MATM-4-MACFLAP_NOTIF"
        or $msg contains "SPANTREE-5-TOPOTRAP"
        or $msg contains "SPANTREE-5-ROOTCHANGE") then {
        action(type="omfile"
               file="/var/log/remote/_alerts/alerts_behavior.log"
               template="AlertsFileFormat"
               createDirs="on"
               dirCreateMode="0750"
               fileCreateMode="0640"
               dirGroup="syslog"
               fileGroup="syslog")
    }

    stop
}

input(type="imudp" port="514" ruleset="RemoteLogs")
input(type="imtcp" port="514" ruleset="RemoteLogs")

Проверяем и перезапускаем

sudo rsyslogd -N1
sudo systemctl restart rsyslog
sudo systemctl status rsyslog --no-pager

Проверка, что открыт прием syslog на 514 порту

sudo ss -ulpn | grep ':514'
sudo ss -tlpn | grep ':514'

Проверка, что создаются файлы логов

sudo find /var/log/remote -type f | sort

После получения первых сообщений должны появляться файлы вида:

  • /var/log/remote/<IP_ИСТОЧНИКА>/all.log
  • /var/log/remote/<IP_ИСТОЧНИКА>/facility/...
  • /var/log/remote/<IP_ИСТОЧНИКА>/severity/...
  • /var/log/remote/_alerts/high.log

Проверка alert-файла high.log

logger -p user.err -t TEST "Проверка записи в high.log"

Потом проверим файл:

sudo tail -n 20 /var/log/remote/_alerts/high.log

С другого Linux-узла в сети можно отправить тестовое сообщение на syslog-сервер:

logger --server <IP_SYSLOG_SERVER> --udp --port 514 -t TEST "Проверка удаленного syslog по UDP"

Для TCP:

logger --server <IP_SYSLOG_SERVER> --tcp --port 514 -t TEST "Проверка удаленного syslog по TCP"

После отправки сообщения нужно проверить, появился ли каталог соответствующего IP-источника и записался ли лог:

sudo find /var/log/remote -type f | sort
sudo tail -n 20 /var/log/remote/<IP_ИСТОЧНИКА>/all.log

Если сообщение относится к одному из настроенных alert-событий, дополнительно нужно проверить соответствующий файл в каталоге `_alerts`:

sudo tail -n 20 /var/log/remote/_alerts/high.log
sudo tail -n 20 /var/log/remote/_alerts/alerts_critical.log
sudo tail -n 20 /var/log/remote/_alerts/alerts_warning.log
sudo tail -n 20 /var/log/remote/_alerts/alerts_behavior.log


Тестируем сам SYSLOG и эмулируем события

Общие условия испытаний

Испытания следует проводить только в изолированной лабораторной VLAN.

Текущий стенд:
- тестовый коммутатор Cisco C3750v2;
- второй управляемый коммутатор Cisco C9200;
- два ноутбука / тестовых хоста;
- Syslog-сервер;
- медные и оптические uplink-линии, SFP-модули и патч-корды.

Такой стенд позволяет проверить:
- сценарии с пользовательскими портами и защитами доступа;
- сценарии межкоммутаторного STP;
- сценарии EtherChannel;
- сценарии с оптическим uplink, включая UDLD.

Для контроля результатов на Syslog-сервере удобно открыть:

sudo tail -f \
/var/log/remote/_alerts/alerts_critical.log \
/var/log/remote/_alerts/alerts_warning.log \
/var/log/remote/_alerts/alerts_behavior.log

Для контроля на коммутаторе удобно использовать:

terminal monitor
show logging | include PM-|SPANTREE|MAC_MOVE|SW_MATM|UDLD|STORM_CONTROL
show interfaces status err-disabled
show spanning-tree summary

Порядок проверки

Рекомендуемый порядок:

  1. BPDU Guard
  2. MAC_MOVE-4-NOTIF
  3. STORM_CONTROL-3-FILTERED
  4. STORM_CONTROL-3-SHUTDOWN
  5. ROOTGUARD_BLOCK
  6. TOPOTRAP
  7. ROOTCHANGE
  8. LOOPGUARD_BLOCK
  9. CHNL_MISCFG
  10. UDLD_PORT_DISABLED

Такой порядок позволяет сначала проверить простые и безопасные сценарии, а затем переходить к более сложным межкоммутаторным тестам.

Методика воспроизведения событий

SPANTREE-2-BLOCK_BPDUGUARD и PM-4-ERR_DISABLE

Назначение теста

Проверка реакции порта с PortFast и BPDU Guard на получение BPDU. При корректной отработке порт должен быть отключён, а в Syslog должны уйти сообщения о блокировке BPDU Guard и о переводе порта в err-disable. Cisco документирует BPDU Guard как механизм, который отключает интерфейс при получении BPDU на edge-порту, а PM-4-ERR_DISABLE — как общее сообщение Port Manager о переводе интерфейса в err-disable.

Настройка тестового порта

conf t
interface fa1/0/11
description TEST_BPDU_GUARD
switchport mode access
switchport access vlan 10
spanning-tree portfast
spanning-tree bpduguard enable
no shutdown
end

Воспроизведение

Подключить Fa1/0/11 к порту второго управляемого коммутатора, на котором включён STP.

Ожидаемый результат

В alerts_critical.log должны появиться:

  • SPANTREE-2-BLOCK_BPDUGUARD
  • PM-4-ERR_DISABLE

Проверка:

show logging | include BPDU|ERR_DISABLE
show interfaces status err-disabled
show errdisable recovery

Возврат в исходное состояние

conf t
interface fa1/0/11
shutdown
no shutdown
end


MAC_MOVE-4-NOTIF

Назначение теста

Проверка реакции коммутатора на появление одного и того же MAC-адреса на двух портах одной VLAN. Для 3750 это документированное сообщение MAC_MOVE-4-NOTIF; Cisco рекомендует при таком событии проверять сеть на петли.

Настройка на коммутаторе

conf t
mac address-table notification mac-move
interface fa1/0/12
description TEST_MAC_MOVE_A
switchport mode access
switchport access vlan 20
no shutdown
interface fa1/0/13
description TEST_MAC_MOVE_B
switchport mode access
switchport access vlan 20
no shutdown
end

Воспроизведение

Подключить два тестовых хоста к `Fa1/0/12` и `Fa1/0/13`.

На обоих хостах задать одинаковый MAC-адрес и запустить обмен трафиком в одной VLAN. 
Важно, чтобы оба хоста реально передавали кадры, иначе коммутатор не начнет переучивать MAC-адрес между портами.

После этого с обоих хостов запустить пинг до шлюза или другого адреса в VLAN.

Примечание:
- на тестовом C3750v2 ожидаемым сообщением является `MAC_MOVE-4-NOTIF`;
- на более новых сериях Cisco аналогичное по смыслу событие может приходить как `SW_MATM-4-MACFLAP_NOTIF`.

Ожидаемый результат

В alerts_behavior.log должно появиться:

  • MAC_MOVE-4-NOTIF или
  • SW_MATM-4-MACFLAP_NOTIF

Проверка:

show logging | include MAC_MOVE|SW_MATM
show mac address-table dynamic vlan 20
show mac address-table notification mac-move

Возврат в исходное состояние

Вернуть нормальные MAC-адреса на тестовых хостах и очистить таблицу динамических MAC-адресов:

clear mac address-table dynamic

STORM_CONTROL-3-FILTERED

Назначение теста

Проверка того, что при превышении порога широковещательного или многоадресного трафика коммутатор начинает фильтрацию и пишет соответствующее предупреждение. Cisco описывает STORM_CONTROL-3-FILTERED как факт обнаружения шторма и применения фильтрации.

Настройка порта

conf t
interface fa1/0/14
description TEST_STORM_FILTER
switchport mode access
switchport access vlan 30
storm-control broadcast level 0.50 0.25
storm-control multicast level 0.50 0.25
no shutdown
end

Воспроизведение

Подать на интерфейс `Fa1/0/14` поток широковещательных кадров, достаточный для превышения заданного порога `storm-control`.

Тест выполнять только в изолированной лабораторной VLAN.
При данном сценарии ожидается уже не просто фильтрация, а перевод порта в отключенное состояние.

Ожидаемый результат

В alerts_warning.log должно появиться:

  • STORM_CONTROL-3-FILTERED

Проверка:

show logging | include STORM_CONTROL
show storm-control
show interfaces fa1/0/14 counters


STORM_CONTROL-3-SHUTDOWN

Назначение теста

Проверка более жёсткого режима storm-control, при котором порт не просто режет трафик, а отключается. Cisco документирует storm-control action shutdown, а STORM_CONTROL-3-SHUTDOWN — как сообщение о переводе интерфейса в отключённое состояние из-за шторма.

Настройка порта

conf t
interface fa1/0/14
description TEST_STORM_SHUTDOWN
switchport mode access
switchport access vlan 30
storm-control broadcast level 0.50 0.25
storm-control action shutdown
no shutdown
end

Воспроизведение

Подать на интерфейс поток широковещательных кадров.

Ожидаемый результат

В alerts_critical.log должно появиться:

  • STORM_CONTROL-3-SHUTDOWN

Проверка:

show logging | include STORM_CONTROL
show interfaces status err-disabled
show storm-control

Возврат в исходное состояние

conf t
interface fa1/0/14
shutdown
no shutdown
end


SPANTREE-2-ROOTGUARD_BLOCK

Назначение теста

Проверка реакции Root Guard на superior BPDU. Cisco описывает Root Guard как механизм, который переводит порт в root-inconsistent и не даёт нежелательному устройству стать корнем дерева. Это поведение описано и для IOS/IOS XE, и для Catalyst 1300.

Настройка на C3750v2

conf t
interface fa1/0/15
description TEST_ROOT_GUARD
switchport mode access
switchport access vlan 40
spanning-tree guard root
no shutdown
end

Воспроизведение

На втором коммутаторе задать более низкий приоритет для VLAN 40, чтобы он начал слать superior BPDU.

Ожидаемый результат

В alerts_warning.log должно появиться:

  • SPANTREE-2-ROOTGUARD_BLOCK

Проверка:

show logging | include ROOTGUARD
show spanning-tree inconsistentports
show spanning-tree vlan 40


SPANTREE-5-TOPOTRAP

Назначение теста

Проверка уведомления о перестроении дерева STP. По одному сообщению это ещё не авария, но как накопительный признак событие полезно. Cisco документирует TOPOTRAP как уведомление о topology change.

Воспроизведение

На межкоммутаторном порту без PortFast выполнить:

conf t
interface fa1/0/16
shutdown
no shutdown
end

Ожидаемый результат

В alerts_behavior.log должно появиться:

  • SPANTREE-5-TOPOTRAP

Проверка:

show logging | include TOPOTRAP
show spanning-tree vlan 40 detail | include occurr|from|to


SPANTREE-5-ROOTCHANGE

Назначение теста

Проверка изменения корневого коммутатора или корневого порта. Это полезный поведенческий индикатор. Cisco описывает ROOTCHANGE именно как изменение root-состояния в экземпляре STP.

Воспроизведение

На DUT сначала сделать его корнем VLAN 50, а затем на втором коммутаторе выставить ещё более низкий приоритет.

Ожидаемый результат

В alerts_behavior.log должно появиться:

  • SPANTREE-5-ROOTCHANGE

Проверка:

show logging | include ROOTCHANGE
show spanning-tree vlan 50


SPANTREE-2-LOOPGUARD_BLOCK

Назначение теста

Проверка защиты Loop Guard. Cisco описывает её как механизм, который не даёт alternate/root-порту стать designated-портом при отказе, ведущем к однонаправленной ситуации; Loop Guard работает только на point-to-point портах, и Root Guard с Loop Guard нельзя включать одновременно на одном интерфейсе. Это правило явно указано для IOS XE и C1000.

Настройка на DUT

conf t
spanning-tree loopguard default
interface fa1/0/17
description TEST_LOOPGUARD_A
switchport mode access
switchport access vlan 60
no shutdown
interface fa1/0/18
description TEST_LOOPGUARD_B
switchport mode access
switchport access vlan 60
no shutdown
end

Воспроизведение

Нужны два параллельных линка до второго коммутатора, чтобы один из портов на DUT стал alternate. После стабилизации STP на втором коммутаторе временно подавить BPDU на одном из ответных портов.

Ожидаемый результат

В alerts_warning.log должно появиться:

  • SPANTREE-2-LOOPGUARD_BLOCK

Проверка:

show logging | include LOOPGUARD
show spanning-tree inconsistentports
show spanning-tree vlan 60


SPANTREE-2-CHNL_MISCFG

Назначение теста

Проверка защиты от неправильной сборки EtherChannel. Cisco описывает это сообщение как обнаруженную петлю из-за неправильной конфигурации EtherChannel. Для IOS XE Cisco отдельно напоминает, что spanning-tree-параметры канала надо задавать на интерфейсе port-channel, а не разрозненно на физических участниках.

Настройка на DUT

conf t
spanning-tree etherchannel guard misconfig
interface range fa1/0/19 - 20
description TEST_ETHERCHANNEL_MISCFG
switchport mode trunk
channel-group 1 mode on
no shutdown
interface port-channel1
switchport mode trunk
no shutdown
end

Воспроизведение

На втором коммутаторе не собирать обе линии в канал. Оставить их как отдельные порты.

Ожидаемый результат

В alerts_critical.log должно появиться:

  • SPANTREE-2-CHNL_MISCFG

Также может появиться:

  • PM-4-ERR_DISABLE

Проверка:

show logging | include CHNL_MISCFG|ERR_DISABLE
show interfaces status err-disabled
show etherchannel summary


UDLD-4-UDLD_PORT_DISABLED

Назначение теста

Проверка реакции на однонаправленное соединение. Cisco документирует UDLD-4-UDLD_PORT_DISABLED как отключение интерфейса из-за обнаружения однонаправленного линка; UDLD рекомендуется для uplink-портов, особенно на оптике.

Настройка на DUT

conf t
interface gi1/0/1
description TEST_UDLD
udld port
no shutdown
end

Воспроизведение

Использовать межкоммутаторный uplink между C3750v2 и C9200, предпочтительно по оптике через SFP.

Включить UDLD на обоих концах uplink и затем создать однонаправленность на линии.
Такой тест проводить только на отдельном стенде и только на тестовом uplink, не задействованном в боевой сети.

Ожидаемый результат

В alerts_critical.log должно появиться:

  • UDLD-4-UDLD_PORT_DISABLED

Проверка:

show logging | include UDLD
show udld interface gi1/0/1
show interfaces status err-disabled


Что считать минимально достаточным набором проверок

Если задача — не проверить вообще всё, а убедиться, что схема _alerts работает, достаточно сделать:

  • BPDU Guard
  • MAC_MOVE-4-NOTIF
  • STORM_CONTROL-3-FILTERED
  • STORM_CONTROL-3-SHUTDOWN
  • ROOTGUARD_BLOCK
  • TOPOTRAP
  • ROOTCHANGE

LOOPGUARD_BLOCK, CHNL_MISCFG и UDLD_PORT_DISABLED требуют более сложного межкоммутаторного стенда, поэтому их можно выполнять вторым этапом.

Если в распоряжении есть второй коммутатор Cisco, оптические uplink-линии и SFP-модули, эти проверки также можно выполнить в рамках текущего лабораторного стенда.

олжаем

Создаем файл конфига для logrotate

touch /etc/logrotate.d/remote-syslog

Открываем его

nano /etc/logrotate.d/remote-syslog

Вставляем

/var/log/remote/*/*.log /var/log/remote/*/*/*.log /var/log/remote/_alerts/*.log {
    daily
    rotate 30
    missingok
    notifempty
    compress
    delaycompress
    dateext
    dateyesterday
    dateformat -%Y%m%d
    sharedscripts
    postrotate
        systemctl kill -s HUP rsyslog >/dev/null 2>&1 || true
    endscript
}

Для архивных логов используется именование по дате предыдущего дня.
Это позволяет видеть, за какой именно день был сформирован архивный файл, например all.log-20260413.gz, а не использовать только числовые индексы .1, .2 и т.д.

Проверяем

sudo logrotate -d /etc/logrotate.d/remote-syslog
sudo logrotate -f /etc/logrotate.d/remote-syslog

Ставим Zabbix агент (качаем пакет подключения репозитория, подключаем репозиторий через установку пакета, обновляем репозитории и устанавливаем агент)

wget https://repo.zabbix.com/zabbix/7.0/ubuntu/pool/main/z/zabbix-release/zabbix-release_latest_7.0+ubuntu24.04_all.deb
sudo dpkg -i zabbix-release_latest_7.0+ubuntu24.04_all.deb
sudo apt update
sudo apt install -y zabbix-agent2

Добавляем в группу syslog пользователя zabbix (что бы можно было читать log файлы)

sudo usermod -aG syslog zabbix

Открываем файл настройки агента

sudo nano /etc/zabbix/zabbix_agent2.conf

Вставляем следующее в соответствующих разделах

# Кто имеет право опрашивать агент по passive checks.
# Разрешаем подключения от серверов и/или proxy из сети 10.10.99.0/24
Server=10.10.99.0/24

# Куда агент сам будет подключаться за active checks
# и куда будет отправлять данные по active items
ServerActive=10.10.99.7:10051;10.10.99.8:10051

# Имя этого хоста в Zabbix.
# Должно совпадать с именем хоста, созданного в веб-интерфейсе Zabbix
Hostname=syslog-collector

Добавляем в автозагрузку 

sudo systemctl enable --now zabbix-agent2

Перезагружаем и проверяем

sudo systemctl restart zabbix-agent2
sudo systemctl status zabbix-agent2 --no-pager