Перейти к содержанию

Лабораторная 4. Отказоустойчивая граница сети

Теория · Критерии проверки

Как выполнять работу

Сначала выполните отдельные работы NTP, FHRP и NAT. Здесь те же механизмы работают совместно: ошибка в одном из них может выглядеть как отказ другого.

Выполняйте шаги по порядку и сохраняйте результат проверки каждого шага. Команды настройки вводите после configure terminal, проверки — после end. Примеры для BR1 адаптируйте для BR2 по таблице адресации; не копируйте адреса и router-id без изменения. Перед остановкой узлов сохраняйте конфигурацию: copy running-config startup-config.

На вопросы EDGE-1 — EDGE-10 обязательно ответьте в отчёте: объясните результат своими словами и приложите собственное доказательство. Общие требования: оформление отчёта.

Порядок сборки: связность → OSPF → проверка WAN → HSRP → допуск к анонсу дефолта → NAT → NTP → отказы. До шага 5 отсутствие маршрута по умолчанию на CORE ожидаемо; до шага 6 выход PC к внешнему сервису ещё не обязан работать.

Цель

Объединить OSPF, ECMP, HSRP, NAT и NTP. Доказать работу обоих внешних адресов после отказа любого BR и объяснить, почему резервирование адресов не равно синхронизации соединений.

Архитектура

          ISP: 203.0.113.1/29
          Lo0: 198.51.100.10
                   |
            общий WAN-мост
              /         \
            BR1         BR2
              \         /
             L3 CORE, OSPF
              /         \
          VLAN10       VLAN20
            PC1         PC2

CORE — настоящий виртуальный L3-коммутатор IOSvL2. Он использует программный CEF и ECMP; это не проверка аппаратного ASIC Catalyst. Внутреннего HSRP нет: шлюзы VLAN находятся на CORE, а отказ граничного пути обрабатывает OSPF.

Обозначения: BR — граничный маршрутизатор; VIP — виртуальный IP HSRP; uplink — соединение к вышестоящему узлу; дефолт — маршрут 0.0.0.0/0; next-hop — следующий маршрутизатор на пути. ECMP позволяет выбирать между маршрутами равной стоимости, CEF выполняет пересылку пакетов. Краткая теория описывает роль каждого механизма.

Узел Интерфейс Адрес
ISP Gi0/0 203.0.113.1/29
BR1 Gi1, WAN 203.0.113.2/29
BR2 Gi1, WAN 203.0.113.3/29
HSRP 4 Public-A, основной BR1 203.0.113.4
HSRP 5 Public-B, основной BR2 203.0.113.5
BR1 ↔ CORE Gi2 ↔ Gi0/0 10.255.1.1/30 ↔ 10.255.1.2/30
BR2 ↔ CORE Gi2 ↔ Gi0/1 10.255.2.1/30 ↔ 10.255.2.2/30
BR1 / BR2 / CORE Lo0 10.255.0.1/32, .2/32, .3/32
CORE Vlan10, access Gi0/2 10.40.10.1/24
CORE Vlan20, access Gi0/3 10.40.20.1/24
PC1 / PC2 Gi0/0 10.40.10.10/24, 10.40.20.10/24; дополнительные источники .11 в обеих LAN

ZIP для импорта · Отдельный .unl. Конфиги: BR1, BR2, CORE, ISP, PC1, PC2.

Условия ISP

Провайдер выделил строго два адреса для пользовательского трафика: .4 и .5. Транспортные .2 и .3 используются в том же сегменте, ARP не фильтруется. ACL ISP уже настроен.

Здесь и далее .1–.5 в описании WAN означают адреса 203.0.113.1–203.0.113.5. Адрес внешнего сервиса — 198.51.100.10; это изолированный учебный ответчик, не настоящий интернет.

Для независимого восстановления BR сделаны узкие служебные исключения: ICMP от .2/.3 только к шлюзу .1, NTP от .2/.3 только к .1. Это не разрешение выхода транспортных адресов к внешнему сервису. Отдельно разрешены HSRP hello. Без явно описанного служебного канала нельзя строить IP SLA, зависящий от ещё не полученного VIP.

Как совместить ECMP и независимый PAT

BR1 выполняет PAT через Public-A, BR2 — через Public-B. ECMP выбирает BR для исходящего потока, а публичный адрес после NAT направляет ответ именно на этот BR. Поэтому ECMP сам по себе не запрещает PAT. Опасно использовать один адрес на двух независимых BR одновременно или начинать PAT до получения своего VIP.

После отказа новые соединения идут через исправный BR и его собственный PAT-адрес. Второй VIP тоже переходит на него: оба адреса продолжают принимать опубликованные сервисы TCP/8080, описанные ниже. PAT-таблица отказавшего BR не переносится; старые соединения через него теряются. Не обещаем, что исправный BR распределяет новые PAT-сессии сразу между двумя адресами.

Для безопасного возврата BR проверяет не только транспортный WAN, но и доступность ISP с собственного основного VIP. До получения этого VIP дефолт не анонсируется. Для HSRP используется отдельная транспортная проверка — иначе возникла бы зависимость «не получил VIP → понизил приоритет → никогда не получу VIP».

Это стендовый вариант для выбранного CSR 17.3.8a, а не включение отдельной функции HSRP-aware Dynamic NAT. При смене платформы обязательно заново проверить совместную работу NAT-пула, HSRP, ARP и проб с виртуального адреса; одно принятие команд CLI не доказывает поддержку схемы.

Служебная защита NAT-alias

В стартовых BR уже установлен небольшой EEM-адаптер: BR1, BR2. Он наблюдает свою основную группу HSRP. При потере Active сначала ставит 5 deny any в ACL выбора PAT, затем очищает старые динамические трансляции. При получении Active удаляет строку 5. Синхронизации с соседом нет.

Это необходимо для данного образа: заполненный PAT-пул может сохранять ARP-alias адреса даже после потери HSRP-роли. Одной очистки таблицы недостаточно — пока OSPF сходится, новые пакеты могли бы создать alias снова. Поэтому сначала блокируется создание новых PAT-записей, затем удаляются старые. Статические публикации остаются.

Не удаляйте адаптер и не используйте sequence 5 для своих правил. Основные учебные задачи — HSRP, маршрутизация и NAT; EEM-фрагмент предоставлен как подготовленная служебная часть стенда. Изучите его назначение и подтвердите выполнение через show logging | include EDGE_NAT_ROLE.

Шаг 1. Базовая сеть

Проверьте show ip interface brief на всех узлах и ping непосредственных соседей:

  • С каждого PC — свой шлюз VLAN (10.40.10.1 или 10.40.20.1).
  • С CORE — 10.255.1.1 и 10.255.2.1.
  • С каждого BR — 203.0.113.1 и адрес CORE на своём внутреннем соединении.

На CORE проверьте show vlan brief: VLAN 10/20 должны существовать, Gi0/2 и Gi0/3 — относиться к нужным VLAN. SVI — логический интерфейс VLAN (Vlan10/Vlan20), который служит шлюзом клиентов.

Если после начального импорта IOSvL2 SVI остался down при активной VLAN и forwarding-порту, выполните shutdown / no shutdown на соответствующем interface Vlan10 или Vlan20. Это наблюдавшаяся особенность загрузки данного образа; в рабочей сети сначала нужно искать причину down, а не бездумно перезапускать интерфейс.

Контрольный вопрос EDGE-1. Какие шлюзы настроены на PC1 и PC2? Почему HSRP размещён на внешних BR, а не на внутренних VLAN? Какой отказ CORE эта схема не переживёт?

Шаг 2. OSPF и равнозначные пути

На BR настройте процесс 1, уникальные router-id, Gi2 в area 0, тип сети point-to-point и cost 10. Объявите Lo0, оставив его passive. На CORE объявите оба uplink, Lo0 и сети VLAN; клиентские интерфейсы должны быть passive. Оба uplink — point-to-point, cost 10, максимум путей — 2.

Пример BR1:

router ospf 1
 router-id 10.255.0.1
 passive-interface default
 no passive-interface GigabitEthernet2
interface GigabitEthernet2
 ip ospf 1 area 0
 ip ospf network point-to-point
 ip ospf cost 10
interface Loopback0
 ip ospf 1 area 0

На CORE используйте network 10.0.0.0 0.255.255.255 area 0 и разрешите соседство только на Gi0/0–Gi0/1. Не включайте OSPF на WAN. До перехода дальше подтвердите FULL с обоими BR и маршруты к обеим LAN на BR.

Сохраните show ip ospf neighbor на CORE и BR, show ip route 10.40.10.0 и show ip route 10.40.20.0 на обоих BR. Проверьте связь PC1 с PC2. Два маршрута по умолчанию проверяются позже, после шага 5.

Контрольный вопрос EDGE-2. Какие OSPF-соседства установились и через какие интерфейсы? Для чего клиентские интерфейсы делают passive? Чем наличие двух FULL-соседей отличается от наличия двух равнозначных дефолтных маршрутов?

Шаг 3. Условный дефолт

На каждом BR:

ip sla 1
 icmp-echo 203.0.113.1 source-interface GigabitEthernet1
 threshold 500
 timeout 1000
 frequency 3
exit
ip sla schedule 1 life forever start-time now
track 1 ip sla 1 reachability
 delay down 6 up 15
exit
ip route 203.0.113.1 255.255.255.255 GigabitEthernet1 203.0.113.1
router ospf 1
 default-information originate metric 10 metric-type 1

Параметры SLA согласованы: threshold ≤ timeout < период опроса. Проверка привязана к собственному WAN, а не к пути через второй BR. Здесь проверяем ближайший шлюз ISP, не работоспособность всего интернета.

Пока проверяем успешные операции SLA и track 1 Up. Дефолт добавим после проверки владения VIP ниже. Не используйте always.

На обоих BR выполните show ip sla statistics 1, show track 1 и show ip route 203.0.113.1. Убедитесь, что проба использует собственный WAN, а не маршрут через CORE.

Контрольный вопрос EDGE-3. Что именно проверяет SLA 1? Для чего заданы источник и отдельный маршрут к ISP? Объясните единицы и назначение threshold, timeout, frequency и задержек track. Почему доступность ближайшего шлюза не доказывает доступность всех внешних сервисов?

Шаг 4. Внешний HSRP

На Gi1 обоих BR создайте HSRPv2 группы 4 и 5: номер группы совпадает с последним октетом обслуживаемого VIP. Группа 4 обслуживает Public-A (203.0.113.4), группа 5 — Public-B (203.0.113.5). Это соглашение для удобства чтения, а не требование HSRP. Для Public-A приоритет BR1/BR2 — 110/100, для Public-B — 100/110. Добавьте preempt с задержкой 30 секунд и снижение приоритета на 30 при падении track 1.

Создайте track 2 interface GigabitEthernet2 line-protocol и добавьте снижение приоритета обеих групп на 30 при падении track 2. Это защищает от приёма внешних пакетов на BR, потерявший связь с CORE.

После стабилизации BR1 должен быть active группы 4, BR2 — active группы 5. Номера HSRP-групп не связаны с номерами объектов track: например, группа HSRP 4 и составной track 4 — разные сущности. С ISP проверьте ARP и соответствие виртуальных MAC: HSRPv2 использует 0000.0c9f.f004 для группы 4 и 0000.0c9f.f005 для группы 5. По одному ping самого VIP ещё нельзя доказать корректность NAT.

Сохраните show standby brief, show standby и show track 2. Дальше переходите только после ожидаемого распределения ролей.

Контрольный вопрос EDGE-4. Кто владеет Public-A и Public-B в штатном режиме? Какими станут приоритеты при отказе WAN или внутреннего порта BR? Почему потеря связи с CORE должна менять внешнюю HSRP-роль, даже если WAN исправен?

Шаг 5. Владение адресом и дефолт

На BR1 используйте Public-A, на BR2 — Public-B. Пример BR1:

ip sla 2
 icmp-echo 203.0.113.1 source-ip 203.0.113.4
 threshold 500
 timeout 1000
 frequency 3
exit
ip sla schedule 2 life forever start-time now
track 3 ip sla 2 reachability
 delay up 6 down 3
exit
track 4 list boolean and
 object 1
 object 2
 object 3
 delay up 5
exit
ip route 0.0.0.0 0.0.0.0 203.0.113.1 track 4

Как работает список track 4

Команда track 4 list boolean and создаёт составной объект: его состояние вычисляется как логическое И состояний объектов 1, 2 и 3. Строки object 1, object 2, object 3 включают в список уже настроенные объекты — они не создают новые SLA-пробы.

Объект Условие Up в этой работе
Track 1 ISP отвечает на пробу с транспортного WAN-адреса BR
Track 2 Внутренний интерфейс BR к CORE поднят
Track 3 ISP отвечает на пробу с основного VIP этого BR
Track 4 Все три условия выше выполнены одновременно, затем выдержана задержка Up

Разберём оставшиеся строки блока:

  • delay up 5 задаёт 5 секунд задержки перехода составного объекта в Up. Все три дочерних объекта должны оставаться Up в течение этой задержки; если один из них станет Down, ожидающий переход в Up отменяется. Это не интервал отправки SLA-проб: его задаёт frequency в настройках SLA.
  • Задержка Down для списка не задана: при переходе любого дочернего объекта в Down track 4 тоже переходит в Down без дополнительного ожидания на уровне списка. Однако собственные задержки дочерних объектов сохраняются: например, track 1 сообщает о потере доступности только после своего delay down 6. Обнаружение отказа всей схемой поэтому не является мгновенным.
  • exit завершает настройку списка и возвращает в глобальный режим конфигурации. Следующая команда ip route ... track 4 вводится уже в этом режиме.
  • Статический маршрут по умолчанию через ISP разрешён только при Up объекта 4. При Down он удаляется из таблицы маршрутизации. Это не отключает интерфейсы и само по себе не меняет роль HSRP.

Пример: WAN и соединение с CORE работают, но основной VIP находится у соседнего BR. Тогда track 1/2 — Up, track 3 — Down, а значит, track 4 — Down и собственный статический дефолт через ISP отсутствует. После возврата VIP сначала должна успешно завершиться SLA-проба и задержка Up объекта 3, затем — задержка Up объекта 4. Эти задержки не заменяют друг друга.

Проверьте show track 4: в выводе должны быть тип Boolean AND, объекты 1/2/3, их состояния и настроенная задержка Up. Сопоставьте результат с show ip route 0.0.0.0 на том же BR. Состояние списка и наличие собственного статического маршрута должны согласовываться; маршрут OSPF через CORE, если он есть, рассматривайте отдельно.

На BR2 источник SLA 2 — 203.0.113.5. Когда VIP обслуживает сосед, ответы пробы уходят соседу и собственная проба не проходит. Это необходимо проверить фактически, включая ARP после появления NAT-сессий. В штатном состоянии все четыре track Up и CORE имеет два дефолтных next-hop. Во время возврата BR задержка preempt допустима: до получения собственного адреса его дефолта на CORE быть не должно.

Не добавляйте track 3 или 4 в HSRP! Владение VIP влияет на допуск к маршрутизации, но не должно само понижать приоритет получения этого VIP.

Проверьте show ip sla statistics 2, show track и show ip route 0.0.0.0 на обоих BR. На CORE сохраните show ip route 0.0.0.0 и show ip cef 0.0.0.0 0.0.0.0: ожидаются два пути. При отказах различайте собственный статический дефолт BR и маршрут, который BR может выучить по OSPF через CORE.

Контрольный вопрос EDGE-5. Чем SLA 2 отличается от SLA 1? Запишите условие track 4 через логическое И и объясните каждую его часть. Почему BR с работающим WAN, но без своего основного VIP не должен анонсировать собственный дефолт? Что случится при включении track 3 в снижение приоритета HSRP?

Шаг 6. PAT и публикация сервисов

Одинаково на обоих BR:

interface GigabitEthernet2
 ip nat inside
interface GigabitEthernet1
 ip nat outside
exit
ip access-list standard INSIDE_NAT
 10 permit 10.40.10.0 0.0.0.255
 20 permit 10.40.20.0 0.0.0.255
exit

На BR1:

ip nat pool LOCAL_PUBLIC 203.0.113.4 203.0.113.4 netmask 255.255.255.248
ip nat inside source list INSIDE_NAT pool LOCAL_PUBLIC overload

На BR2 в пуле только .5. Это не общий пул .4–.5: каждый BR должен использовать для исходящего PAT именно свой основной VIP.

На обоих BR одинаковые публикации:

ip nat inside source static tcp 10.40.10.10 80 203.0.113.4 8080 no-alias
ip nat inside source static tcp 10.40.20.10 80 203.0.113.5 8080 no-alias

Включите ip http server на обоих PC. Проверьте с каждого PC ping к 198.51.100.10 с источником .10 и .11: четыре источника должны работать без добавления четырёх статических соответствий. С ISP обращайтесь к .4:8080 и .5:8080 через telnet и ручной HTTP GET, как в отдельной NAT-лабе. Ответ HTTP 401 доказывает доставку до сервиса, но не авторизацию. Локальный ответ самого VIP на ping этого не доказывает.

Например, с PC1 выполните ping 198.51.100.10 source 10.40.10.10 repeat 5, затем с источником 10.40.10.11. На PC2 используйте 10.40.20.10 и 10.40.20.11. С ISP откройте telnet 203.0.113.4 8080, отправьте GET / HTTP/1.0 и пустую строку; повторите для 203.0.113.5. Сохраните таблицы NAT на обоих BR сразу после трафика.

no-alias относится к статическим публикациям, но не отключает alias динамического пула. Проверьте реальные ARP также после генерации PAT-трафика и переключения ролей. Активный владелец может отвечать виртуальным MAC HSRP либо своим BIA из-за NAT-пула; недопустим ответ неактивного BR. Сопоставляйте MAC с фактической ролью в момент захвата. Статические публикации одинаковы на BR: обратный ответ сервера может пройти через другой BR по ECMP. Для stateful firewall такая асимметрия потребовала бы отдельного решения.

Контрольный вопрос EDGE-6. Проследите запрос PC к ISP и ответ для потока через BR1 или BR2: какие адреса видны до и после PAT и почему ответ приходит владельцу нужной трансляции? Чем обратный путь опубликованного HTTP-сервиса отличается от этого случая? Подтвердите вывод таблицами NAT и пакетами.

Контрольный вопрос EDGE-7. Для чего в статических публикациях нужен no-alias и какую отдельную проблему решает подготовленный EEM-адаптер? Почему он сначала запрещает создание PAT-записей и только затем очищает старые? Является ли 5 deny any в ACL выбора PAT фильтрацией пакетов или синхронизацией состояний с соседом?

Шаг 7. NTP

ISP уже настроен как автономный учебный NTP master. На BR настройте ntp server 203.0.113.1 и ntp source GigabitEthernet1. CORE синхронизируйте с Lo0 обоих BR: ntp server 10.255.0.1 и .2. Он не должен выходить к ISP со своим частным адресом в обход согласованной NAT-политики.

До настройки клиентов NTP проверьте show ntp status на ISP. При необходимости задайте на нём правдоподобное текущее время командой EXEC clock set, как в отдельной работе NTP, и дождитесь готовности источника.

Далее дождитесь устойчивой синхронизации сначала BR, затем CORE. На каждом из этих узлов сохраните show clock detail, show ntp status и show ntp associations detail: выбранный источник, stratum и состояние loopfilter CTRL. Единый timezone UTC упрощает сравнение журналов, но сам по себе не доказывает синхронизацию. Последовательное согласование нескольких уровней требует времени; укажите фактическое ожидание.

Контрольный вопрос EDGE-8. Нарисуйте цепочку источников времени от ISP до CORE. Какие stratum ожидаются и какие реально получены? Почему BR использует транспортный адрес Gi1, а CORE обращается к Lo0 BR? Доказывает ли совпадение отображаемого времени устойчивую синхронизацию и точность UTC?

Шаг 8. ECMP и отказы

На CORE проверьте show ip cef 0.0.0.0 0.0.0.0 и, если поддерживается, show ip cef exact-route 10.40.10.10 198.51.100.10. Хеширование не обязано распределить два выбранных потока поровну. Не называйте наличие двух маршрутов доказательством одинаковой загрузки.

Контрольный вопрос EDGE-9. Какие два next-hop есть в RIB (таблице маршрутизации) и CEF? Через какой BR реально прошли выбранные потоки и как вы это проверили? Почему два равнозначных пути не гарантируют распределение трафика 50/50?

Если оба потока попали на один BR, это допустимо. Для дополнительного опыта сначала создайте на ISP реальные дополнительные назначения:

interface Loopback1
 ip address 198.51.100.20 255.255.255.255
interface Loopback2
 ip address 198.51.100.30 255.255.255.255
interface Loopback3
 ip address 198.51.100.40 255.255.255.255

Затем выполните ping с обоих PC к .10, .20, .30, .40, сравните exact-route и захваты на внутренних uplink BR. Счётчики интерфейсов содержат также служебный трафик OSPF/HSRP — учитывайте это. До создания этих Loopback отвечать должен только исходный .10: произвольные адреса диапазона не являются готовыми серверами.

Вносите по одному отказу, после каждого возвращайте штатный режим. Перед опытом сохраните роли HSRP, маршруты, track и NAT, запустите повторные пробы с PC. Для проверки сохранения старого TCP-соединения откройте его до отказа и наблюдайте отдельно от новых подключений. Запишите время внесения отказа и интервалы проверок.

Остановка узла выполняется в PNETLab только для собственной копии стенда. Для отказа интерфейса используйте shutdown в его режиме настройки, для возврата — no shutdown.

Опыт Ожидаемое наблюдение
Остановка BR1 Один дефолт через BR2, оба VIP на BR2, оба PC устанавливают новые соединения
Остановка BR2 Симметричный результат через BR1
Shutdown Gi1 BR1/BR2 Падение SLA/track, отзыв собственного дефолта, переход VIP
Shutdown Gi2 BR1/BR2 Удаление пути на CORE, track 2 передаёт внешние VIP исправному BR
Восстановление Возврат соседства, дефолта и предпочтительных ролей после задержек
Отказ ISP Потеря внешней доступности; резервирование общего ISP отсутствует

Обязательный опыт: передача VIP без отказа интерфейсов

  1. В штатном режиме создайте PAT-трафик через BR1. Убедитесь по его таблице NAT, что динамические записи действительно появились. Если выбранные потоки идут через BR2, используйте дополнительные пары адресов из опыта ECMP выше.
  2. При исправных WAN/LAN на Gi1 BR1 задайте standby 4 priority 90. Дождитесь перехода Public-A на BR2.
  3. Проверьте на BR1: track 1/2 Up, track 3/4 Down, собственный статический дефолт отсутствует; на CORE остался один дефолтный путь.
  4. Проверьте show access-lists INSIDE_NAT, таблицу NAT и show logging | include EDGE_NAT_ROLE: строка 5 deny any появилась, прежние динамические записи очищены.
  5. На ISP очистите динамический ARP-кэш командой clear arp-cache и повторите обращение к Public-A с захватом arp на WAN. Это допустимо только на изолированном учебном ISP. После стабилизации отвечать должен текущий владелец, а не прежний BR1.
  6. На BR1 верните standby 4 priority 110. Дождитесь preempt, возврата VIP, удаления строки 5 и восстановления второго дефолта на CORE. Повторите проверку ARP после возврата роли.

Это проверяет согласование PAT и владения адресом, а не обрыв интерфейса. Сохраните отдельные доказательства двух устойчивых состояний и перехода между ними.

Сохранение установленных TCP-сессий не гарантируется. Даже возврат второго ECMP-пути способен изменить путь соединения. Опубликованные сервисы и исходящие PAT-сессии проверяйте отдельно; не приписывайте успешное новое соединение синхронизации состояний.

Контрольный вопрос EDGE-10. Для каждого отказа укажите последовательность изменений HSRP, track и маршрутов, потери пакетов и результат новых подключений к обоим публичным адресам. Чем передача VIP изменением priority отличается от выключения BR? Что произошло со старыми PAT-сессиями? Какие общие точки отказа остались?

Приёмка

Предоставьте схему, маршрут пакета в обе стороны, OSPF/CEF, HSRP, tracking/SLA, NAT, NTP и ACL ISP. Обязательны проверки обоих внешних адресов после отказа каждого BR и новых соединений от обоих PC, а не только одного успешного ping с маршрутизатора.

Приложите ответы EDGE-1 — EDGE-10. Матрица должна включать шесть отдельных отказов BR (питание, WAN и LAN каждого), их восстановления, передачу VIP изменением priority и отказ общего ISP. Дополнительные адреса для исследования ECMP нужны только при необходимости; равномерная загрузка и сохранение старых TCP-сессий не являются условиями зачёта.