ОТЧЕТ О ПРОВЕРКЕ ШАССИ CISCO CATALYST 4503-E
21.03.2018, мной сертифицированным специалистом CISCO (ID #CSCO10115756), Бочаровым Максимом Владимировичем, сотрудником ООО «Матадор Финанс Групп» в офисе компании был диагностирован и проверен на наличии дефектов коммутатор CISCO Catalyst 4503-E, в составе:
WS-C4503-E, S/N: FXS1715Q2A3, Hw: v02 1 шт. шасси
WS-X45-SUP7-E, S/N: CAT1323L002 Hw: 0.3 1 шт. супервизор
WS-X4748-RJ45-E, S/N: CAT1847L322, Hw: 1.0 1 шт. инт. плата
WS-X4624-SFP-E, S/N: JAE152306LG, Hw: 1.2 1 шт. инт. плата
PWR-C45-1400AC Hw: v04 2 шт. БП
По предварительной исходной информации, коммутатор дает периодические сбои при работе в локальной сети, отключает все устройства от сети, после перезагрузки коммутатора работа сети восстанавливается, но через некоторое время (от 2 до 30 часов) ситуация повторяется.
1. Обнаружено, что ROMMON коммутатора (ПО обеспечивающее загрузку шасси и интерфейсных плат и их дальнейшую работоспособность) имеет устаревшую версию - 15.0(1r)SG11, год выпуска 2014:
Rom Monitor (P) Version 15.0(1r)SG11
CPU Rev: 1.1, Board Rev: 3, Board Type: 101
CPLD Moka Rev: 7.0x2643.0x5956
Chassis: WS-C4503-E
MAC Address: 00-26-0b-79-69-35
В соответствии с рекомендациями производителя оборудования CISCO, возможно и необходимо на данном шасси выполнить обновление ROMMON до последней версии - 15 (Rom Monitor (P) Version 15.0(1r)SG(15), год выпуска 2017).
Мной, была выполнена процедура обновления ROMMON до версии 15.0(1r)SG(15) по процедуре, в соответствии с рекомендациями производителя и технической документацией.
Rom Monitor (P) Version 15.0(1r)SG(15)
CPU Rev: 1.1, Board Rev: 3, Board Type: 101
CPLD Moka Rev: 7.0x2643.0x5956
Chassis: WS-C4503-E
MAC Address: 00-26-0b-79-69-35
2. Также, было обнаружено, что операционная система управления шасси IOS XE имеет версию cat4500e-universal.SPA.03.06.04.E.152-2.E4.bin. Что является устаревшей версией ПО и содержит ряд ошибок, описанных в документации.
В соответствии с рекомендациями производителя оборудования CISCO, возможно и необходимо на данном шасси выполнить обновление операционной системы управления шасси IOS XE до последней версии – cat4500e-universalk9.SPA.03.09.02.E.152-5.E2.bin, год выпуска – май 2017).
Мной, была выполнена процедура обновления IOS XE до версии SPA.03.09.02.E.152-5.E2 по процедуре, в соответствии с рекомендациями производителя и технической документацией.
3. В связи с особенностями отображения технической информации о состоянии устройств, системной шины, модулей, интерфейсных плат, блоков питания изменяемых производителем по своему усмотрению от версии к версии ПО, а также документированных на сайте производителя оборудования CISCO программных ошибок в операционной системе IOS XE устраняемых силами производителя от версии к версии, улучшая таким образом эксплуатационные характеристики оборудования, обнаружено, что шасси, супервизор, интерфейсные платы и один из блоков питания (PS2) – исправны, замечаний или препятствий к их работоспособности нет.
В процессе диагностики, тестирования и обновления программного обеспечения коммутатора (ROMMON и IOS XE) обнаружена нестабильная работа одного из блоков питания (PS1), сопровождающаяся изменением световой индикации на фронтальной панели блока питания путем загорания индикатора красного цвета («FAIL»).
Данный блок питания подлежит замене, т.к. при большой сетевой нагрузке на шасси, его бесперебойная и нормальная работа не может быть гарантирована.
4. В связи с тем, что производственный сегмент сети состоит суммарно из четырех коммутаторов CISCO CATALYST 4503-E подключенных между собой по топологии «кольцо» (уровень ядра сети), с реализованным протоколом STP, к которым в общей сложности подключается 41 шт. коммутаторов второго уровня, а количество оконечных устройств равно 226, при этом все устройства находятся в одном VLAN, считаю необходимым отметить критичность данных моделей оборудования к идентичности ROMMON и ПО IOS XE на каждом из устройств обьединенных между собой в единой целое (бекбон сети, ядро сети).
Это означает, что после обновления ROMMON и ПО IOS XE на одном из коммутаторов CISCO Catalyst 4503-E уровня ядра желательно и целесообразно обновить ROMMON и ПО IOS XE на остальных трех коммутаторах идентичных предоставленному до указанных версий, с тем, чтобы все версии ROMMON и ПО IOS XE на всех коммутаторах уровня ядра были ИДЕНТИЧНЫМИ!
Подключение шасси CISCO Catalyst 4503-E в сеть заказчика с обновленным ROMMON и ПО IOS XE может выявить другие варианты неработоспособности сетевой инфраструктуры заказчика на других коммутаторах этого типа, в случае, если их программное обеспечение (операционная система и ROMMON) являются устаревшими по сравнению с установлеленными версиями на данном конкретном шасси.
5. Практика эксплуатации показывает, что только в этом случае (см. п.4) количество возможных отказов (сбоев, зависаний, перезагрузок) в работе ядра сети незначительно в длительном периоде времени или равно нулю, т.к. все коммутаторы обмениваются между собой служебной технической информацией по проприетарным протоколам CISCO и по протоколу STP в частности.
Производитель оборудования CISCO в разных версиях ПО в силу ряда обьективных причин и в связи с программными ошибками в ПО IOS XE, связанными в первую очередь с необходимостью поддерживать разные типы интерфейсных плат, модулей и конвертеров (оптических, гигабитных, десятигигабитных и т.п.), может давать различные неочевидные (в т.ч. спорадические) ошибки, которые могут возникать в произвольный момент времени (от нескольких часов до нескольких месяцев), устранение которых зачастую возможно при перезагрузке оборудования или при его спонтанной перезагрузке без видимых внешних причин.
Для сведения ИТ персонала заказчика отмечаю о том, что даже в установленной последней (по дате выпуска) версии ПО IOS XE имеются документированные на сайте CISCO ошибки, которые будут устранены производителем в будущем, что означает невозможность запускать и эксплуатировать определенные сетевые конфигурации (настройки) на коммутаторах CISCO Catalyst 4503-E. Число таких ограничений по сравнению с ранее установленной устаревшей версией ПО IOS XE – незначительно и из исходной информации от заказчика не следует, что сетевая конфигурация у заказчика эксплуатируется в любой из неподдерживаемых конфигураций (настроек). В случае необходимости расширить функционал конфигурации (настроек) сетевой инфраструктуры на объекте заказчика необходимо уточнять возможные ограничения по конфигурированию оборудования на сайте производителя (www.cisco.com).
6. Рекомендую обновить в общей сетевой конфигурации объекта на всей аппаратуре связи CISCO Catalyst 4503-E ROMMON и ПО IOS XE до последних версий, с тем чтобы все коммутаторы уровня ядра имели идентичные версии ROMMON и ПО IOS XE. Также желательно проверить и обновить встроенное ПО (firmware) у всех коммутаторов второго уровня, подключаемых к коммутаторам ядра.
7. При проверке совместимости периферийных интерфейсов, обнаружено, что интерфейсные оптические модули SFP с пропускной способностью 10 гигабит не поддерживаются интерфейсной платой WS-X4624-SFP-E. Считаю что данные модули были установлены в данную плату ошибочно и в нормальном эксплуатационном режиме не должны в ней располагаться. При установке 10 гигабитного модуля в порт 1 гигабит выдается сообщение об ошибке несовместимости:
*Mar 21 08:34:11.610: %C4K_TRANSCEIVERMAN-3-INCOMPATIBLE: Port Gi3/23: New transceiver (speed 10Gbps) is incompatible with this module
Данное сообщение по своей сути не является ошибкой, это информационное сообщение, показывающее на невозможность обрабатывать сетевой трафик до замены SFP модуля в конкретном порту на подходящий по типу и по скорости.
8. Крепление шасси (рама 19 дюймов, с отверстиями) обеспечивающее установку шасси в шкаф и/или в стойку имеет незначительные изгибы, не влияющие на работоспособность шасси и/или любых его частей.
9. Других технических замечаний к работоспособности интерфейсных плат и к интерфейсным модулям на них (SFP) – нет.
ВЫВОД: гарантированную бесперебойную работы всей ИТ инфраструктуры на объекте заказчика возможно обеспечить при обновлении ROMMON и ПО IOS XE на коммутаторах уровня ядра, а также на всех коммутаторах второго уровня. Все версии ПО должны быть в сетевой среде заказчика идентичными (одинаковыми).
Компания «Матадор Финанс Групп» может решить данную задачу и выполнить необходимую работу по обновлению ПО на всех коммутаторах Catalyst у заказчика удаленно или с выездом на объект заказчика по его запросу.
Бочаров Максим Владимирович
ООО «Матадор Финанс Групп»
Сервисный департамент
Телефон
Дата Подпись