HP DL560 G10 장비 네트워크 지연 현상 발생

2주전 새로 입고된 4CPU를 장착한 HP DL560 장비가 문제가 있어 원인 분석을 하다가 Ping loss가 발견하는 것을 확인

하였습니다.

 

WAS에서 DB로 연결되는 구간이 다른 서버에 비해 로컬 네트워크 속도도 지연이 많이 발생하였고, 일부 Ping이 4%가 Loss가 발생하는 것을 확인하였습니다.

1차로 스위치 포트혹은 UTP케이블의 문제가 아닐까 싶어 케이블을 교체하고 스위치 포트도 변경하였습니다.

하지만 동일한 증상이 발생하였습니다.

2차로 서버의 NIC 1번 포트에서 2번 포트로 변경작업을 진행하였습니다. 포트 변경 후 네트워크 지연도 완화되고 Ping 로스도 해결되었습니다.

 

고가의 장비이고 새로 입고된 장비인 만큼 빠른 해결을 위해 AHS로그를 수집하여 리셀러 측으로 전달하였습니다.

 

 

AHS로그 수집 방법(리눅스)

 

ilorest-2.3.4-1.x86_64.rpm

7.81MB

# ilorest 설치
# rpm -ivh ilorest-2.3.4-1.x86_64.rpm 

# ilorest 
iLOrest : RESTful Interface Tool version 2.3
Copyright (c) 2014, 2018 Hewlett Packard Enterprise Development LP
----------------------------------------------------------------------------------------------------------------------------------------------------------------------------------
iLOrest > serverlogs --selectlog=AHS
Local login initiated...
Discovering data...Done
Mounting AHS partition...
iLOrest > exit
Logging session out.
Bye for now
# ls
HPE_XXXXXXXX_20200317.ahs

 

얼마 뒤 싱가포르에서 HP직원에게 전화가 왔습니다.

우선 펌웨어 버전과 OS 버전등에 대해서 확인을 하였으며,  해당 이슈에 대해서 유선으로 통화를 진행했습니다.

신제품이 입고되서 서비스 투입하기 전에 장애가 발생되어 NIC파트 교체를 진행하기로 했습니다.

파트 재고 확인 후 다음날 HP직원을 통해 새로운 NIC파트를 교채했습니다.

 

 

교체 후 추가적으로 SPP를 통해 최신 펌웨어로 업데이트 작업을 추가적으로 진행했습니다.