My Server Story 서버 엔지니어 이야기

XCC 계정 보안 정책 기본값 로그인 실패 횟수 시간

엔지니어-FIXER — Thu, 13 Feb 2025 21:23:03 +0900

XCC라는건 LENOVO 의 관리 모듈입니다

BMC를 이용해서 XCC에서 서버의 상태를 모두 관리할 수 있습니다

기본 아이디 패스워드는

USERID

PASSW0(숫자)RD 입니다 하지만 누군가가 변경을 했는데 몰라서 여러번 틀렸다면

기본적으로 XCC에서는 5번 틀리면 로그인을 완전 차단합니다

언제까지 기다려야하나 궁금하신분들을 위해 60분으로 설정이 되어있다는걸 알려드립니다

LENOVO XCC의 다양한 정책에 대해서는 아래 링크에서 추가적으로 확인이 가능합니다

계정 보안 정책 설정 | Lenovo XClarity Controller AMD | Lenovo Docs

DELL 서버 인텔 X710 10G SFP+SR flapping 문제 해결

엔지니어-FIXER — Tue, 5 Dec 2023 22:12:10 +0900

INTEL X710 아답터를 사용하는 분이라면 겪을 수 있는

혹은 다른 인텔 비슷한것 역시 겪을 수 있는 link flap 문제입니다

스위치와 X710사이의 SFP 연결을 통해 링크가 문제가 발생하는 현상입니다

타 벤더도 X710을 사용한다면 발생할 수 있습니다

그냥 사용중에는 발생하지 않고 새로운 스위치를 연결하거나 변경이 있을 때 생깁니다

증상 : This article provides the information when Intel X710 adapters and Dual Rate 1G/10G SFP+SR optic report port flapping after a switch or server reboots.

위 처럼 서버 리붓이나 스위치 리붓시 link flapping 이 나타나다 link down 이 됩니다

GBIC , ADAPTER , CABLE , NEGO 문제일 수 있지만 이 모든걸 체크 했다면

펌웨어 문제입니다

Port flapping on the PowerEdge server with Intel X710 adapters and the Dual Rate 1G/10G SFP+ SR optic may be reported after a switch or server reboot. If the switch or the server was rebooted, the adapter goes into a port flap, which is observable via the link and activity LED on the adapter.
For example, rebooting switch will send the adapter into port flap until the Dual Rate 1G/10G SFP+SR optic has been reseated.

This issue only occurs with versions below 18.5.x, 17.x.x does not exhibit this issue.

Solution
A fix became available as a firmware update in the May to July 2019 time frame. To resolve the issue, it is recommended to update the card firmware to the latest version 18.5.17.

XCC에 아답터 버전 정보가 제대로 안보일때 해결방법

엔지니어-FIXER — Mon, 4 Dec 2023 21:07:27 +0900

서버에서 HBA 나 RAID 카드를 업데이트 후 XCC에서 버전정보를 확인하는데

업데이트 버전이 아닌 이전버전이 계속 나올때는 아래와 같이 해결이 가능합니다

증상

When adapter firmware updates are performed in-band (by OS) without using OneCLI, the updated firmware level will not be reflected in the XCC. This can be observed with any adapter that has its own firmware (e.g. NIC, HBA, Raid card, etc.)

This is a permanent restriction of applying updates in-band.

아래는 해결방법입니다

이 문제는 어쩔수 없는 제한된 아키텍쳐라서 버그가 아닙니다 위 방법중 쉬운 방법으로 하시면되는데 그냥 AC 파워 사이클 하시면됩니다 전원 빼야합니다 그냥 리부팅은 해결되지 않습니다

reason : This is a limitation of the system management architecture. If updates are performed in-band without using OneCLI, then the XCC has no notification that changes occurred and will fast boot the system, skipping unnecessary UEFI driver loads.

segate hdd Activity LED off - 해결방법

엔지니어-FIXER — Sun, 17 Sep 2023 22:10:13 +0900

시게이트 하드중에 기본적으로 연결하면 Green LED가 On 이 정상인데 가끔 연결해도 OFF로 되어있는 경우가 있습니다. 물론 동작은 문제없고 사용에도 전혀 문제가 없지만 LED OFF 이니 고장인가? 하는 생각이 들 수 있는데 고장은 아닙니다.

ST2000NM003A and ST8000NM001A has unexpected behavior

원래는 2020년에 위 두모델이 이런문제가 있었는데 최근에 또 ST8000NM0075 모델이 이런 현상이 나오는것도 확인이 되었습니다. 간단히 해결가능하니 문제가 될건 아니지만 그래도 정상적이지 않으니 문제는 문제죠

https://support.lenovo.com/us/en/solutions/ht510030-activity-led-does-not-work-properly-for-some-seagate-drives-lenovo-thinksystem

Activity LED does not work properly for some Seagate drives - Lenovo ThinkSystem - Lenovo Support US

: : : :

support.lenovo.com

위 링크에서 간단히 해결가능하며

[root@localhost]# sginfo -t 0x19 /dev/sdb
SAS SSP port control mode page (0x19)
-------------------------------------
Ready LED meaning 0
I_T Nexus Loss time 2000
Initiator response time-out 2000

[root@localhost]# sginfo -Xt 0x19 /dev/sdb
0 2000 2000

해당 명령어로 쉽게 가능합니다

단 JBOD상태로 구성을 해야지만 가능해서 사용중이라면 약간 문제가 생길 수도 있겠네요

그냥 써도 문제 없으니 결정은 사용자가 하면됩니다. 그렇다고 고장나도 표시 안되는건 아니니까요. 기본 값이 led off일뿐입니다.

윈도우용 IPMITOOL 1.8.18 다운로드

엔지니어-FIXER — Thu, 26 Jan 2023 23:22:40 +0900

ipmitool_1.8.18.7z

2.91MB

서버에서 가끔 사용하는

IPMI툴입니다

리눅스용만 있고

윈도우용이 없다보니 찾기도 힘들어 공유합니다

아래처럼 안되나요?

작업시에는 반드시 관리자 권한 CMD를 열고 이용하세요! 안된다고 하면 초보입니다

유용하게 사용하시기 바랍니다

TS3310 파워 오프 방법 Power off

엔지니어-FIXER — Wed, 28 Dec 2022 23:03:49 +0900

TS3310 백업장치의 전원을 종료하기 위해

아래와 같은 방법으로 종료하면 됩니다

Preparing a Library or Library Module for Repairs

1. If necessary, vary drives and logical libraries offline.
2. Power OFF the library.

v If the library is idle:
a. Press the power button on the front panel of the control module.
b. Toggle each power supply switch to the OFF (O) position.

v If the library is processing:
a. From the Operator Panel, select Operations → Shutdown to end the
current library task and shut down the library’s operating system.
b. When the library becomes idle, press the power button on the front panel
of the control module.
c. Toggle each power supply switch to the OFF (O) position.

두가지 방법이 있지만 안전하게 아래 방법으로 하면됩니다

https://public.dhe.ibm.com/storage/ts3310/95P3969.pdf

해당 운영매뉴얼을 참고 하시면 됩니다.

Sensor ME Status has transitioned to critical from a less severe state XCC에 발견 및 !led 점등시 해결법

엔지니어-FIXER — Mon, 5 Dec 2022 23:20:22 +0900

서버운영중 발생되는 XCC의 메시지

SR시리즈에서 나오는 메시지이며 CPU와 UEFI가 연관이 있는 메시지입니다

ERROR PLAT0522 Sensor ME Status has transitioned to critical from a less severe state. FQXSPUN0019M

위와 같이 오류가 XCC에 발견되었다면 서버에 ! led 가 점등됩니다

큰 문제없이 운영은 되지만 지속적으로 리부팅해도 남아있는 메시지입니다

해당되는 서버들

The system may be any of the following Lenovo servers:

ThinkSystem SN550, Type 7X16, any model
ThinkSystem SN850, Type 7X15, any model
ThinkSystem SR850, Type 7X18, any model
ThinkSystem SR850, Type 7X19, any model
ThinkSystem SR860, Type 7X69, any model 7X69, 7X70
ThinkSystem SR950, Type 7X11, any model 7X11, 7X12
ThinkSystem SR950, Type 7X12, any model
ThinkSystem SR950, Type 7X13 (SAP HANA), any model
ThinkSystem SD530, Type 7X21, any model
ThinkSystem SD650 Dual Node WCT Tray, any model 7X58
ThinkSystem SR530, Type 7X07, any model
ThinkSystem SR530, Type 7X08, any model
ThinkSystem SR550, Type 7X03, any model
ThinkSystem SR550, Type 7X04, any model
ThinkSystem SR570, Type 7Y02, any model
ThinkSystem SR570, Type 7Y03, any model
ThinkSystem SR590, Type 7X98, any model
ThinkSystem SR590, Type 7X99, any model
ThinkSystem SR630, Type 7X01, any model
ThinkSystem SR630, Type 7X02, any model
ThinkSystem SR650, Type 7X05, any model
ThinkSystem SR650, Type 7X06, any model
ThinkSystem SR670, Type 7Y36, any model
ThinkSystem SR670, Type 7Y37, any model
ThinkSystem ST550, Type 7X09, any model 7X09, 7X10
ThinkSystem ST550, Type 7X10, any model
ThinkSystem ST558, Type 7Y15, any model
ThinkSystem ST558, Type 7Y16, any model

The system is configured with at least one of the following:

Lenovo XClarity Controller (LXCC), any NA

해당 솔루션은 XCC를 업데이트 하라고 되어있지만

막상 XCC를 업데이트 해도 동일한 현상이 있을 수 있습니다

https://support.lenovo.com/us/ko/solutions/ht507483-sensor-me-status-has-transitioned-to-critical-from-a-less-severe-state-error-logged-lenovo-thinksystem

If the ME error is reported during a normal operation, and the system is not reporting any additional errors or experiencing failures, then the message can be ignored as there is no impact on system operation. The ME error may also be reported right after UEFI activation and then be recovered approximately 25 seconds later. In either case, the ME error can be cleared by performing the following steps.

When the error is observed during runtime, perform an XCC reboot for recovery. If the issue is still observed after the XCC reboot, AC cycle the system by removing the AC power cord, wait for three (3) minutes and re-plug in the AC power cord. If it still does not help, system board replacement is necessary.
When the error is observed after firmware update, do the following steps.
1. AC cycle the system by removing the AC power cord, wait for three (3) minutes and re-plug in the AC power cord.
2. Apply the latest XCC and UEFI with the following steps.
3. Update XCC first via XCC Web GUI. After the XCC update, make sure to restart XCC completely.
4. After XCC restarts completely, update UEFI. After updating UEFI completely, reboot the system.

(where ME = Intel Management Engine)

차례대로 XCC를 업데이트 하고 UEFI 를 업데이트 하면 아래와 같이 복구 메시지가 나오고 해결됩니다

sensor ME Status has transitione to a less severe state from ciritical

사용중인 버전이 최신버전이라면 같은 버전으로 재업데이트 해주면됩니다

ME Status 의 문제는 흔한 버그같은거라서 쉽게 해결되는거니 걱정안하셔도 됩니다

다른사례도 있으니 참고하시면 됩니다

https://support.lenovo.com/us/en/solutions/ht511226-sensor-me-status-has-transitioned-to-critical-from-a-less-severe-state-error-after-uefi-firmware-update-lenovo-thinksystem

Solution

This is a permanent restriction. There will be no solution.

Workaround

Depending on the exact failure state, there may be simpler recovery methods, but the following is the most reliable:

1) Power off the server if it is not already in the off state.
2) Flash the Lenovo UEFI firmware again.
3) AC Cycle the server. If supported, the XCC Web UI will have an "AC Power Cycle Server" power action that will accomplish this remotely, but not all Purley servers support this action. If the remote "AC Power Cycle Server" action is not supported, unplug the server's power supplies and then restore power.

The server should then be able to power on without again logging the "Sensor ME Status has transitioned to critical from a less severe state" error. You may also use the previously mentioned "Get Self-Test Results" IPMI command to verify the Intel ME state has been restored.

If the above has not resolved the issue, then the system board may need to be replaced.

XClarity Controller 엔터프라이즈 수준 기능 - Enterprise 라이센스 추가

엔지니어-FIXER — Mon, 10 Oct 2022 04:46:06 +0900

XCC에 Enterprise 라이센스를 추가하면

다음과 같은 기능이 추가됩니다

우선적으로 Advance를 구매해야합니다

이전글을 보면 XCC의 기본기능과 Advance 라이센스 기능을 보실 수 있습니다

아래는 Enterprise 추가 기능입니다.

다음은 XClarity Controller 엔터프라이즈 수준 기능의 목록입니다.

모든 XClarity Controller 표준 및 고급 수준 기능과 다음이 포함되어 있습니다.

RAS

부팅 캡처

원격 존재

품질/대역폭 제어
가상 콘솔 공동 작업(6명의 사용자)
가상 콘솔 채팅
가상 미디어
- 원격 콘솔을 통한 원격 ISO/IMG 파일 탑재
- 네트워크에서 파일 탑재: - ISO 또는 IMG 이미지 파일을 DVD 또는 USB로 파일 서버(HTTPS, CIFS, NFS)에서 호스트로 탑재

전원 관리

전력 상한 제한
OOB 성능 모니터링 - 시스템 성능 메트릭스

배치 및 구성

Lenovo XClarity Administrator를 사용하는 원격 배포. 운영 체제 배포에 Lenovo XClarity Administrator를 사용하는 경우 지원되는 운영 체제에 대한 자세한 내용은 Lenovo XClarity Administrator OS 배포 지원 목록에서 확인할 수 있습니다.

XClarity Controller 고급 수준 기능 - Advance 라이센스 추가

엔지니어-FIXER — Sun, 9 Oct 2022 04:43:57 +0900

XCC에 advance 라이센스를 추가하게 되면

아래 기능을 더 사용가능합니다.

이전글을 보시면 표준 수준 기능 - 기본 기능을 알려드립니다.

다음은 XClarity Controller 고급 수준 기능의 목록입니다.

모든 XClarity Controller 표준 수준 기능과 다음 기능이 포함되어 있습니다.

경보

Syslog

원격 존재

원격 KVM

직렬 방향 재지정

SSH를 통한 직렬 방향 재지정

보안

SKLM(Security Key Lifecycle Manager)
IP 주소 차단

전원 관리

실시간 전력 그래픽
전원 카운터 이력
온도 그래픽

배치 및 구성

XClarity Controller 원격 KVM 기능을 탑재한 내장 XClarity Provisioning Manager를 사용하여 원격 OS 배포

XCC 라이센스 별 지원 기능 - 표준 수준 기능 no license

엔지니어-FIXER — Sat, 8 Oct 2022 03:42:30 +0900

XClarity Controller 표준 수준 기능

기본 라이센스에서 지원되는 내용이며

거의 Advance 와 Enterprise 가 2개 추가 됩니다.

다음은 XClarity Controller 표준 수준 기능의 목록입니다.

산업 표준 관리 인터페이스

IPMI 2.0 인터페이스
Redfish
CIM-XML
DCMI 1.5
SNMPv3
SNMPv1(트랩만 해당)은 서버 유형에 따라 v2.10 또는 v2.12 이상의 XCC 펌웨어 업데이트가 필요합니다. 세부 정보는 XCC 펌웨어 업데이트 변경 파일을 참조하십시오.

기타 관리 인터페이스

웹
Legacy CLI
앞면 패널 USB - 모바일 장치의 가상 오퍼레이터 패널

전원/재설정 제어

전원 켜기
하드/소프트 종료
예약된 전원 제어
시스템 재설정
부팅 순서 제어

이벤트 로그

IPMI SEL
읽을 수 있는 로그
감사 로그

환경 모니터링

무에이전트 모니터링
센서 모니터링
팬 제어
LED 제어
칩셋 에러(Caterr, IERR 등)
시스템 상태 표시
I/O 어댑터의 OOB 성능 모니터링
인벤토리 표시 및 내보내기

RAS

가상 NMI
자동 펌웨어 복구
백업 펌웨어의 자동 프로모션
POST 감시 장치
OS 로더 감시 장치
블루 스크린 캡처(OS 오류)
내장 진단 도구

네트워크 구성

IPv4
IPv6
IP 주소, 서브넷 마스크, 게이트웨이
IP 주소 할당 모드
호스트 이름
프로그래밍 가능 MAC 주소
듀얼 MAC 선택(서버 하드웨어에서 지원되는 경우)
네트워크 포트 재할당
VLAN 태깅

네트워크 프로토콜

DHCP
DNS
DDNS
HTTP/HTTPS
SNMPv3
SNMPv1(트랩만 해당)
SSL
SSH
SMTP
LDAP 클라이언트
NTP
SLP
SSDP

경보

PET 트랩
CIM 표시
SNMP 트랩
이메일
Redfish 이벤트

직렬 방향 재지정

IPMI SOL
직렬 포트 구성

보안

XClarity Controller CRTM(Core Root of Trust for Measurement)
디지털 서명 펌웨어 업데이트
RBAC(역할 베이스 액세스 제어)
로컬 사용자 계정
LDAP/AD 사용자 계정
펌웨어의 보안 롤백
섀시 돌출 감지(일부 서버 모델에서만 사용 가능)
UEFI TPM 실제 존재 XCC 원격 어설션
구성 변경 및 서버 작업의 감사 로깅
공개 키(PK) 인증
시스템 사용 중지/용도 변경

원격 존재

RDOC(Remote Disk on Card): CIFS, NFS, HTTP, HTTPS, FTP, SFTP 및 LOCAL을 통한 원격 ISO/IMG 파일의 가상 미디어 탑재

전원 관리

실시간 전력계

라이센스 관리

정품 인증 키 유효성 및 리포지토리

배치 및 구성

원격 구성
내장 XClarity Provisioning Manager를 사용하는 배포 및 구성 도구와 드라이버 팩
구성 파일 백업 및 복원

펌웨어 업데이트

무에이전트 업데이트
원격 업데이트