Resource Exception

Resource Exception 화면에서는 조회 기간 동안 메모리·CPU 제한으로 강제 종료되거나 축출된 이벤트를 상태별 현황과 시간대별 추이로 확인하고, Event List에서 개별 이벤트의 리소스 사용량과 발생 원인을 조회할 수 있습니다.

좌측 메뉴에서 쿠버네티스 > Performance Analysis > Resource Exception을 선택하세요.

화면은 Event Status, Event Trend 차트, Event List 세 영역으로 구성됩니다.

조회 조건 설정하기​

Period로 조회 기간을 지정하고, Group by에서 Cluster/Namespace 중 무엇을 기준으로 조회할지 선택합니다. Group by에서 고른 값에 따라 그 옆 필터의 순서가 Cluster, Namespace 또는 Namespace, Cluster로 바뀝니다. 조건을 변경한 뒤 [Search] 버튼을 클릭해야 새 조건으로 다시 조회됩니다.

Event Status에서 현황 파악하기​

Event Status 도넛 차트 옆에는 All 전체 건수와 함께 이벤트 유형별 건수·비율이 표시됩니다.

• 보라색(Container Limit): 컨테이너가 설정된 메모리 제한에 도달해 강제 종료된 이벤트입니다.
• 주황색(Node Eviction): 노드 리소스 부족으로 파드가 축출된 이벤트입니다.

Container Limit 또는 Node Eviction 항목을 클릭하면 Event Trend 차트에서 해당 유형만 강조되어 표시됩니다. 다시 클릭하거나 All을 클릭하면 전체 보기로 돌아갑니다.

Event Trend에서 시간대별 발생 추이 확인하기​

Event Trend에는 조회 기간의 시간대별 이벤트 발생 건수가 막대 또는 선 그래프로 표시되며, 우측 상단의 Bar/Line 토글로 형태를 바꿀 수 있습니다.

화면을 처음 열면 Event List에는 "No data. Click the Bar/Line chart to check the data." 안내와 함께 목록이 비어 있습니다. 차트에서 특정 시간대의 막대나 지점을 클릭하면 그 시간대에 발생한 이벤트가 Event List에 표시되고, 목록 제목 옆에 조회된 시간 범위가 나타납니다.

Event List에서 개별 이벤트 확인하기​

Event List에는 선택한 시간대의 이벤트가 Killed Time, Event, Node, Controlled By, Namespace, Pod Name, Status, Container(Exit Code), Application, Exception, Restart와 함께 Working Set Memory (Gi), Memory Used (Gi), Memory Request (Gi), Memory Limit (Gi), Mem Usage/Request (%), Mem Usage/Limit (%), CPU Used (m), CPU Request (m), CPU Limit (m), CPU Usage/Request (%), CPU Usage/Limit (%), CPU Node Alloc (%) 등 리소스 사용량 컬럼으로 표시됩니다.

이 리소스 사용량 컬럼으로 이벤트가 발생한 컨테이너의 메모리·CPU 사용량이 요청(Request)·제한(Limit) 대비 얼마나 높았는지 함께 파악할 수 있습니다.

목록 상단의 필터 입력란에 텍스트를 입력하면 컬럼 값 기준으로 빠르게 필터링할 수 있고, 입력란 왼쪽의 OR/AND 드롭다운으로 여러 필터 조건을 어떻게 조합할지 선택할 수 있습니다. 목록 우측 상단의 [⋮] 버튼을 클릭하면 Reset user data, Export to Excel, Column List 메뉴가 열립니다.

Node 클릭 시 상세 패널 확인하기​

Node 값을 클릭하면 화면 우측에 History Management 상세 패널이 열립니다.

Summary 탭에는 조회 시점 전후 1시간의 Resource Report(CPU/Memory Usage, Avg/Max 토글로 평균·최댓값 전환), System Config(Architecture, Image, Capacity Memory, Capacity CPU, Container Runtime, kubelet), Status Timeline, Pod Timeline이 표시됩니다. Pod Timeline에서는 이 노드에 배치된 파드별 실행 구간을 시간대별 막대로 확인할 수 있습니다.

Metric 탭에서는 CPU/Memory/Disk Used, Network Receive/Transmit(오류 포함), Load 1/5/15min 등 노드 지표를 이벤트 발생 시점을 기준선으로 함께 확인할 수 있습니다.

Event 클릭 시 상세 패널 확인하기​

Event 값을 클릭하면 화면 우측에 Information, Metric, Event History, Log 탭으로 구성된 상세 패널이 열립니다.

Information 탭에는 Related Resources에 이 이벤트가 속한 Cluster, Node와 함께 namespace → pod로 이어지는 리소스 관계도가 표시되고, 그 아래 Event Information에 Type, Reason, Namespace, Object Name, Created Time, First Seen, Last Seen, Source, Message가 표시됩니다. Message에는 커널이 기록한 OOM Kill 상세 로그가 그대로 표시되어 어떤 프로세스가 어떤 조건으로 종료됐는지 확인할 수 있습니다.

Event History 탭에서는 이 대상과 관련된 ContainerLimitReached 등 이벤트를 시간순으로 확인할 수 있어, 같은 원인의 재발 여부를 빠르게 파악할 수 있습니다.

Log 탭에서는 관련 로그를 확인할 수 있습니다. 로그 수집이 설정되지 않은 경우 [Set Logging] 버튼과 함께 안내 메시지가 표시됩니다.