Apache Ambari Hadoop YARN Heap 메모리 부족 장애 회고
13-node Hadoop 환경에서 반복된 YARN container 메모리 초과를 재구성하고, 원인 가설과 설정 변경·검증 절차를 정리합니다.
- #Hadoop
- #Spark
- #Hive
Archive
Writing
데이터 엔지니어링, 게임 데이터, 그리고 실무에서 배운 내용을 기록합니다.
글 찾기 및 정렬
공개 글 3개
Archive
데이터 엔지니어링, 게임 데이터, 그리고 실무에서 배운 내용을 기록합니다.
공개 글 3개
13-node Hadoop 환경에서 반복된 YARN container 메모리 초과를 재구성하고, 원인 가설과 설정 변경·검증 절차를 정리합니다.
데이터 기반 의사결정의 장점과 함께 존재하는 한계점들을 분석하고, 데이터에만 의존할 때 발생할 수 있는 문제점들을 살펴봅니다.
영구 저장 상태와 실시간 세션 상태를 통합할 때 필요한 책임 분리, 동시성, 멱등성, 복구 전략을 살펴봅니다.