Spark 완벽 가이드 18장 모니터링과 디버깅
이전 스터디에서 공부했던 15장을 바탕으로 이 장에서는 어떤 부분을 모니터링하고 디버깅해야 하는지를 소개합니다.
모니터링과 디버깅
모니터링 범위
모니터링을 스파크가 사용하는 모든 자원에 걸쳐서 수행해야 정확한 오류 발생 지점을 찾아낼 수 있습니다.
스파크 애플리케이션 잡
디버깅을 위해서 스파크 모니터링 도구들을 가장 먼저 확인해야합니다.
클러스터에서 실행되고 있는 애플리케이션의 RDD와 쿼리 실행 계획 같은 개념적 수준의 정보를 제공합니다...
blog.aqudi.me3 min read