:::: 곰탱푸닷컴 ::::

  • Home
  • Guestbook
  • Admin
  • Write

모니터링 1

Livy로 Spark Application 실행하기 (3) - 실행 결과 모니터링

Livy 서버를 통해 Spark에 Application을 Submit이 된 이후에는 정상적으로 실행되는지 확인해야 한다. 모니터링하는 방법은 크게 두가지가 있다. Jupyter Notebook에서 Livy에 실행 상태를 조회하는 코드 실행 Livy, Spark, Yarn의 웹 UI를 통한 직접 확인 AirFlow Jupyter 컨테이너를 구성하는 방법은 아래 문서를 참고한다. Jupyter Notebook으로 AirFlow 사용하기 Jupyter Notebook으로 AirFlow를 사용하는 방법에 대해 정리한다. Jupyter Notebook은 파이썬 기반의 데이터 과학에서 자주 사용하는 도구이다. 웹페이지 기반의 대화형 파이썬 인터프리터를 제공하기 때문 www.bearpooh.com Livy 서버와 S..

::: IT인터넷 ::: 2023.10.30
1
  • 세상공부 (216)
    • ::: 정보보안 ::: (9)
    • ::: IT인터넷 ::: (160)
    • ::: 데이터 분석 ::: (38)
    • ::: 취미 & 기타 ::: (8)
    • ::: 끄적끄적 ::: (1)

Tag

빌드, docker, Spark, 파이썬, 배포, 우분투, Jenkins, ambari, apache, hortonworks, Python, build, HDP, 도커, ubuntu, 스파크, 에어플로우, Airflow, 젠킨스, 저장소,

최근글과 인기글

  • 최근글
  • 인기글

최근댓글

이력서 (국문) 이력서 (영문) 곰탱이의 쉬운보안

Copyright © bearpooh.com All rights reserved.

티스토리툴바

개인정보

  • 티스토리 홈
  • 포럼
  • 로그인

단축키

내 블로그

내 블로그 - 관리자 홈 전환
Q
Q
새 글 쓰기
W
W

블로그 게시글

글 수정 (권한 있는 경우)
E
E
댓글 영역으로 이동
C
C

모든 영역

이 페이지의 URL 복사
S
S
맨 위로 이동
T
T
티스토리 홈 이동
H
H
단축키 안내
Shift + /
⇧ + /

* 단축키는 한글/영문 대소문자로 이용 가능하며, 티스토리 기본 도메인에서만 동작합니다.