본문 바로가기

JUST WRITE

검색하기
JUST WRITE
프로필사진 천재보단범재

  • ALL (210)
    • AI (12)
    • Infra (90)
      • Kafka (15)
      • Kubernetes (24)
      • Airflow (5)
      • Docker (7)
      • Network (30)
      • Database (7)
    • Data (12)
    • Cloud (16)
    • Analysis (1)
    • OS (23)
      • Linux (5)
    • Paper (3)
    • Programing (44)
      • Java (19)
      • Spring (13)
      • Python (2)
      • JavaScript (4)
      • Algorithm (4)
    • ETC (9)
Guestbook
Notice
Recent Posts
Recent Comments
Link
  • [Github]
  • [LinkedIn]
«   2025/08   »
일 월 화 수 목 금 토
1 2
3 4 5 6 7 8 9
10 11 12 13 14 15 16
17 18 19 20 21 22 23
24 25 26 27 28 29 30
31
Tags
  • helm
  • kubernetes
  • Operating System
  • kubeadm
  • grafana
  • Kafka
  • Network
  • Packet
  • log
  • MAC address
  • CSV
  • Vision
  • java
  • zookeeper
  • Trino
  • OS
  • PostgreSQL
  • tcp
  • AWS
  • Spring
  • airflow
  • JavaScript
  • Python
  • kubectl
  • ip
  • aws s3
  • docker
  • CVAT
  • jvm
  • EC2
more
Archives
Today
Total
관리 메뉴
  • 글쓰기
  • 방명록
  • RSS
  • 관리

목록Resource Manager (1)

JUST WRITE

What is YARN

YARN Yet Another Resource Negotiator Hadoop 1.0과 Hadoop 2.0에서 가장 큰 차이점은 YARN이다. MapReduce는 4000 Node 이상의 매우 큰 Cluster에서 병목현상 이슈가 있었다. 이 병목 이슈를 해결하기 위해 YARN이 도입되었다. Cluster Resouce Management와 Data Processing을 분리하였다. YARN에서 Cluster Resouce Management를 담당한다. MapReduce 외에 다른 Data Processing 방식도 수용 가능하다. 동작 Resource Manager Client가 요청한 Application마다 자원을 관리한다. Hadoop Cluster 내 1개 존재한다. 전체 Resouce 상태를..

Data 2022. 3. 27. 13:18
Prev 1 Next

Blog is powered by kakao / Designed by Tistory

티스토리툴바