본문 바로가기

JUST WRITE

검색하기
JUST WRITE
프로필사진 천재보단범재

  • ALL (207)
    • Network (30)
    • MLOps (53)
      • Kafka (15)
      • Kubernetes (24)
      • Airflow (5)
      • Docker (7)
    • AI (10)
    • Cloud (16)
    • Data (12)
    • OS (23)
      • Linux (5)
    • Paper (3)
    • Programing (44)
      • Java (19)
      • Spring (13)
      • Python (2)
      • JavaScript (4)
      • Algorithm (4)
    • Database (7)
    • ETC (9)
Guestbook
Notice
Recent Posts
Recent Comments
Link
  • [Github] JSW's Github
  • [LinkedIn] JSW's Profile
  • [Instagram]
«   2025/05   »
일 월 화 수 목 금 토
1 2 3
4 5 6 7 8 9 10
11 12 13 14 15 16 17
18 19 20 21 22 23 24
25 26 27 28 29 30 31
Tags
  • Operating System
  • PostgreSQL
  • OS
  • Vision
  • CVAT
  • log
  • AWS
  • aws s3
  • Kafka
  • MAC address
  • tcp
  • ip
  • Packet
  • java
  • kubeadm
  • grafana
  • kubernetes
  • zookeeper
  • JavaScript
  • Network
  • CSV
  • docker
  • Python
  • airflow
  • jvm
  • Spring
  • Trino
  • helm
  • EC2
  • kubectl
more
Archives
Today
Total
관리 메뉴
  • 글쓰기
  • 방명록
  • RSS
  • 관리

목록PARTITON (1)

JUST WRITE

Kafka Architecture

Kafka는 아래와 같은 구성 요소를 가진다. Records Topics Consumers Producers Brokers Logs Partitions Clusters Kafka가 어떻게 동작하는지와 구성요소들이 어떤 역할을 하는지 대략적으로 정리해보려 한다. Topics, Producers, Consumers Kafka의 주요한 역할은 Data를 받아서 전달하는 역할이다. 그 역할을 Topics, Producers, Consumers에서 한다. Producer -> publish 하는 Topic에 Data를 전달 Topic -> Log라는 구조로 디스크에 Data를 저장 Consumer -> Topic에 쌓인 Data를 읽어서 처리 Topic Partition, Consumer Group Topic에 ..

MLOps/Kafka 2022. 8. 14. 19:16
Prev 1 Next

Blog is powered by kakao / Designed by Tistory

티스토리툴바