일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | |||
5 | 6 | 7 | 8 | 9 | 10 | 11 |
12 | 13 | 14 | 15 | 16 | 17 | 18 |
19 | 20 | 21 | 22 | 23 | 24 | 25 |
26 | 27 | 28 | 29 | 30 | 31 |
Tags
- tcp
- Operating System
- ip
- CSV
- CVAT
- Trino
- docker
- zookeeper
- Packet
- OS
- Vision
- Kafka
- MAC address
- aws s3
- log
- AWS
- Spring
- EC2
- Network
- kubeadm
- kubernetes
- Python
- kubectl
- JavaScript
- java
- grafana
- airflow
- jvm
- helm
- PostgreSQL
Archives
- Today
- Total
목록avro (1)
JUST WRITE
What is kafka
What is Kafka? Kafka는 publish-subscribe messaging queue, messaging system이다. Real-time streaming data architecture에 주로 사용된다. Kafka는 안정적이고 좋은 performance로 Spotify, Uber, Netflix 등 다양한 회사에서 사용되고 있다. Kafka는 분산 streaming 플랫폼으로 Fault tolerant, 장애에 대응할 수 있는 storage이기도 하다. Kafka 특징 so fast Kafka는 빠른 Data 이동을 위해 OS Kernel에 의존한다. Zero-copy를 통해 속도를 개선한다. Immutable commit log를 Disk에 순차적으로 저장한다. 이로 인해 Rando..
MLOps/Kafka
2022. 8. 9. 14:34