본문 바로가기

JUST WRITE

검색하기
JUST WRITE
프로필사진 천재보단범재

  • ALL (210)
    • AI (12)
    • Infra (90)
      • Kafka (15)
      • Kubernetes (24)
      • Airflow (5)
      • Docker (7)
      • Network (30)
      • Database (7)
    • Data (12)
    • Cloud (16)
    • Analysis (1)
    • OS (23)
      • Linux (5)
    • Paper (3)
    • Programing (44)
      • Java (19)
      • Spring (13)
      • Python (2)
      • JavaScript (4)
      • Algorithm (4)
    • ETC (9)
Guestbook
Notice
Recent Posts
Recent Comments
Link
  • [Github]
  • [LinkedIn]
«   2025/08   »
일 월 화 수 목 금 토
1 2
3 4 5 6 7 8 9
10 11 12 13 14 15 16
17 18 19 20 21 22 23
24 25 26 27 28 29 30
31
Tags
  • helm
  • kubeadm
  • Python
  • CVAT
  • JavaScript
  • java
  • kubernetes
  • tcp
  • PostgreSQL
  • Kafka
  • MAC address
  • kubectl
  • Packet
  • Trino
  • Operating System
  • EC2
  • Vision
  • Spring
  • AWS
  • docker
  • Network
  • CSV
  • jvm
  • grafana
  • airflow
  • OS
  • zookeeper
  • log
  • aws s3
  • ip
more
Archives
Today
Total
관리 메뉴
  • 글쓰기
  • 방명록
  • RSS
  • 관리

목록Data pipeline (1)

JUST WRITE

What is Airflow?

What is Airflow Airflow is a platform to programmatically author, schedule and monitor workflow 위 문장이 Apache Airflow 공식 사이트에 게시되어 있는 Airflow 한 줄 소개글이다. Airflow는 Workflow를 프로그래밍적으로 작성할 수 있고, Schedule 하고 모니터링을 하게 해주는 Platform이다. 다르게 해석하면 작업들을 일정한 시간에 정확한 방법으로 올바른 순서대로 실행하게 해주는 Tool이다. 장점 Dynamic Airflow에서 Pipeline은 Python으로 정의할 수 있다. Python으로 가능한 것이면 Airflow에서 Pipeline내 Task로 실행할 수 있다. Scalable Ai..

Infra/Airflow 2022. 3. 23. 22:13
Prev 1 Next

Blog is powered by kakao / Designed by Tistory

티스토리툴바