JUST WRITE

큰일 났다! Out of Sync다?!?! Kafka Cluster를 운영하면 CMAK을 통해 Web에서 관리하는 경우가 많습니다. 저 역시 Kafka Cluster를 운영하면서 CMAK을 활용하고 있습니다. CMAK에서 Under Replicated가 0이 아닌 50으로 나온 경우가 발생하였습니다. Under Replicated가 0이 아니라는 것은 Topic의 Parition replicate가 설정한 대로 안된다는 것을 의미합니다. Out of Sync가 발생한 상황입니다. 실제로 Kafka 로그가 아래와 같이 발생하고 있었습니다. INFO [Partition __consumer_offsets-22 broker=3] Shrinking ISR from 1,3 to 3. Leader: (highWate..

Topic Kafka에서 Topic은 record, data를 저장하는 곳이다. Kafka에서 data를 주고받을 때 Topic을 통해서 주고받는다. Topic 기본적으로 아래와 같은 특징을 가진다. Topic은 record를 log에 저장 record를 저장한 log는 partition으로 나눠어져 저장 가능 partition은 다수의 Server에 나눠어져 저장 가능 Topic Partitions Kafka는 Topic으로 들어온 record를 log에 저장한다. Topic의 log는 partition으로 나뉜다. 기본적으로 record의 key를 기준으로 parition에 나누어진다. record의 key는 record를 kafka에 전달한 producer가 record와 함께 전달한다. key가 ..

이 글은 KOCW 강좌 중 경성대학교 양희재 교수님의 '운영체제' 강의를 정리한 글입니다. Dual Mode 이중 모드 요즘 1개의 컴퓨터로 여러 명이 동시에 사용하기도 한다.(Server) 아니면 여러 개의 Program을 동시에 사용한다. Program이 컴퓨터 전체에 영향을 끼칠 가능성이 높다. 이런 치명적인 상황을 불가능하게 하기 위해서 Dual Mode로 관리한다. 아래 2가지 Mode로 나누어서 관리한다. User Mode Privileged Instruction 실행 불가능 Supervisor Mode Privileged Instruction 실행 가능 System, Monitor, Priviliged Mode라고도 함. Privileged Instrution에는 STOP, HALT, RES..

이 글은 KOCW 강좌 중 경성대학교 양희재 교수님의 '운영체제' 강의를 정리한 글입니다. Interrupt-Based System 현대 운영체제는 Interrupt-Based System이다. 컴퓨터가 실행하는 동안 수많은 Event(키보드 타이핑, 마우스 클릭 등)들이 발생한다. 컴퓨터는 Interrupt를 통해 이러한 Event들을 알 수 있다. Interrupt가 발생하면 운영체제는 하던 일을 멈추고 ISR(Interrupt Service Routine)을 수행한다. ISR이 완료되면 Process가 재개된다. Interrupt 종류 Hardware Interrupt -> Hardware에서 발생한 Interrupt이다. Software Interrupt Software에서 발생한 Interrup..