분류 전체보기
[실전 카프카 개발부터 운영까지 정리] 6장. 컨슈머 내부 동작
http://www.yes24.com/Product/Goods/104410708 해당 책을 공부하며 정리한 내용입니다. 실전 카프카 개발부터 운영까지 - YES24 아파치 카프카의 공동 창시자 준 라오(Jun Rao)가 추천한 책!국내 최초이자 유일한 컨플루언트 공인 아파치 카프카 강사(Confluent Certified Trainer for Apache Kafka)와 공인 관리자 자격(Confluent Certified... www.yes24.com 컨슈머 오프셋 관리 컨슈머 동작 중 가장 핵심은 오프셋 관리로, 카프카에서 메시지의 위치를 나타내는 위치를 오프셋이라고 한다. 예를 들어 컨슈머가 일시적으로 동작을 멈추고 재시작하는 경우나, 컨슈머가 구동 중인 서버에 문제가 발생해 새로운 컨슈머가 기존 컨..
[실전 카프카 개발부터 운영까지 정리] 5장. 프로듀서 내부 동작 원리
http://www.yes24.com/Product/Goods/104410708 해당 책을 공부하며 정리한 내용입니다. 실전 카프카 개발부터 운영까지 - YES24 아파치 카프카의 공동 창시자 준 라오(Jun Rao)가 추천한 책!국내 최초이자 유일한 컨플루언트 공인 아파치 카프카 강사(Confluent Certified Trainer for Apache Kafka)와 공인 관리자 자격(Confluent Certified... www.yes24.com 파티셔너 카프카 토픽은 성능 향상을 위한 병렬 처리가 가능하도록 하기 위해 파티션으로 나뉘고, 최소 하나 또는 둘 이상의 파티션으로 구성된다. 프로듀서가 카프카로 전송한 메시지는 해당 토픽 내 각 파티션의 로그 세그먼트에 저장된다. 따라서 프로듀서는 토픽으..
[실전 카프카 개발부터 운영까지 정리] 4장. 카프카의 내부 동작 원리
http://www.yes24.com/Product/Goods/104410708 해당 책을 공부하며 정리한 내용입니다. 실전 카프카 개발부터 운영까지 - YES24 아파치 카프카의 공동 창시자 준 라오(Jun Rao)가 추천한 책!국내 최초이자 유일한 컨플루언트 공인 아파치 카프카 강사(Confluent Certified Trainer for Apache Kafka)와 공인 관리자 자격(Confluent Certified... www.yes24.com 카프카 리플리케이션 동작 방식 리더는 리플리케이션 중 하나가 선정되며, 모든 읽기와 쓰기는 해당 리더를 통해서만 가능합니다. 프로듀서는 모든 리플리케이션에 메시지를 보내는 것이 아니라 리더에게만 메시지를 전송한다. 컨슈머도 역시 오직 리더로부터 메시지를 가..
[실전 카프카 개발부터 운영까지 정리] 3장. 카프카 기본 개념과 구조
http://www.yes24.com/Product/Goods/104410708 해당 책을 공부하며 정리한 내용입니다. 실전 카프카 개발부터 운영까지 - YES24 아파치 카프카의 공동 창시자 준 라오(Jun Rao)가 추천한 책!국내 최초이자 유일한 컨플루언트 공인 아파치 카프카 강사(Confluent Certified Trainer for Apache Kafka)와 공인 관리자 자격(Confluent Certified... www.yes24.com Replication 안정성을 높이기 위해 각 메시지들을 여러 개로 복제하여 카프카 클러스터 내 브로커들에 분산시키는 동작 --replication-factor 3 # 3개의 리플케이션 리플리케이션의 수가 증가할 수록 안정성은 높아지지만, 브로커 리소스를 ..
[MongoDB] MongoDB - 복제 (1)
MongoDB in Action을 바탕으로 정리한 내용입니다. “장애는 항상 발생한다” 이러한 피할 수 없는 사실로 대부분의 데이터베이스 시스템에서 복제는 핵심적인 요소이다. 장애가 발생하더라도 실제 서비스 시스템의 데이터를 계속 서비스할 수 있으려면 데이터베이스가 하나 이상의 서버에서 운용되어야 한다. 복제는 데이터 보호, 높은 가용성, 재난 복구 기능을 제공한다. 복제 개관 복제는 여러 MongoDB 서버에 데이터를 분산하고 관리하는 것이다. MongoDB는 하나 이상의 노드로 데이터를 복사할 수 있으며, 변경이 발생하면 지속적으로 동기화한다. 이러한 유형의 복제는 복제 세트 (Replica set)이라고 불리는 메커니즘을 통해 제공. 노드 그룹이 자동으로 데이터를 동기화하고 노드가 사라지면 장애조치..