Apache Kafka, 외부 도구 없이 클러스터 간 복제를 브로커에 내장하다
Data liberation: Apache Kafka's native cluster mirroring
KIP-1279는 클러스터 미러링을 Kafka 브로커에 직접 내장한다. 외부 프로세스나 오프셋 변환 없이 소스 클러스터에서 커밋된 레코드를 가져와 바이트 단위로 로컬 로그에 추가한다. 압축, 오프셋, 컨슈머 그룹 상태가 그대로 보존되어 장애 조치가 간단해진다. 미러 파티션의 상태 머신과 일관성 보장, 재해 복구 및 클러스터 마이그레이션 시나리오를 다룬다.
미러는 오프셋, 압축, 컨슈머 그룹 상태를 보존하므로 장애 조치는 미러를 중지하고 클라이언트를 리디렉션하는 것만큼 간단합니다.