반응형
Confluent Platform 6.0.0 버전은 지금까지 가장 많은 기능을 포함한 릴리스 중 하나로, 다운로드가 가능합니다. 이 릴리스는 Apache KafkaⓇ 2.6을 기반으로 하며, 플랫폼의 탄력성 향상, 비용 효율성 개선, 무한한 데이터 보존, 그리고 전 세계적인 가용성을 제공합니다.
Confluent Platform 6.0의 새로운 기능
- 계층화된 스토리지(Tiered Storage): 계층화된 스토리지를 통해 오래된 데이터를 Amazon S3나 Google Cloud Storage와 같은 비용 효율적인 객체 스토리지로 오프로드하여 Kafka에서 무한한 데이터 보존이 가능합니다. 이를 통해 더 광범위한 데이터 세트를 활용하여 실시간 분석 및 이벤트 스트리밍 애플리케이션을 구축할 수 있습니다.
- 셀프 밸런싱 클러스터(Self-Balancing Clusters): 셀프 밸런싱 클러스터를 통해 파티션 리밸런싱이 완전히 자동화되어 Kafka의 처리량을 최적화하고, 브로커 확장을 가속화하며, 대규모 클러스터 운영의 부담을 줄여줍니다.
- 클러스터 링크(미리보기)(Cluster Linking (preview)): 하이브리드 클라우드 및 멀티 클라우드 아키텍처를 도입하거나 전 세계에 걸친 Kafka 사용 사례를 추구하는 경우, 클러스터 링크는 다양한 환경과 거리를 넘어 독립적인 클러스터를 연결하는 간단하고 효율적인 솔루션을 제공합니다.
- ksqlDB 0.10: 이 버전의 ksqlDB는 풀 쿼리(pull queries)와 임베디드 커넥터(embedded connectors)를 일반적으로 사용할 수 있게 하여, 스트림 처리 아키텍처를 단순화하고 이벤트 스트리밍 애플리케이션을 더 쉽게 구축할 수 있도록 합니다.
- 관리 REST API(Admin REST APIs): 관리 REST API는 포괄적인 관리 기능을 지원하여, Kafka 클러스터를 관리하는 데 더 큰 유연성을 제공합니다.
https://www.youtube.com/watch?v=UVukgRofVn8
https://support.confluent.io/hc/en-us/articles/360049978552-Introducing-Confluent-Platform-6-0
반응형
'개발 > kafka' 카테고리의 다른 글
| [kafka] Strimzi Operators | 오퍼레이터 파드 operator pod를 사용해 쿠버네티스에서 카프카 브로커를 설정 (0) | 2025.02.07 |
|---|---|
| [kafka] rack awareness | rackAssignment 옵션 (+네이버의 파티션 할당 전략: RackAwareRangeAssignor) (0) | 2025.02.01 |
| 역압(back pressure)을 처리하는 애플리케이션 (kafka/spark) (0) | 2025.01.18 |
| [kafka] producer interceptor (0) | 2025.01.12 |
| [kafka] 소비자 그룹 (Consumer Group) (0) | 2025.01.05 |