이전 목록

넷플릭스에서의 Cassandra 데이터 이동의 진화

The Evolution of Cassandra Data Movement at Netflix

TL;DR AI

핵심 요약

1분
  1. 넷플릭스는 자체 Cassandra-to-Iceberg 이동 엔진 Casspactor를 새로운 Data Bridge 방식으로 교체하고 있다.

  2. 기존 시스템은 하루 약 1,200개 작업과 3PB의 데이터를 처리했지만, 취약한 메타데이터 체인과 확장성 한계가 있었다.

  3. 새 설계는 Amazon S3에서 백업 메타데이터를 직접 읽고, 커넥터를 통합 관리 평면으로 중앙화한다.

  4. 이를 통해 일관성 없는 메타데이터 시스템 의존을 줄이고, Key Value·Time Series·Graph 워크로드 전반에서 더 안정적이고 확장 가능한 데이터 이동을 지원한다.

원문 보기