태그: data-contracts

'data-contracts' 태그가 포함된 2개의 포스트

Schema Registry: Avro/Protobuf · 스키마 진화 · 호환성

2026년 07월 15일

kafka data-engineering schema-registry avro data-contracts

여러 팀이 오래 공유하는 로그에서 데이터의 형태는 곧 시스템 간 계약입니다. 스키마를 중앙에 등록하고 메시지에는 매직 바이트 + 스키마 ID만 실어 보내는 Schema Registry의 wire format과 serializer 흐름, Avro/Protobuf/JSON Schema 비교와 reader/writer 스키마 해석, 그리고 BACKWARD/...

데이터 품질·거버넌스·관측가능성: 믿을 수 있는 데이터 만들기

2026년 06월 25일

data-engineering data-quality data-governance observability data-contracts

품질 차원과 검증(Great Expectations·dbt tests·데이터 계약), 리니지·카탈로그(DataHub·OpenMetadata), 그리고 관측가능성의 5축(신선도·볼륨·스키마·분포·리니지)을 통해 '파이프라인이 돈다 ≠ 데이터가 맞다'는 간극을 어떻게 메우는지 다룹니다.

← 모든 태그 보기