Kafka Connect 기반 Base64 이미지 자동 저장 설계
📄 Kafka Connect 기반 Base64 이미지 자동 저장 설계1. 개요Kafka 프로듀서로 전송되는 Base64 인코딩된 이미지 데이터를Kafka Connect 환경에서 자동 디코딩하여,파일명 기준으로 지정된 폴더에 저장하는 기능을 구현한다.✅ 목표:Kafka 메시지 수신 → Base64 디코딩 → 파일명으로 폴더 저장장애 발생 시에도 운영 중단 없이 계속 처리2. 아키텍처 흐름[Kafka Producer] ↓ (topic: images-topic)[Kafka Connect - Custom SinkConnector] ↓ (Base64 디코딩 + 파일 저장)[Filesystem 저장 (예: /tmp/decoded_images)]Producer: filename, image 필드 포함한 ..
기타
2025. 4. 11. 13:05