Snuba 아키텍처 분석: Sentry의 실시간 데이터 처리 엔진
Snuba는 ClickHouse 기반의 분산 데이터 플랫폼으로, Kafka에서 직접 데이터를 수집하고 최적화된 쿼리를 제공하는 서비스입니다. Sentry의 에러 추적 및 성능 모니터링 기능을 지원하는 핵심 인프라입니다.
핵심 역할
Snuba는 기존 Postgres와 Redis 조합을 대체하여 설계되었으며, 현재는 Sentry의 대부분의 시계열 기능을 담당하고 있습니다.
주요 기능
ClickHouse ...
7월 17일 16:42에 게시됨
Python 기반 실시간 스트림 처리를 위한 Streamparse의 핵심 기능과 활용
Streamparse란?
Streamparse는 Apache Storm을 사용하는 실시간 데이터 스트림 처리 환경에서 Python을 주 언어로 활용할 수 있도록 설계된 프레임워크입니다. 자바 없이도 Python 코드로 Spout과 Bolt를 구현할 수 있으며, 명령줄 도구와 선언적 토폴로지 정의 방식을 통해 개발부터 배포까지 원스톱으로 관리할 수 있습니다.
주요 기능 및 장점
1. 순수 Python 기반 개 ...
6월 29일 02:36에 게시됨