Moose - ClickHouse로 분석용 백엔드를 만드는 오픈소스 프레임워크

(github.com/514-labs)

기존 데이터 백엔드 개발의 복잡성과 느린 속도를 해결, TypeScript나 Python으로 데이터 분석 백엔드를 빠르게 개발할 수 있게 해주는 오픈소스 프레임워크
기본 제공 스택(ClickHouse, Redpanda, Temporal)과 향후 다양한 클라우드 플랫폼 확장 예정
로컬 개발을 단순화하여 빠른 테스트와 즉각적인 핫 리로드를 지원
다양한 데이터 집약적 애플리케이션 구축에 적합하며, 실시간 분석, 데이터 이관, 이벤트 스트리밍 등에 활용 가능함

Moose

Moose가 제공하는 것
- TypeScript나 Python 코드 자체가 데이터 애플리케이션 로직과 인프라의 단일 소스 역할을 함
- 코드 기반으로 다음을 보장함
  - 완전한 타입 안전성과 검증
  - 보일러플레이트 코드 제거
  - 개발 단계에서 오류 사전 발견
컨텍스트 전환 제거
- 데이터베이스 테이블 명명 규칙, 모델/테이블 필드 동기화 여부, 필드 Nullable 여부 등을 고민할 필요 없음
로컬 개발
- 원클릭 실행
  단 하나의 명령어로 전체 데이터 인프라를 로컬에 실행 가능함
- 제로 설정
  모든 컴포넌트가 미리 구성되어 있어 별도 세팅 불필요함
- 프로덕션 환경과 동일한 구조
  실제 배포 환경과 동일한 기술 스택 사용
- 실시간 피드백
  변경 사항이 스택 전체에 즉시 반영됨
일반적인 개발 워크플로우
- 모델 추가나 변경 시 저장하면 로컬 인프라에 즉시 핫 리로드됨
- 새로운 필드를 추가하면 API, 스트림, 데이터베이스에 즉시 적용됨
- 파이프라인 테스트도 로컬 인제스트 API로 샘플 데이터를 전송해 바로 확인 가능함
핫 리로딩 워크플로우
- 모델 수정 후 저장만 하면 변경 사항이 자동 반영됨
- 추가된 필드는 API 검증, 데이터베이스 스키마, 스트림에 자동 적용됨
모듈성
- 필요한 컴포넌트만 선택하여 구성할 수 있음

ClickHouse
기본 활성화된 OLAP 데이터베이스
Redpanda
Kafka 호환 이벤트 스트리밍 플랫폼 (비활성화 가능)
Temporal
워크플로 오케스트레이션 툴 (비활성화 가능)
계획 중인 확장
- Snowflake, Databricks, BigQuery
  클라우드 데이터 웨어하우스 지원 예정
- Kafka, Kinesis, Pulsar
  다양한 Kafka 호환 이벤트 스트리밍 플랫폼 지원 예정