데이터 수집/관리 · Solution CBCH

CodeHub 데이터 수집/관리

데이터 거버넌스 중앙 관리 플랫폼. CODEBAILEY 데이터 수집/관리 카테고리의 핵심 솔루션으로, 엔터프라이즈 환경에서 검증된 안정성과 성능을 제공합니다.

CBCH

Solution Code

99.9%

시스템 가용성

2주

POC 기간

24 / 7

기술 지원

Product Preview

실제 콘솔 화면 미리보기

CodeHub 콘솔에서 분산된 데이터 자산을 한눈에 모니터링하고, 파이프라인을 실시간으로 운영합니다.

데모 요청

https://app.codebailey.com/hub/workspace/prod/dashboard

Production Workspace · Overview

● All systems operational

Active Sources

142 +6

Catalog Assets

8,427

Quality Score

97.3%

Pipelines · Running

28 / 31

Pipeline · ingest_oracle_to_iceberg

Oracle CDC › Validate Schema › Mask PII › Iceberg Write › Register Catalog

Recent Activity

14:02:11pipeline.run · sales_daily_etl completedOK

14:01:48catalog.register · customer_v3 (12.4M rows)OK

14:01:32quality.check · null_ratio threshold near limitWARN

14:00:55access.grant · analyst@team → orders_pii_maskOK

14:00:21lineage.build · upstream graph refreshedOK

Data Catalog · Search & Browse

⌕ Filter: active

⌕ tags:tier.gold AND owner:platform 6000+ assets indexed

All Assets Tables (6,228) Views (1,408) Topics (491) APIs (300)

Asset

5단계 워크플로우

데이터 수집/관리 도메인의 전 주기를 자동화된 파이프라인으로 처리합니다.

STEP 01

Connect

142+ 커넥터로 RDB · API · 스트림 · SaaS 등 이기종 소스를 단일 인터페이스로 연결합니다.

STEP 02

Normalize

컬럼 타입 추론과 코드 표준화로 이기종 데이터를 일관된 표준 모델로 변환합니다.

STEP 03

Govern

자동 카탈로그 등록 · 리니지 추적 · 품질 룰 · PII 마스킹 정책을 코드로 강제합니다.

STEP 04

Distribute

REST · GraphQL · SDK · DB Proxy로 거버넌스가 적용된 데이터를 제공합니다.

STEP 05

Monitor

실시간 메트릭과 감사 로그로 운영 가시성을 확보하고 이상 상황에 대응합니다.

Core Capabilities

8가지 핵심 기능

데이터 수집/관리 운영에 필요한 모든 기능을 단일 플랫폼에서 통합 제공합니다.

Data Catalog

메타데이터 자동 수집과 비즈니스 용어집(Glossary) 매핑으로 데이터 자산을 검색 가능한 형태로 등록합니다.

Source Connector

142+ 커넥터로 RDB · API · 스트림 · SaaS · 파일 등 이기종 소스를 통합 연결합니다.

Schema Inference

컬럼 타입을 자동 추론하고 스키마 변경(Schema Drift)에 자동 대응합니다.

CDC Streaming

변경 데이터를 실시간 캡처해 Kafka · Pulsar로 스트리밍 처리합니다.

Master Data

여러 시스템의 동일 엔티티를 통합해 골든 레코드(Golden Record)를 생성합니다.

Cleansing

결측치 보정 · 코드 표준화 · 중복 제거 · 형식 통일을 룰 기반으로 자동화합니다.

Loading

Iceberg · Delta Lake · Hudi · Parquet 등 오픈 테이블 포맷으로 적재합니다.

Multi-tenancy

Workspace 단위 데이터 격리와 권한 관리로 안전한 멀티테넌트 운영을 지원합니다.

Differentiators

CodeHub만의 핵심 차별점

142+ 커넥터로 이기종 소스를 한곳에 모으고, 실시간 CDC와 마스터 데이터 통합으로 '믿고 쓰는 단일 데이터 허브'를 만드는 것이 CodeHub의 핵심입니다.

전체 솔루션

이기종 소스
통합 수집

RDB부터 SaaS까지 흩어진 모든 소스를 단일 카탈로그로 연결해 등록합니다.

142+ 커넥터(RDB · API · 스트림 · 파일)
컬럼 타입 자동 추론 · Schema Drift 대응
메타데이터 자동 수집 · Glossary 매핑
오픈 테이블 포맷(Iceberg · Delta) 적재

실시간 CDC
스트리밍

변경 데이터를 실시간 캡처해 다운스트림으로 끊김 없이 흘려보냅니다.

변경 데이터(CDC) 실시간 캡처
Kafka · Pulsar 스트리밍 처리
배치 · 스트림 하이브리드 파이프라인
Workspace 단위 멀티테넌트 격리

마스터 데이터
& 정제

여러 시스템의 같은 엔티티를 합쳐 신뢰할 수 있는 골든 레코드를 만듭니다.

동일 엔티티 통합 · 골든 레코드 생성
결측치 보정 · 코드 표준화 · 중복 제거
룰 기반 형식 통일 자동 정제
품질 룰 등록 · 리니지 기반 추적

Developer Experience

API & SDK 예제 코드

REST · SDK · CLI — 개발자가 즉시 통합 가능한 형태로 API를 제공합니다.

# 카탈로그에 신규 데이터 자산 등록
curl -X POST "https://api.codebailey.com/v1/hub/assets" \
  -H "Authorization: Bearer $CBCH_TOKEN" \
  -H "Content-Type: application/json" \
  -d '{
    "name": "orders_fact",
    "source": "snowflake://analytics.public.orders",
    "owner": "data-platform@codebailey.com",
    "tags": ["pii:masked", "tier:gold", "domain:sales"],
    "quality_rules": [
      { "type": "not_null", "columns": ["order_id", "customer_id"] },
      { "type": "unique", "columns": ["order_id"] }
    ]
  }'

# Response · 201 Created
{
  "asset_id": "cbch_ast_8f3a92b4",
  "status": "registered",
  "lineage_url": "/catalog/cbch_ast_8f3a92b4/lineage"
}

Use Cases

활용 사례

CodeHub이(가) 실제로 활용되는 대표적인 산업 시나리오.

CASE 01

레거시
소스 통합

Oracle · MSSQL부터 SaaS · 파일까지 흩어진 이기종 소스를 142+ 커넥터로 단일 허브에 연결합니다.

CASE 02

실시간
CDC 파이프라인

운영 DB의 변경분을 CDC로 캡처해 Kafka로 흘려보내 분석 레이크를 실시간으로 동기화합니다.

CASE 03

마스터 데이터
· 골든 레코드

고객 · 상품 등 중복 엔티티를 통합해 전사가 공유하는 단일 골든 레코드를 구축합니다.

Technical Specifications

기술 사양 명세서

성능 · 확장성 · API · 데이터 소스 · 보안 · 배포의 6개 영역으로 정리한 프로덕션 명세.

SPEC 01

Performance & SLA

평균 응답 시간 (p95)

< 200 ms

평균 응답 시간 (p99)

< 500 ms

최대 처리량

100,000 ops / s

가용성 SLA

99.99% (3-AZ)

RPO / RTO

< 1 hour / < 1 hour

SPEC 02

Scalability

최대 카탈로그 자산

10M+ assets

동시 사용자

5,000 concurrent

파이프라인 동시 실행

200+ parallel

스케일 모델

Horizontal · Stateless

멀티 테넌시

Workspace-level isolation

SPEC 03

APIs & Protocols

REST API

OpenAPI 3.1 · v1

GraphQL

Spec compliant · Subscriptions

SDKs

PythonJavaNode.jsGo

CLI

codebailey-cli (macOS · Linux · Win)

Event Streaming

Kafka · Webhooks · SSE

SPEC 04

Data Sources Supported

RDBMS

OraclePostgreSQLMySQLMSSQLDB2

Data Warehouse

SnowflakeBigQueryRedshiftDatabricks

Lake / Table Format

IcebergDelta LakeHudiParquet

Messaging

KafkaPulsarKinesisRabbitMQ

SaaS Connectors

142+ (Salesforce, HubSpot 등)

SPEC 05

Security & Compliance

저장 암호화

AES-256 · Envelope Encryption

전송 암호화

TLS 1.3 · mTLS 지원

접근 제어

RBAC + ABAC + Row/Col Policy

감사 로그

변조 불가 (Append-only)

규제 대응

개인정보보호법 · OWASP Top 10

SSO · IdP 연동

SAML 2.0 · OIDC · LDAP

SPEC 06

Deployment & Operations

배포 모델

SaaS · Self-hosted · Air-gapped

컨테이너 런타임

Docker · containerd

오케스트레이션

Kubernetes 1.27+

설치 방식

Helm Chart · Terraform Module

관측성

Prometheus · OpenTelemetry

기술 지원

24 / 7 (Enterprise)

CodeHub을(를)
지금 도입하세요

데이터 거버넌스 중앙 관리 플랫폼. 전문가와 함께 맞춤형 도입 전략을 설계해드립니다.

무료 컨설팅 신청 다른 솔루션 보기

CodeHub 데이터 수집/관리

실제 콘솔 화면 미리보기

5단계 워크플로우

Connect

Normalize

Govern

Distribute

Monitor

8가지 핵심 기능

Data Catalog

Source Connector

Schema Inference

CDC Streaming

Master Data

Cleansing

Loading

Multi-tenancy

CodeHub만의 핵심 차별점

이기종 소스통합 수집

실시간 CDC스트리밍

마스터 데이터& 정제

API & SDK 예제 코드

활용 사례

기술 사양 명세서

CodeHub을(를)지금 도입하세요

이기종 소스
통합 수집

실시간 CDC
스트리밍

마스터 데이터
& 정제

CodeHub을(를)
지금 도입하세요