0Pricing
SQL Academy · 강의

샤드 간 쿼리: 가장 어려운 문제

분산 데이터베이스에서 샤드 간 조인과 트랜잭션이 가장 어려운 문제인 이유와 이를 최소화하는 패턴을 이해해보세요.

샤드 간 쿼리: 가장 어려운 문제은(는) CoddyKit의 무료 SQL Academy 강의입니다. 이것은 4개 중 2번째 강의입니다. 아래에서 전체 강의를 무료로 읽을 수 있으며, 내장 코드 에디터와 24/7 AI 튜터와 함께 브라우저에서 직접 실습할 수 있습니다. 이 강의는 SQL Academy 학습 경로의 일부이며, 진행 상황이 웹과 CoddyKit 앱에 동기화됩니다. SQL Academy 강의에는 총 4개의 강의가 포함되어 있습니다.

샤딩의 대가

샤딩은 쓰기와 용량을 확장하지만 샤드에 걸친 query를 어렵게 만듭니다. 모든 샤드 간 query는 팬아웃이 됩니다.

단일 샤드 query는 쉽습니다

샤드 키가 WHERE 절에 있으면 라우터가 하나의 샤드에 query 하나를 보냅니다:

-- shard_id = hash(user_id) % N
SELECT * FROM orders WHERE user_id = 42;
-- Router computes shard, sends one query, gets one result.

팬아웃 query

샤드 키가 없으면 라우터가 모든 샤드에 query를 보내고 결과를 병합합니다:

-- WHERE status = 'paid' — no user_id
SELECT * FROM orders WHERE status = 'paid' ORDER BY created_at DESC LIMIT 100;
-- Must query all N shards, merge results, sort, take top 100.

팬아웃 집계

COUNT/SUM/AVG의 경우 각 샤드에서 부분 결과를 가져온 다음 라우터나 앱에서 결합합니다:

-- On each shard:
SELECT COUNT(*), SUM(total) FROM orders;

-- Aggregator:
final_count = SUM(counts), final_sum = SUM(sums)

-- AVG is trickier — need SUM and COUNT, can't average averages.

샤드 간 JOIN

양쪽이 같은 키로 샤딩되어 있으면(동일 위치에 배치되어 있으면) JOIN이 샤드 내부에서 처리됩니다. 그렇지 않으면 대규모 환경에서 사실상 불가능합니다.

참조 테이블(모든 곳에 복제됨)

작은 “조회” 테이블을 모든 샤드에 복제하면 해당 테이블과의 JOIN이 로컬에서 처리됩니다. Citus에서는 이를 “reference tables”라고 부릅니다.

샤드 간 패턴 피하기

스키마 설계 기법은 다음과 같습니다:

  • 비정규화 — 부모 데이터를 자식과 같은 샤드에 복제합니다.
  • “불필요해 보일 때도” 어디서나 샤드 키를 사용합니다.
  • 별도의 분석 DB에서 보고서를 미리 계산합니다.

샤드 간 페이지네이션

여러 샤드에 OFFSET 1000 LIMIT 10을 적용하는 방식은 매우 비효율적입니다. 모든 샤드가 1010개의 행을 생성해야 합니다. 대신 키셋 페이지네이션을 사용합니다.

분산 트랜잭션

2단계 커밋(2PC)은 샤드 전체에서 원자적 커밋을 조정합니다. 느리고, 네트워크 분할 상황에서 취약합니다. 실제로는 “사가” 패턴을 사용하도록 설계합니다:

// Saga pattern (conceptual):
//   1. Local TX on shard A: mark as pending, log
//   2. RPC to shard B: do its part
//   3. Local TX on shard A: mark as committed
//   4. On failure: compensating transactions

트래픽 집중 샤드

유명 사용자 한 명이나 입소문이 난 제품 하나에 트래픽이 집중되면 한 샤드가 확장성을 무너뜨립니다. 이를 감지하여 하위 샤드로 나누거나 이동합니다.

샤드 간 외래 키

RDBMS 외래 키는 샤드에 걸쳐 적용되지 않습니다. 앱에서 참조 무결성을 강제하거나, 샤드 간 관계에 최종 일관성을 허용해야 합니다.

요약

샤딩은 어려운 문제를 “쓰기 확장”에서 “샤드 내부에 머무르도록 query를 구성하는 문제”로 바꿉니다.

  • 단일 샤드 query는 빠릅니다.
  • 팬아웃은 느립니다.
  • 작업을 로컬에 유지하려면 비정규화합니다.
  • 공유 차원에는 참조 테이블을 사용합니다.
  • 2PC 대신 사가를 사용합니다.

빠른 확인

샤딩된 데이터베이스에서 WHERE에 샤드 키가 없는 SELECT가 비싼 이유는 무엇입니까?

자주 묻는 질문

“샤드 간 쿼리: 가장 어려운 문제” 강의는 무료인가요?

네 — “샤드 간 쿼리: 가장 어려운 문제” 전체 내용을 이 웹사이트에서 무료로 읽을 수 있습니다. 인터랙티브하게 실습하려면(내장 코드 에디터와 24/7 AI 튜터), CoddyKit PRO로 업그레이드하면 SQL Academy 강의 전체를 잠금 해제할 수 있습니다. SQL Academy 강의에는 총 4개의 강의가 포함되어 있습니다.

“샤드 간 쿼리: 가장 어려운 문제”에서 뭘 배우나요?

분산 데이터베이스에서 샤드 간 조인과 트랜잭션이 가장 어려운 문제인 이유와 이를 최소화하는 패턴을 이해해보세요. 브라우저에서 직접 실행하는 실습 코드로 SQL Academy을(를) 배우며, 24/7 AI 튜터가 강의를 진행하면서 질문에 답변해줍니다.

SQL Academy을(를) 시작하는 데 경험이 필요한가요?

사전 경험은 필요하지 않습니다. CoddyKit의 SQL Academy은(는) 초급자부터 고급 학습자까지를 위해 구성되어 있으므로, 여기서 시작하거나 처음부터 시작할 수 있으며 자신의 속도대로 진행할 수 있습니다. 이것은 4개 중 2번째 강의입니다.

“샤드 간 쿼리: 가장 어려운 문제” 강의는 얼마나 걸리나요?

대부분의 CoddyKit 강의는 약 5~10분이 소요됩니다. 각 강의는 간결하고 인터랙티브하여 꾸준한 진행이 가능하며, 웹과 앱에서 중단한 부분부터 바로 시작할 수 있습니다.

이 SQL Academy 강의에서 코드를 작성하고 실행할 수 있나요?

네. 모든 SQL Academy 강의에는 내장 코드 에디터가 포함되어 있으므로, 브라우저에서 바로 실제 코드를 작성하고 실행한 후 즉시 AI 피드백을 받을 수 있습니다 — 로컬 설정이 필요 없습니다.

이 강의의 모든 강의

  1. 샤딩 전략: 범위, 해시, 디렉터리
  2. 샤드 간 쿼리: 가장 어려운 문제
  3. Citus와 분산 Postgres
  4. 샤딩하지 말아야 하는 경우
← SQL Academy(으)로 돌아가기