WebSockets & Realtime Systems Programming · Lekcja

Strategie skalowania horyzontalnego

Dowiedz się, jak rozdzielać połączenia WebSocket między wiele instancji serwera w celu zwiększenia wydajności.

Lekcja 1 z 411 kroki

Strategie skalowania horyzontalnego to bezpłatna lekcja WebSockets & Realtime Systems Programming na CoddyKit. To lekcja 1 z 4. Możesz przeczytać całą lekcję poniżej za darmo — a potem ćwiczyć ją interaktywnie w przeglądarce z wbudowanym edytorem kodu i tutorem AI dostępnym 24/7. To część ścieżki edukacyjnej WebSockets & Realtime Systems Programming, a Twój postęp synchronizuje się między webem a aplikacją CoddyKit. Kurs WebSockets & Realtime Systems Programming zawiera 4 lekcji w sumie.

Części tej lekcji nie zostały jeszcze przetłumaczone i są wyświetlane po angielsku.

Why Scale WebSockets?

Imagine your awesome app suddenly gets super popular! Thousands, even millions, of users want to connect simultaneously.

A single server can only handle so many active WebSocket connections before it gets overwhelmed. It's like a single lane highway trying to handle rush hour traffic!

To keep your app fast and reliable, we need strategies to handle this high traffic.

Grow Up or Grow Out?

When a single server isn't enough, you have two main options to scale:

  • Vertical Scaling: Upgrade your existing server with more CPU, RAM, or faster storage. Think of it as making your single highway lane wider.
  • Horizontal Scaling: Add more servers to share the load. This is like adding more lanes to your highway, or even building parallel highways!

For WebSockets, horizontal scaling is often preferred. It offers better resilience and flexibility.

The Stateful Challenge

WebSockets are different from traditional HTTP requests. While HTTP is often stateless (each request is independent), WebSockets create a stateful, persistent connection.

This means a client and server maintain an open line of communication. If you just randomly send a client to a different server mid-conversation, it won't know what's going on!

This 'state' makes horizontal scaling a bit trickier than with stateless APIs.

Meet the Load Balancer

To distribute traffic across multiple servers, we use a load balancer. Think of it as a smart traffic cop standing at the entrance of your server farm.

Its job is to efficiently direct incoming client connections to one of your available backend WebSocket servers. This prevents any single server from becoming a bottleneck.

WebSocket Handshake & LB

Remember, a WebSocket connection starts as an HTTP request and then 'upgrades' to a WebSocket. Your load balancer needs to understand this process.

It must be configured to correctly handle the Upgrade header in the HTTP request and then maintain the TCP connection for the WebSocket traffic. Without this, the connection won't establish!

Keeping It 'Sticky': Sticky Sessions

Because WebSockets are stateful, it's often important that a client continues talking to the same backend server it initially connected to.

This is achieved using a technique called sticky sessions (or session affinity). The load balancer remembers which server a client used and directs all subsequent requests from that client to the same server.

Common methods include using the client's IP address or a special cookie.

Sticky Session Example

Let's see a simple Node.js WebSocket server. Imagine you have multiple instances of this server running. With sticky sessions, your client would consistently connect to the same server, getting the same 'Server ID'.

To run this: npm install ws then node server.js

const WebSocket = require('ws');
const http = require('http');

const serverId = `Server-${Math.floor(Math.random() * 100) + 1}`; 

const server = http.createServer((req, res) => {
  res.writeHead(200, { 'Content-Type': 'text/plain' });
  res.end(`Hello from HTTP on ${serverId}\n`);
});

const wss = new WebSocket.Server({ server });

wss.on('connection', ws => {
  console.log(`Client connected to ${serverId}`);
  ws.send(`Welcome from ${serverId}!`);

  ws.on('message', message => {
    console.log(`Received on ${serverId}: ${message}`);
    ws.send(`Echo from ${serverId}: ${message}`);
  });

  ws.on('close', () => {
    console.log(`Client disconnected from ${serverId}`);
  });
});

server.listen(8080, () => {
  console.log(`${serverId} listening on port 8080`);
});

Sticky Sessions' Limits

While sticky sessions are great for maintaining a client's connection to a single server, they have drawbacks:

  • Server Failure: If the sticky server crashes, the client loses its connection and might need to re-establish state on a new server.
  • Cross-Server Communication: If a client on Server A needs to send a message to a client on Server B, sticky sessions alone won't solve this.

For more complex scenarios, you'll need more advanced strategies, which we'll cover later!

Load Balancer Methods

Load balancers use different algorithms to decide where to send new connections:

  • Round Robin: Sends connections to servers in a rotating order (Server A, then B, then C, then A...).
  • Least Connections: Sends connections to the server with the fewest active connections.
  • IP Hash: Uses the client's IP address to consistently direct it to the same server (ideal for sticky sessions).

The choice depends on your application's needs.

Quick Check: Scaling WebSockets

You've learned about horizontal scaling and the role of load balancers and sticky sessions. Let's test your understanding!

Recap: Scaling Up!

Great job! In this lesson, you learned why horizontal scaling is vital for high-traffic WebSocket applications.

  • Horizontal scaling adds more servers to handle increased load.
  • Load balancers distribute incoming connections across these servers.
  • They must support the WebSocket upgrade process.
  • Sticky sessions ensure a client consistently connects to the same backend server, maintaining its state.

Next, we'll explore how to configure these load balancers effectively!

Bezpłatny start

Ucz się WebSockets & Realtime Systems Programming dzięki korepetycjom AI — za darmo

Pisz i uruchamiaj kod w przeglądarce, otrzymuj natychmiastową pomoc od korepetytora AI dostępnego 24/7 i kontynuuj naukę w sieci lub w aplikacji.

Kursy
12
Lekcje
47

Często zadawane pytania

Czy lekcja „Strategie skalowania horyzontalnego” jest bezpłatna?

Tak — pełny tekst „Strategie skalowania horyzontalnego” jest dostępny za darmo tutaj w sieci. Aby ćwiczyć ją interaktywnie (wbudowany edytor kodu i tutor AI dostępny 24/7) i odblokować resztę kursu WebSockets & Realtime Systems Programming, przejdź na CoddyKit PRO. Kurs WebSockets & Realtime Systems Programming zawiera 4 lekcji w sumie.

Co nauczysz się w „Strategie skalowania horyzontalnego”?

Dowiedz się, jak rozdzielać połączenia WebSocket między wiele instancji serwera w celu zwiększenia wydajności. Ćwiczysz WebSockets & Realtime Systems Programming z praktycznym kodem, który uruchamiasz bezpośrednio w przeglądarce, a tutor AI dostępny 24/7 odpowiada na Twoje pytania podczas pracy nad lekcją.

Czy potrzebuję doświadczenia, aby zacząć WebSockets & Realtime Systems Programming?

Nie wymagamy żadnego doświadczenia. WebSockets & Realtime Systems Programming w CoddyKit jest strukturyzowany dla początkujących i zaawansowanych użytkowników, więc możesz zacząć tutaj lub od początku i uczyć się w swoim tempie. To lekcja 1 z 4.

Ile czasu zajmuje lekcja „Strategie skalowania horyzontalnego”?

Większość lekcji CoddyKit trwa około 5–10 minut. Każda lekcja to mały, interaktywny krok, dzięki czemu robisz systematyczne postępy i zawsze wracasz dokładnie do tego samego miejsca — na webie i w aplikacji.

Czy mogę pisać i uruchamiać kod w tej lekcji WebSockets & Realtime Systems Programming?

Tak. Każda lekcja WebSockets & Realtime Systems Programming zawiera wbudowany edytor kodu, więc piszesz i uruchamiasz prawdziwy kod bezpośrednio w przeglądarce i od razu otrzymujesz sprzężenie zwrotne od AI — bez konfiguracji na komputerze.

Wszystkie lekcje w tym kursie

  1. Strategie skalowania horyzontalnego
  2. Równoważenie obciążenia WebSocket
  3. Rozproszone zarządzanie stanem
  4. Magistrala Pub/Sub z Redis
← Powrót do WebSockets & Realtime Systems Programming