Database Migration Service (DMS) och Schema Conversion Tool

DMS stöder två migreringslägen. Full Load kopierar alla befintliga data från källan till målet — lämpligt när Ni kan acceptera driftstopp eller när källan är skrivskyddad under migreringen. Change Data Capture (CDC) fångar fortlöpande ändringar från källans transaktionslogg efter att full load har slutförts och håller källan och målet synkroniserade. En kombinerad migrering med Full Load + CDC minimerar driftstoppstiden: migrera data medan källan fortfarande är i drift och genomför sedan övergången när målet har kommit ikapp.

AWS Schema Conversion Tool (SCT) är ett kostnadsfritt program som kan laddas ned och som automatiskt konverterar källdatabasens schema (DDL) till ett format som är kompatibelt med måldatabasmotorn. Det hanterar tabelldefinitioner, vyer, lagrade procedurer, funktioner och triggers. Vid heterogena migreringar (t.ex. Oracle till PostgreSQL) konverterar SCT automatiskt de flesta objekt och markerar sådant som kräver manuell granskning på grund av skillnader i syntax som inte stöds.

Vid homogena migreringar (samma motor, t.ex. MySQL lokalt till RDS for MySQL) behövs SCT vanligtvis inte — schemat är direkt kompatibelt. DMS kan omedelbart köra Full Load + CDC. Vid heterogena migreringar (olika motorer) måste SCT först konvertera schemat, DMS hanterar datamigreringen och Ni kan behöva skriva om lagrade procedurer och triggers manuellt om de saknar motsvarighet i målmotor.

DMS stöder ett stort antal källor: Oracle, SQL Server, MySQL, MariaDB, PostgreSQL, SAP ASE, MongoDB, IBM Db2 och S3. Bland de mål som stöds finns alla ovanstående samt Amazon Redshift, DynamoDB, Kinesis Data Streams och Kafka. Det gör DMS användbart inte bara för relationella migreringar utan även för att strömma relationella ändringshändelser till ett data lake- eller händelsestyrt arkitekturlandskap med CDC till Kinesis.

DMS använder regler för tabellmappning (JSON) för att styra vilka scheman och tabeller som ska inkluderas eller exkluderas samt för att tillämpa datatransformeringar. Ni kan byta namn på scheman eller tabeller, konvertera kolumnvärden (t.ex. göra alla strängar till versaler), lägga till härledda kolumner eller filtrera rader. Detta är användbart när Ni migrerar till ett mål med andra namnkonventioner eller endast vill migrera en delmängd av tabellerna.

DMS publicerar mätvärden till CloudWatch: FullLoadThroughputRowsSource (antal inlästa rader per sekund), CDCLatencySource (fördröjningen mellan källans transaktionslogg och när DMS läser den) och CDCLatencyTarget (fördröjningen mellan när DMS läser från och skriver till målet). Övervaka CDCLatencyTarget noggrant under synkroniseringsfasen — när värdet sjunker till nära noll har målet kommit ikapp källan och Ni är redo för övergången.

DMS Serverless etablerar och skalar automatiskt replikeringskapaciteten utifrån migreringsarbetsbelastningen, vilket eliminerar behovet av att välja och hantera storleken på en replikeringsinstans. Ni anger minsta och högsta antal DMS-kapacitetsenheter (DCU), och DMS skalar automatiskt inom detta intervall. Detta är idealiskt för migreringar med varierande belastning eller när Ni vill undvika risken att replikeringsinstansen är underdimensionerad under perioder med hög migreringsbelastning.

Efter migreringen validerar Ni att alla data finns med genom DMS Data Validation. Aktivera funktionen i aktivitetsinställningarna, så jämför DMS radantal och kontrollsummor mellan källans och målets tabeller och rapporterar avvikelser i en separat valideringstabell. Vid heterogena migreringar bör Ni även köra grundläggande tester på applikationsnivå. Genomför aldrig övergången innan valideringen visar noll avvikelser — att korrigera data efter en felaktig övergång är betydligt mer kostsamt än att lägga extra tid på valideringen.

I SAA-C03-examen förekommer DMS i scenarier som kräver databasmigrering med minimal driftstoppstid. Viktiga signaler är: 'migrate database with ongoing replication' → DMS Full Load + CDC. 'heterogeneous engine change' → SCT först, därefter DMS. 'replicate changes in near real time to a data lake' → DMS CDC till Kinesis eller S3. 'consolidate multiple source databases into one target' → flera DMS-aktiviteter till en målendpoint. DMS är specifikt avsett för databasmigrering — använd MGN för servermigrering och DataSync eller Snowball för massöverföring av data.

I den här lektionen har Ni lärt Er att DMS stöder både homogena och heterogena databasmigreringar med lägena Full Load och CDC, att SCT automatiserar schemakonvertering vid motorbyten och markerar sådant som behöver granskas manuellt och att DMS Serverless skalar replikeringskapaciteten automatiskt och eliminerar beslut om instansstorlek. Nästa del handlar om Amazon EventBridge för händelsestyrd routing och bussarkitektur.