Database Migration Service (DMS) og Schema Conversion Tool

DMS understøtter to migreringstilstande. Full Load kopierer alle eksisterende data fra kilden til målet — velegnet, når du kan acceptere nedetid, eller når kilden er skrivebeskyttet under migreringen. Change Data Capture (CDC) registrerer løbende ændringer fra kildens transaktionslog, efter den fulde indlæsning er gennemført, så kilden og målet holdes synkroniseret. En kombineret migrering med Full Load + CDC minimerer nedetiden: Migrér data, mens kilden fortsat er aktiv, og gennemfør derefter overgangen, når målet er ajour.

AWS Schema Conversion Tool (SCT) er en gratis applikation, der kan downloades, og som automatisk konverterer kildedatabasens skema (DDL) til et format, der er kompatibelt med måldatabasens databasemotor. Den håndterer tabeldefinitioner, visninger, gemte procedurer, funktioner og udløsere. Ved heterogene migreringer (f.eks. Oracle til PostgreSQL) konverterer SCT automatisk størstedelen af objekterne og markerer elementer, der kræver manuel gennemgang på grund af forskelle i syntaks, som ikke understøttes.

Ved homogene migreringer (samme motor, f.eks. MySQL lokalt til RDS for MySQL) er SCT normalt ikke nødvendig — skemaet er direkte kompatibelt. DMS kan køre Full Load + CDC med det samme. Ved heterogene migreringer (forskellige motorer) skal SCT først konvertere skemaet, DMS håndterer datamigreringen, og du kan være nødt til manuelt at omskrive gemte procedurer og udløsere, som ikke har en tilsvarende funktion i målmotoren.

DMS understøtter en lang række kilder: Oracle, SQL Server, MySQL, MariaDB, PostgreSQL, SAP ASE, MongoDB, IBM Db2 og S3. Understøttede mål omfatter alle ovenstående samt Amazon Redshift, DynamoDB, Kinesis Data Streams og Kafka. Det gør DMS nyttig ikke kun til relationelle migreringer, men også til streaming af relationelle ændringshændelser til en datasø eller en hændelsesdrevet arkitektur ved hjælp af CDC til Kinesis.

DMS bruger regler for tabeltilknytning (JSON) til at styre, hvilke skemaer og tabeller der skal medtages eller udelukkes, og til at anvende datatransformationer. Du kan omdøbe skemaer eller tabeller, konvertere kolonneværdier (f.eks. skrive alle tekststrenge med store bogstaver), tilføje afledte kolonner eller filtrere rækker. Det er nyttigt ved migrering til et mål med andre navngivningskonventioner, eller når du kun vil migrere et udvalg af tabeller.

DMS publicerer målinger til CloudWatch: FullLoadThroughputRowsSource (indlæste rækker pr. sekund), CDCLatencySource (forsinkelsen mellem kildens transaktionslog og DMS' læsning af den) og CDCLatencyTarget (forsinkelsen mellem DMS' læsning og skrivning til målet). Overvåg CDCLatencyTarget nøje under synkroniseringsfasen — når den falder til næsten nul, er målet ajour med kilden, og du er klar til overgangen.

DMS Serverless klargør og skalerer automatisk replikeringskapaciteten ud fra migreringsarbejdet, så du ikke behøver vælge og administrere størrelsen på en replikeringsinstans. Du angiver minimums- og maksimumskapacitet i DMS-kapacitetsenheder (DCU), og DMS skalerer automatisk inden for dette interval. Det er ideelt til migreringer med varierende belastning, eller når du vil undgå risikoen for at vælge en for lille replikeringsinstans under spidsbelastning i migreringen.

Efter migreringen skal du validere, at alle data er med, ved hjælp af DMS Data Validation. Aktivér funktionen i opgaveindstillingerne, hvorefter DMS sammenligner rækkeantal og kontrolsummer mellem kilde- og måltabeller og rapporterer uoverensstemmelser i en separat valideringstabel. Ved heterogene migreringer skal du også køre grundlæggende funktionstests på applikationsniveau. Gennemfør aldrig overgangen, før valideringen viser nul uoverensstemmelser — det er langt dyrere at afstemme data efter en fejlbehæftet overgang end at bruge ekstra tid på validering.

I SAA-C03-eksamenen optræder DMS i scenarier, der kræver databasemigrering med minimal nedetid. Vigtige signaler er: 'migrér en database med løbende replikering' → DMS Full Load + CDC. 'skift af databasemotor' → SCT først, derefter DMS. 'replikér ændringer næsten i realtid til en datasø' → DMS CDC til Kinesis eller S3. 'saml flere kildedatabaser i ét mål' → flere DMS-opgaver til ét målendpoint. DMS er specifikt til databasemigrering — brug MGN til servermigrering og DataSync eller Snowball til masseoverførsel af data.

I denne lektion har du lært, at: DMS understøtter både homogene og heterogene databasemigreringer ved hjælp af tilstandene Full Load og CDC, SCT automatiserer skemakonvertering ved migreringer mellem databasemotorer og markerer elementer til manuel gennemgang, og DMS Serverless skalerer replikeringskapaciteten automatisk, så du ikke behøver beslutte størrelsen på en instans. Nu ser vi nærmere på Amazon EventBridge til hændelsesdrevet routing og busarkitektur.