The Database Moved. One Old Client Did Not — NovaCommerce 3

A 26-minute database cutover looked complete until a legacy panel wrote to the old copy. The lesson is writer control, reconciliation and honest recovery.

Auteur

Anichur Rahaman

1 maand geleden6 min. leestijd401 weergaven
The Database Moved. One Old Client Did Not — NovaCommerce 3

Om 22:59 uur op 5 oktober 2026 eindigde het geplande databasevenster. De site was na 26 minuten weer beschikbaar. Om 23:24 uur vond het team een verouderd beheerderspaneel dat nog naar de oude database schreef. De applicatie was verplaatst; de volledige populatie schrijfclients niet.

NovaCommerce is een geanonimiseerd cursus- en examenplatform. Deel 3 behoudt de bestaande projectadministratie van september–oktober en corrigeert de algemene richtlijnen daaromheen. Deze historische aantallen zijn geen nieuw geauditeerde productiemetingen of StoreConsole-benchmarks.

Een kleiner paar beantwoordde een ander risico

De oude beheerde MySQL bestond uit één node van 8 vCPU/32 GB zonder standby-node. De nieuwe historische configuratie was MySQL 8.4 Standard, met 4 vCPU/16 GB per node, een primary plus standby-node, voor ongeveer 11 GB aan gegevens. Hiermee werd het risico van het uitvallen van één node aangepakt; het bewees geen verlies van gegevens, geen vertraging bij failover en geen regionaal herstel.

Het paar van ongeveer $389 per maand was een historische casebudget, geen actuele aanbieding. DigitalOcean documenteert vanaf 15 oktober 2026 beperkingen voor Standard Edition voor nieuw in aanmerking komende accounts en vanaf 30 november voor alle accounts. Controleer de geschiktheid van het account, het plan en de standby-node voordat je de configuratie reproduceert. Een standby-node volgt gegevenswijzigingen, inclusief onbedoelde verwijderingen; het is geen back-up.

De overstap slaagde voor sommige controles, maar miste een schrijfclient

De administratie beschrijft onderhoudstr routing om 22:33 uur, het legen van queues, het stoppen van geplande taken, 30 seconden zonder writes, een kopie van ongeveer tien minuten, validatie en nieuwe applicatie-images vóór 22:59 uur. Een rustig observatievenster is geen afscherming: een vergeten client kan later alsnog schrijven. Schakel webinterface, workers, schedulers, callbacks, imports en externe panels in en blokkeer vervolgens alle oude writes voordat je een consistente kopie neemt.

De case meldde overeenkomende totalen per tabel en per rij, daaropvolgende controles van tabelinhoud en een gedetailleerde vergelijking van een grote resultatentabel. Bewaar het bewijs van wat is vergeleken, op welk moment en met welke methode. Aantallen alleen bewijzen niet dat de inhoud gelijk is, en vergelijkingen na de overstap vereisen een expliciete afbakening voor reconciliatie. Controleer ook rollen, schema, routines/events waar die worden gebruikt, charactersets en de werkelijke flows voor het opslaan en lezen van antwoorden. Een standaard mysqldump is geen engine voor parallelle dumps; behandel een niet-gedocumenteerde multi-stream wrapper niet als een reproduceerbare methode voor consistente gegevens.

Historische observatieVastgelegde waardeWat dit niet bewijst
Aantallen kopieën341 tabellen; 18.727.244 rijenGelijke aantallen ≠ gelijke bedrijfsstatus
Grootste resultatenvergelijkingOngeveer 2,76 miljoen rijenReikwijdte/methode moet worden vastgelegd
Eerste vier minuten na heropeningOngeveer 2.900 requests; 0 5xxNiet elke latere flow of schrijfclient
Laat verouderde writes48 =44 samengevoegd +4 behoudenGeen algemeen samenvoegbeleid
Schatting van verbindingen voor alleen het web10 ×80 =800Lezen/schrijven, worker en overlap uitgesloten

Achttienveertig late rijen veranderden het verhaal over terugrollen

Het verouderde paneel voegde 48 rijen toe aan de oude kant. De historische herstelactie voegde er 44 samen en behield vier nieuwere doelversies. Daarna werd het paneel verplaatst en werden de oude toegangsgegevens gewijzigd. Die administratie van 44+4=48 beschrijft dit incident, niet een veilig algemeen algoritma waarbij de ‘laatste tijdstempel wint’. Klokken, verwijderingen, afhankelijke rijen en gelijktijdige bewerkingen vereisen bedrijfsgerichte reconciliatie en een audit trail.

Stop gemiste schrijfclients en beëindig bestaande verbindingen of scherm ze anders af; alleen een wachtwoord wijzigen sluit een reeds geauthenticeerde sessie mogelijk niet. Controleer of oude writes worden geweigerd. Het oude cluster zou 48 uur bevroren zijn gehouden. Zodra de nieuwe kant werk accepteert, is die oude kopie herstelmateriaal en geen direct actuele bestemming om terug te rollen. Terugkeren naar die kopie zonder nieuwe antwoorden te reconciliëren kan geaccepteerd werk verliezen. De bewaartermijn moet volgen op geteste herstelacties en verplichtingen, niet op een algemene regel van 48 uur.

Bewijsoverzicht van database-overstap: inventarisclients, oude schrijfclients afschermen, consistent kopiëren, valideren, één schrijfclient omschakelen en late rijen reconciliëren vóór herstel.
Het gemiste verouderde paneel is een les in het beheersen van schrijfclients. De vastgelegde overstap van 26 minuten is geen herbruikbare toezegging over migratieduur.

Een read replica is pas nuttig met een versheidscontract

De case gebruikte de standby-node en primary als read hosts, met writes uitsluitend naar de primary en primary reads voor de worker. Een ondersteund standby-read endpoint kan betaalde capaciteit hergebruiken, maar deelt ook resources voor failure/recovery. Controleer de ondersteuning, de vertraging en het storingsgedrag van de provider; een eigen reader is niet altijd verspilling.

Laravel sticky=true stuurt latere reads in hetzelfde request naar de write connection na een write. Dit beschermt op zichzelf niet het volgende request of elke usersessie. Versheid tussen requests vereist een expliciet, getest mechanisme of primary reads voor gezaghebbende antwoorden. Meerdere read hosts garanderen geen algemene failover van twee seconden en geen veilige herhaling van willekeurige queries. Test een verbindingsfout afzonderlijk van een query die al is uitgevoerd.

De oude schatting van 10 nodes ×80 PHP-FPM-children=800 telt slechts één verbinding per child. Een child kan read- en write connections openen; twee per child leveren 1.600 op, nog zonder worker, beheerderssessies of overlap tijdens de rollout, tegenover de historische limiet van 1.601. Budgeteer elke verbindingsbron en elke nodegeneratie. Een verbindingslimiet is geen garantie voor de doorvoer.

Houd vectorwerk gescheiden zonder totale isolatie te beloven

Een afzonderlijke PostgreSQL 17/pgvector-instance bevatte AI-embeddings, historisch 2 vCPU/4 GB. Een proef met 1 vCPU/2 GB werd teruggedraaid omdat de workload meer nodig had. Afzonderlijke instances bieden afzonderlijke CPU- en geheugenbudgetten; gedeelde applicatiepools, het netwerk of providers kunnen storingen alsnog koppelen. Dit is een workloadkeuze, geen claim dat elk MySQL-aanbod vectorfuncties mist.

Op de examenavond van 7 oktober meldde de administratie een maximale MySQL-CPU-belasting van 24,5%, een gemiddelde van 13,4%, maximaal vijf actieve queries en geen waargenomen lock waits. Dit ondersteunt de beperktere conclusie dat de gemeten periode deze signalen niet verzadigde. Het bewijst geen limiet van 450 requests/s of een zesvoudige capaciteit: de querymix, write contention, I/O en failover beïnvloeden de uitkomst.

Houd applicatiecredentials met minimale rechten gescheiden van migratierechten, beperk databaseaccess en test het terugzetten van back-ups met applicatiecontroles en gemeten hersteldoelen. Een geconfigureerde standby-node, een geslaagde kopie en een geslaagd herstel zijn drie verschillende vormen van bewijs. Deel 4 volgt de queues en worker die nog met deze fleet verbonden zijn.

Reeks

Primaire bronnen

Beoordeeld op 6 november 2026. Anichur Rahaman, oprichter van StoreConsole. De casecijfers en prijzen blijven historisch; de huidige primaire bronnen ondersteunen de technische kanttekeningen.

Over de auteur

Anichur Rahaman

Verder lezen