
The Result Was Fast. Its Queue Was Not — NovaCommerce 4
A 0.34-second result job waited behind slow AI work. Separate lanes helped, but durable submissions, bounded retries and worker recovery still mattered.
A 26-minute database cutover looked complete until a legacy panel wrote to the old copy. The lesson is writer control, reconciliation and honest recovery.
Författare
Anichur Rahaman

Klockan 22:59 den 5 oktober 2026 slutade det planerade databasfönstret. Webbplatsen var igång igen efter 26 minuter. Klockan 23:24 upptäckte teamet att en äldre administrationspanel fortfarande skrev till den gamla databasen. Applikationen hade flyttats, men alla dess skrivande processer hade inte det.
NovaCommerce är en anonymiserad plattform för kurser och examinationer. Del 3 bevarar den befintliga projektuppgifterna för september–oktober och korrigerar de allmänna riktlinjerna kring den. Dessa historiska antal är inte nyinsamlade produktionsmätningar eller StoreConsole-resultat.
Den gamla hanterade MySQL-installationen bestod av en nod med 8 vCPU och 32 GB utan någon standby. Den nya historiska konfigurationen var MySQL 8.4 Standard med 4 vCPU och 16 GB per nod, en primär nod och en standby, för cirka 11 GB data. Detta hanterade risken för ett fel i en ensam nod, men bevisade inte noll databort, noll failover-fördröjning eller regional återställning.
Paret med en kostnad på cirka 389 dollar per månad var ett historiskt budgetfall, inte ett aktuellt erbjudande. DigitalOcean anger nu att Standard Edition har begränsningar från den 15 oktober 2026 för nyligen behöriga konton och från den 30 november för alla konton. Kontrollera kontots, planens och standbyns behörighet innan konfigurationen återskapas. En standby följer dataändringar, även oavsiktliga borttagningar, och är inte en backup.
Dokumentationen beskriver underhållsroutning kl. 22:33, tömning av köer, stopp av schemalagt arbete, 30 sekuters observation utan skrivningar, en kopiering på cirka tio minuter, validering och nya applikationsbilder före kl. 22:59. Ett tyst observationsfönster är inte en avstängning: en glömd klient kan skriva senare. Inventera webben, workers, schemalagare, callbacks, importer och externa paneler och blockera sedan alla gamla skrivningar innan en konsekvent kopia tas.
Fallet rapporterade matchande tabell- och radtotaler, efterföljande kontroller av tabellinnehåll samt en detaljerad jämförelse av en stor resultattabell. Bevar underlaget för vad som jämfördes, vilken ögonblicksbild som användes och vilken metod som tillämpades. Antal ensamma bevisar inte lika innehåll, och jämförelser efter övergången kräver en explicit avgränsning för avstämning. Kontrollera även roller, schema, routines/events där sådana används, teckenkodningar och faktiska flöden för att spara och läsa svar. Standardverktyget mysqldump är inte en motor för parallella dumps; behandla inte en odokumenterad wrapper för flera strömmar som en reproducerbar konsekvensmetod.
| Historisk observation | Registrerat värde | Vad det inte bevisar |
|---|---|---|
| Kopierade totaler | 341 tabeller; 18 727 244 rader | Lika antal ≠ lika affärsstatus |
| Jämförelse av största resultat | Cirka 2,76 miljoner rader | Omfattning och metod måste bevaras |
| De första fyra minuterna efter återöppningen | Cirka 2 900 förfrågningar; 0 5xx | Inte alla senare flöden eller skrivande processer |
| Försenade skrivningar från äldre system | 48 = 44 sammanslagna + 4 bevarade | Inte en generell policy för sammanslagning |
| Uppskattning av webbanslutningar | 10 × 80 = 800 | Läsning/skrivning, worker och överlappande drift uteslutna |
Den äldre panelen lade till 48 rader på den gamla sidan. Den historiska reparationsåtgärden slog samman 44 rader och bevarade fyra nyare versioner på destinationssidan, flyttade sedan panelen och bytte de gamla åtkomstuppgifterna. Redovisningen 44 + 4 = 48 beskriver denna incident, inte en säker generell algoritm där ”senaste tidsstämpeln vinner”. Klockor, borttagningar, beroende rader och samtidiga ändringar kräver affärsmedveten avstämning och en revisionsspår.
Stoppa missade skrivande processer och avsluta eller på annat sätt blockera befintliga anslutningar; att bara ändra ett lösenord stänger inte nödvändigtvis en redan autentiserad session. Verifiera att gamla skrivningar nekas. Den gamla klustern uppges ha hållits fryst i 48 timmar. När den nya sidan tar emot arbete är den gamla kopian återställningsmaterial, inte en omedelbart aktuell återställningsdestination. En återgång till den utan att stämma av nya svar kan leda till förlust av accepterat arbete. Retention bör följa testad återställning och skyldigheter, inte en universell 48-timmarsregel.

Fallet använde standbyn och den primära noden som läsvärdar, med enbart skrivningar till den primära noden och primära läsningar för workern. En supportad anslutningspunkt för standbyläsning kan återanvända betald kapacitet, men delar också resurser för fel och återställning. Kontrollera leverantörens support, fördröjning och felhantering; en dedikerad läsare är inte alltid resursslöseri.
Lagrils sticky=true skickar efterföljande läsningar till skrivanslutningen inom samma begäran efter att en skrivning har skett. Det skyddar inte i sig nästa begäran eller alla användarsessioner. Färskhet mellan begäranden kräver en explicit och testad mekanism eller primära läsningar för auktoritativa svar. Flera läsvärdar garanterar varken universell failover inom två sekunder eller säker återuppspelning av godtyckliga frågor. Testa anslutningsfel separat från en fråga som redan har körts.
Den gamla uppskattningen på 10 noder × 80 PHP-FPM-barn = 800 räknar bara en anslutning per barn. Ett barn kan öppna både läs- och skrivanslutningar; två per barn ger 1 600 innan worker, administrationssessioner eller överlappande driftsgenerering räknas in, jämfört med den historiska gränsen på 1 601. Budgetera för varje anslutningskälla och nodgeneration. Ett tak för antalet anslutningar är ingen garanti för genomströmning.
En separat PostgreSQL 17/pgvector-instans innehöll AI-embeddings och historiskt använde 2 vCPU och 4 GB. En testinstans med 1 vCPU och 2 GB återställdes när arbetslasten behövde mer. Separata instanser ger egna CPU- och minnesbudgetar; delade applikationspooler, nätverk eller leverantörer kan fortfarande koppla samman felen. Detta är ett val av arbetslast och inte ett påstående om att alla MySQL-erbjudanden saknar vektorfunktioner.
Under examinationen den 7 oktober rapporterar dokumentationen att MySQL:s CPU var som mest 24,5 %, i genomsnitt 13,4 %, att högst fem frågor kördes samtidigt och att inga lås väntades observeras. Detta stöder den snävare slutsatsen att de mätta signalerna inte mättades upp under det observerade fönstret. Det bevisar inte en gräns på 450 förfrågningar per sekund eller sexfaldig kapacitet: frågornas sammansättning, skrivkonkurrens, I/O och failover påverkar resultatet.
Håll applikationens inloggningsuppgifter med minsta möjliga behörighet åtskilda från migreringsrättigheter, begränsa databasåtkomsten och testa återställning av backuper med applikationskontroller och uppmätta återställningsmål. En konfigurerad standby, en lyckad kopiering och en lyckad återställning är tre olika typer av bevis. Del 4 fortsätter med de köer och den worker som fortfarande ansluter till denna flotta.
Granskad den 6 november 2026. Anichur Rahaman, grundare av StoreConsole. Fallets siffror och priser förblir historiska; aktuella primärkällor bekräftar de tekniska förbehållen.
Om författaren
Anichur Rahaman
Fortsätt läsa