Nabídka pro ranní ptáčataZískejte 60% slevu na roční plány a doživotní licence.

The Database Moved. One Old Client Did Not — NovaCommerce 3

A 26-minute database cutover looked complete until a legacy panel wrote to the old copy. The lesson is writer control, reconciliation and honest recovery.

Autor

Anichur Rahaman

před 1 měsícem6 min čtení401 zhlédnutí
The Database Moved. One Old Client Did Not — NovaCommerce 3

Ve 22:59 dne 5. října 2026 skončilo plánované okno pro práci s databází. Web byl zpět po 26 minutách. Ve 23:24 tým zjistil, že starý administrační panel stále zapisuje do původní databáze. Aplikace se přesunula; celá populace zapisujících komponent nikoli.

NovaCommerce je anonymizovaná platforma pro kurzy a zkoušky. Část 3 zachovává stávající záznam projektu ze září–října a upravuje obecné doporučení, které se k němu vztahuje. Tyto historické počty nejsou nově ověřenými produkčními měřeními ani benchmarky StoreConsole.

Menší dvojice řešila jiné riziko

Původní spravovaná MySQL byla jeden uzel s 8 vCPU/32 GB bez záložního uzlu. Nové historické uspořádání tvořila MySQL 8.4 Standard, 4 vCPU/16 GB na uzel, primární a záložní uzel, přibližně 11 GB dat. Řešilo tak cestu selhání jediného uzlu, ale neprokázalo nulovou ztrátu dat, nulovou prodlevu při přepnutí ani regionální obnovu.

Dvojice za přibližně 389 $/měsíc byla historickým rozpočtem případu, nikoli současnou nabídkou. DigitalOcean nyní uvádí omezení Standard Edition od 15. října 2026 pro nově způsobilé účty a od 30. listopadu pro všechny účty. Před reprodukcí uspořádání ověřte způsobilost účtu, plánu a záložního uzlu. Záložní uzel sleduje změny dat včetně nechtěného smazání; není to záloha.

Přepnutí prošlo několika kontrolami, ale minulo jednu zapisující komponentu

Záznam popisuje přesměrování údržby ve 22:33, vypuštění front, zastavení naplánovaných úloh, 30 sekund bez zápisů, přibližně desetiminutovou kopii, validaci a nové obrazy aplikace před 22:59. Tiché období pozorování není plot: zapomenutý klient může zapsat později. Zkontrolujte webovou aplikaci pro správu skladových zásob, workery, plánovače, callbacky, importy a externí panely a poté zablokujte všechny staré zápisy, než pořídíte konzistentní kopii.

Případ uváděl shodné počty tabulek a řádků, následné kontroly obsahu tabulek a podrobné porovnání velké tabulky výsledků. Zachovejte důkazy o tom, co bylo porovnáno, u jakého snímku a jakou metodou. Samotné počty neprokazují stejný obsah a porovnání po přepnutí vyžadují výslovnou hranici sladění. Zkontrolujte také role, schéma, rutiny a události tam, kde se používají, znakové sady a skutečné toky ukládání a čtení odpovědí. Standardní mysqldump není enginem pro paralelní výpis; nepodlávejte nedokumentovanému multi-stream wrapperu jako reprodukovatelnému postupu pro zajištění konzistence.

Historické pozorováníZaznamenaná hodnotaCo neprokazuje
Počty kopií341 tabulek; 18 727 244 řádkůStejné počty ≠ stejný obchodní stav
Porovnání největší tabulky výsledkůPřibližně 2,76 milionu řádkůRozsah a metoda musí být zachovány
První čtyři minuty po opětovném otevřeníPřibližně 2 900 požadavků; 0 5xxNe každý následný tok či zapisující komponenta
Pozdní zápisy ze starého systému48 = 44 sloučených + 4 zachovanéNení obecná zásada sloučení
Odhad připojení pouze pro web10 × 80 = 800Vyloučeno čtení a zápis, worker a překryv

48 pozdních řádků změnilo příběh rollbacku

Starý panel přidal 48 řádků na původní stranu. Historická oprava sloučila 44 řádků a ponechala čtyři novější cílové verze, přesunula panel a změnila staré přihlašovací údaje. Takové vyčíslení 44 + 4 = 48 popisuje tento incident, nikoli bezpečný obecný algoritmus „vždy vyhrává nejnovější časové razítko“. Hodiny, smazání, závislé řádky a souběžné úpravy vyžadují sladění zohledňující obchodní logiku a auditní stopu.

Zastavte opomenuté zapisující komponenty a ukončete nebo jinak izolujte stávající připojení; samotná změna hesla nemusí zavřít již ověřenou relaci. Ověřte, že staré zápisy jsou odmítány. Podle zprávy byl původní cluster udržován zmrazený po dobu 48 hodin. Jakmile nová strana přijme práci, stará kopie slouží jako materiál pro obnovu, nikoli jako okamžitě aktuální cíl rollbacku. Návrat na ni bez sladění nových odpovědí může ztratit přijatou práci. Doba uchovávání by měla vycházet z ověřené obnovy a závazných požadavků, nikoli z univerzálního 48hodinového pravidla.

Mapa důkazů k přepnutí databáze: klienti pro správu skladových zásob, izolace starých zapisujících komponent, konzistentní kopie, validace, přepnutí jedné zapisující komponenty a sladění pozdních řádků před obnovou.
Opomenutý starý panel je poučením o řízení zapisujících komponent. Zaznamenané 26minutové okno není opakovatelným příslibem doby migrace.

Replika pro čtení je užitečná pouze se smlouvou o aktuálnosti dat

Případ používal záložný a primární uzel jako hostitele pro čtení, přičemž zápisy byly pouze na primárním uzlu a worker četl z primárního uzlu. Podporovaný endpoint pro čtení ze záložního uzlu může využít placenou kapacitu, ale sdílí také zdroje pro řešení poruch a obnovu. Ověřte podporu poskytovatele, prodlevu a chování při poruchách; vyhrazený čtecí uzel není vždy plýtváním.

Laravel sticky=true směruje pozdější čtení po zápisu v rámci stejného požadavku na připojení pro zápis. Samotné nastavení nechrání následující požadavek ani všechny uživatelské relace. Aktuálnost napříč požadavky vyžaduje výslovný ověřený mechanismus nebo čtení z primárního uzlu pro autoritativní odpovědi. Více čtecích hostitelů nezaručuje univerzální dvousekundové přepnutí ani bezpečné znovu provedení libovolných dotazů. Otestujte selhání připojení odděleně od dotazu, který už byl proveden.

Původní odhad 10 uzlů × 80 dětí PHP-FPM = 800 započítává pouze jedno připojení na dítě. Dítě může otevřít připojení pro čtení i zápis; dvě připojení na dítě dávají 1 600 ještě před započtením workera, administrátorských relací nebo postupného překryvu, zatímco historický limit byl 1 601. Zahrňte do rozpočtu každý zdroj připojení a generaci uzlů. Limit připojení není zárukou propustnosti.

Oddělte práci s vektory, ale neprezentujte ji jako zcela izolovanou

Samostatná instance PostgreSQL 17/pgvector uchovávala embeddingy AI a měla historicky 2 vCPU/4 GB. Zkušební instance 1 vCPU/2 GB byla zrušena, když její pracovní zátěž vyžadovala více. Samostatné instance poskytují oddělené rozpočty pro CPU a paměť; sdílené fondy připojení aplikací, síť nebo poskytovatelé stále mohou spojovat selhání. Jde o volbu podle pracovní zátěže, nikoli o tvrzení, že kažná nabídka MySQL postrádá schopnosti práce s vektory.

Ve večer zkoušky dne 7. října záznam uvádí maximální využití CPU MySQL 24,5 %, průměr 13,4 %, nejvýše pět běžících dotazů a žádné pozorované čekání na zámky. Tyto údaje podporují užší závěr, že v měřeném okně nebyly tyto signály nasycené. Nedokazují však limit 450 požadavků/s ani šestinásobnou kapacitu: výsledek ovlivňuje směs dotazů, soutěž při zápisu, I/O a přepnutí při poruše.

Oddělte přihlašovací údaje aplikace s minimálními oprávněními od práv pro migraci, omezte přístup k databázi a otestujte obnovu záloh pomocí kontrol aplikace a měřených cílů obnovy. Nakonfigurovaný záložní uzel, úspěšná kopie a úspěšná obnova jsou tři různé důkazy. Část 4 navazuje na fronty a worker, které se stále připojují k této flotile.

Série

Primární zdroje

Revidováno 6. listopadu 2026. Anichur Rahaman, zakladatel StoreConsole. Hodnoty a ceny v případu zůstávají historické; současné primární zdroje podporují technická upřesnění.

O autorovi

Anichur Rahaman

Pokračovat ve čtení