Nabídka pro ranní ptáčataZískejte 60% slevu na roční plány a doživotní licence.

Ready Before the Exam: Scaling and Replacing Web Nodes — NovaCommerce 2

Two application pools helped a timed-exam platform grow. The harder work was proving readiness, draining old nodes and keeping one version of the service.

Autor

Anichur Rahaman

před 1 měsícem5 min čtení339 zhlédnutí
Ready Before the Exam: Scaling and Replacing Web Nodes — NovaCommerce 2

Hodinu po změně DNS frontendu stále přijímal starý server přibližně 36 % zaznamenaného provozu. Tým snížil TTL na 300 sekund a novou trasu ověřil pomocí přepisu v souboru hosts. Migrace tak přesto měla dvě živá vstupní místa. Udržení starého vstupu funkční bylo důležitější než prohlášení změny DNS za dokončenou.

NovaCommerce je anonymizovaná platforma pro kurzy a zkoušky. Tato druhá část zachovává pozorování z případu za září–říjen 2026; nejde o benchmarky StoreConsole ani o samostatně zopakované testy. Část 1 identifikovala identitu pro omezování rychlosti, tlak na připojení k Valkey a následně CPU backendu jako různá omezení. Tato část sleduje aplikační vrstvu.

Oddělte vrstvy, které vyžadují různá rozhodnutí

Implementovaný návrh používal pro frontend jeden load balancer a autoscale pool a pro backend další dvojici. Samostatné názvy DNS již existovaly. Nezávislé health checky, velikosti uzlů a zásady nahrazování z učinily tento návrh pro dané nasazení rozumnou volbou; dva load balancery nejsou univerzálním požadavkem pro každou aplikaci.

Objevování backendu podle štítků nahradilo pevný seznam ID dropletů. Nové uzly se štítky mohly přidat do zamýšleného poolu a pravidel firewallu. Štítek je konfigurace, nikoli důkaz připravenosti aplikace nebo oprávnění. Historický kombinovaný rozpočet load balancerů činil 48 $ měsíčně, nejde o aktuální cenovou nabídku.

Počítejte zdravou kapacitu, nikoli požadované stroje

Oba pooly byly nakonfigurovány pro 2–10 uzlů. Uzly frontendu používaly nginx a dva kontejnery Next.js na 2 vCPU/4 GB; uzly backendu používaly nginx/PHP-FPM na 4 vCPU/8 GB. Šlo o naměřené rozhodnutí při nasazení. Jediná event loop Node.js nedokazuje, že je každé další CPU nečinné: důležité jsou také worker pool a nativní práce.

Historické měření frontendu zaznamenalo přibližně 356 požadavků/s, p95 0,05 s, nula nahlášených chyb a 55–60 % CPU na dvou uzlech. To podpořilo levnější test se sdíleným CPU; neprokazuje to ale kapacitu všech tras, chování hlučného souseda ani zápisových cest. Původní měsíční částky uzlů 28 $/56 $ jsou historické plánovací vstupní údaje.

Historická konfiguraceFrontendBackend
Rozsah poolu2–10 uzlů2–10 uzlů
Na uzel2 vCPU / 4 GB; 2 kontejnery Next.js4 vCPU / 8 GB; PHP-FPM
Cíl pro CPU70 %70 %, později 55 %
Hranice zdravíOvěřena odpověď Next.jsPouze nginx; připravenost aplikace se řeší samostatně
Ostatní stavVeřejná cache vyžaduje koordinaciJeden pevný worker mimo pooly

Předem rozšiřte kapacitu na zkoušky a analyzujte celé spektrum odpovědí

Běh k6 ze 5. října od 21:17 do 21:33 použil přehrávání zaměřené na GET: 300–450 požadavků/s a poté přibližně 750 požadavků/s po dobu šesti minut. Frontend i backend každý vzrostly ze dvou na tři uzly. Nahlášené chyby serveru a časové limity byly nulové, ale přibližně 4 % odpovědí tvořily chyby HTTP 429 ze sdílené testovací IP. Odmítnutý požadavek studenta je stále neúspěšný; nešlo o čistý průchod obchodním tokem a test neověřil trvalé zápisy odpovědí.

Celkové p95 bylo 132–153 ms, zatímco p95 API bylo 320–705 ms. Případ zaznamenal zpoždění metrik o 5–8 minut a v jiném běhu přibližně sedm minut od dosažení 99 % CPU backendu do přidání prvního dalšího uzlu. Jde o pozorování této konfigurace, nikoli o časovou záruku celého poskytovatele. Tým před zkouškami přibližně 45 minut předem rozšířil kapacitu a ověřil její zdravou kapacitu. Kubernetes byl zvážen, ale implementován nebyl; ani on by nezaručil okamžitě dostupnou kapacitu aplikace.

Bezpečný proces nahrazení aplikace: nezávislé pooly, předchozí rozšíření kapacity, připravenost aplikace, přijetí náhradního uzlu, vyprazdnění a ověření výsledku.
Výukové zobrazení procesu případu. Připravenost a vyprazdňování jsou kontrolními branami; historické čekací doby nejsou univerzálními zárukami.

Nahraďte uzel až poté, co jeho nástupce dokáže převzít práci

První nasazení šablony způsobilo krátký bursts 503. Pozdější proces počkal na náhradní uzly, přidal je do balanceru a teprve poté vyprazdnil staré uzly před jejich odstraněním. Zaznamenané čekání 30–40 sekund odpovídá daným nastavením health checků; bezpečná brana ověřuje skutečné přijetí a aktivní práci, nikoli pouze časovač. Dlouhé požadavky, WebSockets a iniciované poskytovatelem zmenšování kapacity vyžadují samostatné řešení.

Backendový endpoint /lb-health obsluhoval pouze nginx. To je užitečné pro kontrolu živosti a přepínač vyprazdňování, ale nedokazuje, že funguje PHP nebo trasa závislá na databázi. Zkombinujte jej s omezenou připraveností aplikace a probe skutečných cest, aniž byste každý health check měnili na drahý dotaz. Pozdější nasazení zaznamenalo 219 probe každé dvě sekundy s nulou chyb; toto vzorkování nedokazuje nulové přerušení pro každého uživatele.

Uchovávejte neměnné a testované image a kompatibilní změny databáze a front. U více instancí Next.js koordinujte sestavení, použitelné action keys, invalidaci cache a rozdílné verze. Cacheujte pouze způsobilé veřejné odpovědi; nikdy nesdílejte relaci studenta ani soukromou stránku. Důvěryhodné proxy hlavičky omezte na řízený ingress. Přenesená IP adresa není identitou studenta ani oprávněním.

Jednorázové uzly stále vyžadují plán pro stav a obnovu

Relace, cache a fronty byly externalizovány do Valkey, nahrávání do Spaces a logy backendu odesílány mimo uzel. 24hodinové pozorování nepřítomnosti zápisů do souborů backendu podpořilo návrh; neprokázalo však, že každá budoucí trasa je bez stavu, ani že je bezpečné uzly náhle odstraňovat. Fronty a naplánovaná práce zůstaly na jediném pevném workeru, což bylo známé místo selhání; jejich centralizace sama o sobě nezaručuje přesně jednorázové účinky.

Starý frontend musel zůstat kompatibilní, dokud přetrvávaly staré připojení a cacheované adresy. TTL 300 sekund neukončuje již navázaná připojení a samotné pozorování 36 % neodhaluje všechny příčiny. Převrácení DNS není okamžitý rollback a nesmí vytvořit dva zapisující procesy do databáze. Po nových zápisech musí obnova tyto zápisy zachovat.

Užitečným výsledkem byl opakovatelný proces připravenosti a vyprazdňování, nikoli příslib, že si nikdo nikdy nevšimne náhrady uzlu. V další části, Část 3, se věnuje přepnutí databáze a starému klientovi, který tým přehlédl.

Série

Primární zdroje

Zkontrolováno 6. listopadu 2026. Anichur Rahaman, zakladatel StoreConsole. Historická pozorování z případu jsou zachována ze stávajících záznamů projektu; obecné doporučení podporují primární zdroje, nikoli nový živý test.

O autorovi

Anichur Rahaman

Pokračovat ve čtení