HQCenter: flotila serverů
Mnoho serverů v jedné konzoli
HQCenter je jeden linuxový server u zákazníka. Připojují se k němu všichni zákazníkovi agenti. Agenti tam posílají svá data a odtud si stahují nastavení, příkazy, licence a nové verze. Správce vidí celou flotilu v HQ Monitor a spravuje ji z prohlížeče.
- 0 příchozích portů pro komunikaci s centrem
- mTLS certifikát pro každého agenta
- 3 min než data dorazí do centra
- ~1 min než se nastavení dostane k agentovi
- s možností vrácení aktualizace agenta i centra
Agent · nginx · goafts · fblogspacker · HQ Monitor
Připojení bez příchozích portů
Každé připojení otevírá agent. HQCenter se nikdy nepřipojuje k databázovému serveru. Nemusíte tedy otevírat porty na serverech Firebird pro komunikaci s centrem a server v pobočce za NAT funguje stejně jako server v sousedním racku.
Na HQCenter běží za nginx tři programy. goafts přijímá archivy, vydává certifikáty a ukládá nastavení, příkazy, licence a nové verze. fblogspacker třídí archivy do složek agentů. HQ Monitor zobrazuje tyto složky v prohlížeči.
| Port HQCenter | Kdo se připojuje | Kontrola |
|---|---|---|
:443 | Agenti: archivy, nastavení, příkazy, licence, nové verze | TLS 1.3 a certifikát agenta; odvolaný certifikát je odmítnut |
:9443 | Nový agent při prvním připojení a instalátory | Bez certifikátu agenta: žádost o certifikát s klíčem z attach.json, otisk klíče centra, stahování instalátorů |
:8443 | Správce a konzole: správa | Certifikát správce a seznam povolených adres |
:8085 | Prohlížeč: konzole HQ Monitor | Seznam povolených adres |
- Připojení jedním příkazemCentrum poskytne soubor
attach.json: adresu, otisk klíče a datum vypršení platnosti. Na serveru:fbagent --attach --file attach.json. Instalátory HQbird 2027 to udělají za vás. Žádost s běžným klíčem schvaluje správce v panelu centra. Žádost s licenčním klíčem se schválí sama, dokud má licence volná místa. - Název agenta je název certifikátuSložka dat agenta, nastavení a řádek v konzoli používají tento název. Instalátor pro Windows se ptá na název serveru; výchozí je název počítače. Certifikát platí jeden rok; odvolaný přestane fungovat okamžitě.
- Nic se neztratíArchiv má až 120 MiB. Při chybě sítě 3 opakování. Odeslaný archiv se smaže; neodeslaný se nikdy nesmaže. Každý agent odesílá s vlastním posunem až 150 s, takže agenti jednoho centra nedorazí ve stejné sekundě.
- Licence z centraAgent si stáhne novou licenci přibližně za minutu: odpověď na dotaz ohledně nastavení mu sdělí informaci o licenci. Agent si také vyžádá licenci při startu a každých 6 hodin. Licenci kontroluje sám, bez sítě. Stránka Licenses zobrazuje stav každého serveru.
- Konzole se nedotýká databázíHQ Monitor sestavuje své stránky ze souborů agentů. Nepřipojuje se k Firebird a nezatěžuje databáze.
- Jeden linuxový serverUbuntu nebo AlmaLinux. Jeden skript nainstaluje centrum; druhý běh aktualizuje to, co už existuje, a zachová hesla a klíče.
IBSurgeon dostává souhrny: stav serverů, seznam serverů, seznam záloh a obnovení (bez souborů), události a týdenní reporty, popisy clusterů, licence. Logy, trace, záložní soubory, hesla a auditní log zůstávají u zákazníka.
Editor nastavení · Spustit nyní · stav doručení
Nastavení z centra
Centrum uchovává kopii nastavení každého agenta. Správce mění úlohy a nastavení ve stejném editoru jako u agenta a klikne na Save and Send to agent. Agent si změnu stáhne přibližně za minutu.
Agent nepřepisuje pracovní nastavení novými. Nejprve kandidáta zkontroluje. Špatný kandidát se odloží, pracovní nastavení zůstane a konzole zobrazí důvod odmítnutí.
Stav na stránce serverů
U každého serveru vidíte, kam se dostala poslední změna: ikona stavu, čas odeslání (push) a čas odpovědi agenta (ack). Nápověda u ikony ukazuje, proč agent odmítl, a přesný čas.
Za minutu vidíte, které servery převzaly novou úlohu zálohování, které ne a proč.
Úroveň serveru v seznamu je verdikt agenta o serveru jako celku. Pod ikonami je jeden řádek s hlavním zjištěním. Samostatná ikona „Agent“ se objeví jen tehdy, když je stav samotného agenta horší než stav serveru.
Server, který mlčí déle než 30 minut, dostane šedou ikonu „žádná data od …“ a přesune se na konec seznamu. Souhrnný řádek nad seznamem počítá servery podle úrovně.
Agent chrání server
Agent sleduje svou vlastní paměť a CPU. Pokud úloha agenta spotřebovává příliš mnoho, agent ji pozastaví a zastaví běh, který drží paměť. Nedotýká se zálohování ani nahrávání dat. Pokud paměť agenta stále roste, agent se restartuje. Úloha, kterou agent vypnul, se zobrazuje ve zprávě o stavu a v editoru; jedno tlačítko ji znovu zapne.
Spustit nyní z centra
Zálohování, obnovení, sweep, kontrolu gfix nebo přepočet indexů můžete spustit hned, bez čekání na plán. Požadavek jde stejnou cestou: do goafts, poté si jej agent při dotazování stáhne a zařadí do své fronty, s obvyklými kontrolami.
- KonceptyUložte změnu v konzoli a odešlete ji později. Vidíte stav: neodesláno, odesláno, použito, nahrazeno.
- Hesla jsou před centrem skrytaKonzole zašifruje nové heslo veřejným klíčem agenta. Dešifrovat jej může pouze agent na svém vlastním serveru.
- Kopie nastaveníPřed každým nahrazením agent uloží kopii: posledních 10, po dobu nejméně 14 dnů. Odmítnutí kandidáti se uchovávají 90 dnů.
- Pouze serverKontrolu podpisu vydání, licenci, vzdálené příkazy, cesty k programům a přihlášení do konzole nelze z centra změnit.
- Nahrazení databáze vyžaduje dvě stranyVzdálené obnovení, které nahradí pracovní databázi, proběhne jen tehdy, pokud to server sám povolí a uživatel má samostatné oprávnění. Před spuštěním musíte napsat název databázového souboru.
- databases.conf z centraSoubor můžete poslat jednomu agentovi. goafts jej pouze předá dál; agent soubor zkontroluje, zapíše a starý ponechá vedle něj.
Podpis · bod obnovení · kontrola
Aktualizace s vrácením zpět
Agenti dostávají nové verze z HQCenter, ne z internetu. Agent aktualizuje sám sebe, HQ Monitor, programy clusteru a Firebird. Každá aktualizace probíhá podle jednoho schématu: zkontrolovat podpis, uložit bod obnovení, nainstalovat, ověřit, že funguje. Pokud nefunguje, vrátit se ke staré verzi.
- 1Podpisvydání podepsané IBSurgeon
- 2Bod obnoveníkopie aktuální verze
- 3Instalacenahrazení souborů
- 4Kontrolanová verze hlásí „pracuji“ a běží 45 s
- 5Hotovonová verze funguje
- ↺Vrácení zpětobnovit kopii z bodu obnovení
- ✓Stará verze fungujepo 2 vráceních zpět je verze zablokována
| Co se aktualizuje | Kdy | Ochrana |
|---|---|---|
| Agent | okamžitě, když odpověď na dotaz na nastavení hlásí novou verzi, a jednou za hodinu; bez takové odpovědi každých 180 s | Podpis, 2 body obnovení. Nová verze musí hlásit „pracuji“ a běžet 45 s. Po 2 vráceních zpět je verze zablokována. |
| HQ Monitor | jednou za hodinu, dokud dotaz na nastavení funguje; jinak každých 180 s | Kontrola stavu konzole po dobu 30 s, kopie staré verze. |
| Programy clusteru | kontrola každých 180 s | Nejprve replika, poté master. |
| Firebird | pouze v okně, výchozí 03:30–04:00 | Čeká na dokončení záloh. Kontrola po instalaci, při selhání vrácení zpět. Vrácené sestavení se znovu neinstaluje. |
| HQCenter | každých 15 min, pokud IBSurgeon zapnul aktualizace pro toto centrum; v okně, které IBSurgeon nastaví, například 02:00–05:00 | Ve výchozím nastavení vypnuto. Vlastník centra může aktualizaci zakázat: STACK_UPDATE=off. Zkontroluje se podpis sady, poté se po dobu až 5 minut kontrolují služby. Pokud selžou, nainstaluje se předchozí sada z mezipaměti. |
- Nejprve test, poté všichniIBSurgeon nejprve zveřejní vydání v testovací zóně a po kontrolách v produkčních zónách. HQCenter kopíruje vydání své zóny jednou za hodinu.
- Podpis kontrolován dvakrátCentrum zkontroluje podpis před stažením a znovu na zapsaných bajtech. Agent jej zkontroluje znovu před instalací.
- Žádný downgradeNelze nainstalovat verzi nižší než aktuální, pokud to sám server nepovolí.
- Na Linuxu mění soubory rootSlužba agenta neběží jako root a nemůže nahradit důvěryhodné instalační soubory.
Sledování stavu · e-mail · webhook
E-maily o problémech a týdenní přehled
HQCenter čte snímek stavu každého agenta. Nový problém nebo problém, který se zhoršil, je událost. E-mail nebo webhook odesílá samo centrum. Jednou týdně centrum sestaví přehled pro celou flotilu.
Centrum samo nic nemění. Pokud problém přetrvává týdny a pro server je to normální, centrum navrhne nový práh. Pouze člověk jej použije.
- 1Čtení stavukaždé 2 minuty, pokud se změnil soubor agenta
- 2Událostnový, zhoršil se, zmizel, vrátil se
- 3E-mailnebo webhook; žádné opakování do 24 h
- 4Týdenní přehledvýchozí pondělí v 07:00
- 5✓ Návrhnový práh; použije jej správce
Celá flotila za 14 dní
Pro každý server: podíl času bez problémů, epizody za týden a která zjištění jsou „zaseknutá“.
Ne šum, ale normál
Aktivní alespoň polovinu času a po dobu alespoň jednoho týdne v řadě. Například CPU serveru je vždy blízko prahu.
Práh z reálných dat
O něco za tím, co server ukázal: o čtvrtinu nad maximum. Pro nižší práh, například volné místo, o pětinu pod minimum. Před schválením jej můžete změnit; platí 30 dní.
- Jeden hostitel, jeden e-mailPokud na hostiteli běží několik agentů, problém s CPU, pamětí nebo diskem hostitele se počítá jednou.
- Zmizel nebo skrytýUdálost uvádí, proč problém zmizel: opraveno, potvrzeno správcem nebo se stal informací.
- Schválení je nová verze nastaveníPráh se k agentovi dostane běžným doručením, jménem správce. Každé schválení a odmítnutí je v protokolu auditu.
- Odkaz v e-mailuE-mail uvádí hostitele, dává nápovědu a odkaz na server v HQ Monitor.
Správce centra zapíná e-mail a webhook. Dokud nejsou nastaveny, žádné e-maily neodcházejí. Události a přehledy jsou viditelné v panelu centra a v jeho API.
Uživatelé · práva · audit · jazyky
Uživatelé a práva
Každý uživatel vidí pouze své vlastní servery. Práva provádět změny se udělují samostatně, jedno po druhém.
Správce vidí všechny servery a spravuje uživatele. Běžný uživatel vidí servery ze svého seznamu. Nové právo nebo nový seznam se projeví při příštím načtení stránky; nové heslo odhlásí uživatele ze všech prohlížečů.
| Právo | Co umožňuje |
|---|---|
| Odesílat nastavení | Odesílat změněná nastavení agentovi prostřednictvím centra. |
| Spouštět úlohy | Spustit a zrušit zálohu, obnovu, sweep nebo přepočet indexů (Spustit nyní). |
| Úlohy, které nahrazují databázi | Spustit obnovu, která nahradí pracovní databázi. Pouze společně s právem spouštět a pouze pokud to agent také povolí. |
- Protokol audituKaždé uložení, odeslání, změna hesla a spuštění úlohy se zapíše s přihlášením uživatele. V goafts chrání protokol hashovací řetězec.
- Protokol požadavků agentaAgent sám zapíše řádek pro každý požadavek, který mění server, a pro každé odmítnutí přístupu: Local API, příkazy z centra, Spustit nyní, změny nastavení, aktualizace. Hesla a těla požadavků se do protokolu nezapisují. Soubor se odesílá do centra společně s logy.
- Přihlášení do HQ MonitorRelace trvá 7 dní. Ne více než 8 pokusů o přihlášení z jedné adresy za 15 minut.
- Administrační panel centraSamostatné přihlášení, pouze s certifikátem správce. Relace trvá 8 hodin. Po 5 neúspěšných pokusech za 15 minut je přihlášení uzavřeno na 15 minut.
- Až 2000 uživatelůKaždý má vlastní heslo a seznam serverů; při přiřazování serverů vyhledávejte podle serveru.
- 5 jazyků rozhraníAngličtina, ruština, němčina, portugalština (Brazílie), španělština. Statistické přehledy také používají zvolený jazyk.