HQCenter: парк серверів
Багато серверів в одній консолі
HQCenter — це один Linux-сервер на майданчику клієнта. Усі агенти клієнта підключаються до нього. Агенти надсилають туди свої дані та отримують звідти налаштування, команди, ліцензії та нові версії. Адміністратор бачить увесь парк у HQ Monitor і керує ним із браузера.
- 0 вхідних портів для зв'язку з центром
- mTLS сертифікат для кожного агента
- 3 хв до надходження даних у центр
- ~1 хв до надходження налаштувань агенту
- з відкатом оновлення агентів і центру
Agent · nginx · goafts · fblogspacker · HQ Monitor
З'єднання без вхідних портів
Агент відкриває кожне з'єднання. HQCenter ніколи не підключається до сервера бази даних. Тож вам не потрібно відкривати порти на серверах Firebird для зв'язку з центром, і сервер у філії за NAT працює так само, як сервер у сусідній стійці.
Три програми працюють за nginx на HQCenter. goafts приймає архіви, видає сертифікати та зберігає налаштування, команди, ліцензії та нові версії. fblogspacker розкладає архіви по теках агентів. HQ Monitor показує ці теки в браузері.
| Порт HQCenter | Хто підключається | Перевірка |
|---|---|---|
:443 | Агенти: архіви, налаштування, команди, ліцензія, нові версії | TLS 1.3 і сертифікат агента; відкликаний сертифікат відхиляється |
:9443 | Новий агент при першому підключенні та інсталятори | Без сертифіката агента: запит на сертифікат із ключем із attach.json, відбиток ключа центру, завантаження інсталяторів |
:8443 | Адміністратор і консоль: керування | Сертифікат адміністратора та список дозволених адрес |
:8085 | Браузер: консоль HQ Monitor | Список дозволених адрес |
- Підключення однією командоюЦентр видає файл
attach.json: адреса, відбиток ключа та дата завершення терміну дії. На сервері:fbagent --attach --file attach.json. Інсталятори HQbird 2027 роблять це за вас. Запит зі звичайним ключем затверджує адміністратор у панелі центру. Ліцензійний ключ затверджує запит сам, поки в ліцензії є вільні місця. - Ім'я агента — це ім'я сертифікатаТека даних агента, налаштування та рядок у консолі використовують це ім'я. Інсталятор Windows запитує ім'я сервера; за замовчуванням — ім'я комп'ютера. Сертифікат дійсний один рік; відкликаний перестає працювати одразу.
- Нічого не втрачаєтьсяАрхів — до 120 MiB. У разі мережевої помилки — 3 повторні спроби. Надісланий архів видаляється; ненадісланий ніколи не видаляється. Кожен агент надсилає зі своїм зсувом до 150 с, тож агенти одного центру не надходять в одну й ту саму секунду.
- Ліцензії з центруАгент отримує нову ліцензію приблизно за хвилину: відповідь на опитування налаштувань повідомляє його про ліцензію. Агент також запитує ліцензію під час запуску та кожні 6 годин. Він перевіряє ліцензію самостійно, без мережі. Сторінка Licenses показує стан кожного сервера.
- Консоль не торкається баз данихHQ Monitor будує свої сторінки з файлів агентів. Він не підключається до Firebird і не створює навантаження на бази даних.
- Один Linux-серверUbuntu або AlmaLinux. Один скрипт встановлює центр; другий запуск оновлює наявне та зберігає паролі й ключі.
IBSurgeon отримує зведення: стан серверів, список серверів, список резервних копій і відновлень (без файлів), події та щотижневі звіти, описи кластерів, ліцензії. Журнали, трасування, файли резервних копій, паролі та журнал аудиту залишаються в клієнта.
Редактор налаштувань · Run now · стан доставки
Налаштування з центру
Центр зберігає копію налаштувань кожного агента. Адміністратор змінює завдання та налаштування в тому самому редакторі, що й поруч з агентом, і натискає Save and Send to agent. Агент отримує зміну приблизно за хвилину.
Агент не записує нові налаштування поверх робочих. Спершу він перевіряє кандидата. Поганий кандидат відкладається, робочі налаштування залишаються, а консоль показує причину відмови.
Стан на сторінці серверів
Для кожного сервера ви бачите, наскільки просунулася остання зміна: значок стану, час надсилання (push) і час відповіді агента (ack). Підказка на значку показує, чому агент відмовив, і точний час.
За хвилину ви бачите, які сервери взяли нове завдання резервного копіювання, які ні та чому.
Рівень сервера в списку — це вердикт агента щодо сервера загалом. Під значками є один рядок з основним висновком. Окремий значок «Agent» з'являється лише тоді, коли стан самого агента гірший за стан сервера.
Сервер, який не подає ознак життя понад 30 хвилин, отримує сіру іконку «немає даних з …» і переміщується в кінець списку. Рядок підсумку над списком показує кількість серверів за рівнем.
Агент захищає сервер
Агент стежить за власною пам'яттю та CPU. Якщо завдання агента споживає занадто багато, агент призупиняє його та зупиняє запуск, що утримує пам'ять. Він не торкається резервних копій і вивантаження даних. Якщо пам'ять агента все ще зростає, агент перезапускає себе. Завдання, яке агент вимкнув, відображається у звіті про стан і в редакторі; одна кнопка вмикає його знову.
Запуск одразу з центру
Ви можете запустити резервне копіювання, відновлення, sweep, перевірку gfix або перерахунок індексів зараз, не чекаючи розкладу. Запит проходить той самий шлях: у goafts, потім агент забирає його під час опитування і ставить у свою чергу, зі звичайними перевірками.
- ЧернеткиЗбережіть зміну в консолі та надішліть її пізніше. Ви бачите стан: не надіслано, надіслано, застосовано, замінено.
- Паролі приховані від центруКонсоль шифрує новий пароль відкритим ключем агента. Розшифрувати його може лише агент на своєму сервері.
- Копії налаштуваньПеред кожною заміною агент зберігає копію: останні 10, щонайменше за 14 днів. Відхилені кандидати зберігаються 90 днів.
- Лише на серверіПеревірку підпису випуску, ліцензію, віддалені команди, шляхи до програм і вхід у консоль не можна змінити з центру.
- Заміна бази даних потребує двох сторінВіддалене відновлення, яке замінює робочу базу даних, виконується лише якщо сам сервер це дозволяє і користувач має окреме право. Перед початком потрібно ввести ім'я файлу бази даних.
- databases.conf з центруВи можете надіслати файл одному агенту. goafts лише передає його далі; агент перевіряє та записує файл і зберігає старий поруч із ним.
Підпис · точка відкату · перевірка
Оновлення з відкатом
Агенти отримують нові версії з HQCenter, а не з інтернету. Агент оновлює себе, HQ Monitor, кластерні програми та Firebird. Кожне оновлення відбувається за однією схемою: перевірити підпис, зберегти точку відкату, встановити, перевірити, що працює. Якщо не працює — повернутися до старої версії.
- 1Підписвипуск підписано IBSurgeon
- 2Точка відкатукопія поточної версії
- 3Встановленнязамінити файли
- 4Перевірканова версія повідомляє «я працюю» і працює 45 с
- 5Готовонова версія працює
- ↺Відкатвідновити копію з точки відкату
- ✓Стара версія працюєпісля 2 відкатів версія блокується
| Що оновлюється | Коли | Захист |
|---|---|---|
| Агент | одразу, коли відповідь на опитування налаштувань повідомляє про нову версію, і щогодини; без такої відповіді — кожні 180 с | Підпис, 2 точки відкату. Нова версія повинна повідомити «я працюю» і працювати 45 с. Після 2 відкатів версія блокується. |
| HQ Monitor | щогодини, поки працює опитування налаштувань; інакше кожні 180 с | Перевірка стану консолі протягом 30 с, копія старої версії. |
| Кластерні програми | перевірка кожні 180 с | Спочатку репліка, потім мастер. |
| Firebird | лише у вікні, за замовчуванням 03:30–04:00 | Чекає завершення резервних копій. Перевірка після встановлення, відкат у разі збою. Відкочена збірка більше не встановлюється. |
| HQCenter | кожні 15 хв, якщо IBSurgeon увімкнув оновлення для цього центру; у вікні, яке задає IBSurgeon, наприклад 02:00–05:00 | Вимкнено за замовчуванням. Власник центру може заборонити оновлення: STACK_UPDATE=off. Перевіряється підпис стеку, потім служби перевіряються до 5 хвилин. Якщо вони не працюють, встановлюється попередній стек із кешу. |
- Спочатку тест, потім усіIBSurgeon спочатку публікує випуск у тестову зону, а після перевірок — у робочі зони. HQCenter копіює випуски своєї зони щогодини.
- Підпис перевіряється двічіЦентр перевіряє підпис перед завантаженням і ще раз на записаних байтах. Агент перевіряє його знову перед встановленням.
- Без відкатуВи не можете встановити версію, нижчу за поточну, якщо цього не дозволяє сам сервер.
- У Linux файли змінює rootСлужба агента не працює від імені root і не може замінювати довірені інсталяційні файли.
Спостереження за станом · email · webhook
Листи про проблеми та щотижневий звіт
HQCenter зчитує знімок стану кожного агента. Нова проблема або проблема, що погіршилася, є подією. Сам центр надсилає email або webhook. Раз на тиждень центр формує звіт для всього парку серверів.
Центр сам нічого не змінює. Якщо проблема триває тижнями і це нормально для сервера, центр пропонує новий поріг. Застосовує його лише людина.
- 1Зчитати станкожні 2 хвилини, якщо файл агента змінився
- 2Подіянова, погіршилася, зникла, повернулася
- 3Emailабо webhook; без повторів протягом 24 год
- 4Щотижневий звітза замовчуванням у понеділок о 07:00
- 5✓ Пропозиціяновий поріг; адміністратор застосовує його
Увесь парк за 14 днів
Для кожного сервера: частка часу без проблем, епізоди на тиждень і які знахідки є «застряглими».
Не шум, а норма
Активна щонайменше половину часу і щонайменше один тиждень поспіль. Наприклад, CPU сервера завжди близький до порогу.
Поріг із реальних даних
Трохи далі за те, що показав сервер: на чверть вище за максимум. Для нижчого порогу, наприклад вільного місця, на п'яту частину нижче за мінімум. Ви можете змінити його до затвердження; він дійсний 30 днів.
- Один хост, один emailЯкщо на хості працює кілька агентів, проблема з CPU, пам'яттю чи диском хоста рахується один раз.
- Зникла або прихованаПодія вказує, чому проблема зникла: виправлено, підтверджено адміністратором або стало інформацією.
- Затвердження — це нова версія налаштуваньПоріг потрапляє до агента звичайною доставкою від імені адміністратора. Кожне затвердження й відхилення є в журналі аудиту.
- Посилання в листіУ листі вказано хост, підказку та посилання на сервер у HQ Monitor.
Адміністратор центру вмикає email і webhook. Поки їх не налаштовано, листи не надсилаються. Події та звіти видно в панелі центру та в його API.
Користувачі · права · аудит · мови
Користувачі та права
Кожен користувач бачить лише свої сервери. Права на внесення змін надаються окремо, одне за одним.
Адміністратор бачить усі сервери та керує користувачами. Звичайний користувач бачить сервери зі свого списку. Нове право або новий список набуває чинності під час наступного завантаження сторінки; новий пароль виводить користувача з усіх браузерів.
| Право | Що воно дозволяє |
|---|---|
| Надсилати налаштування | Надсилати змінені налаштування агенту через центр. |
| Запускати завдання | Запускати й скасовувати резервне копіювання, відновлення, sweep або перерахунок індексів (Run now). |
| Завдання, що замінюють базу даних | Запускати відновлення, яке замінює робочу базу даних. Лише разом із правом запуску і лише якщо це також дозволяє агент. |
- Журнал аудитуКожне збереження, надсилання, зміна пароля та запуск завдання записуються з логіном користувача. У goafts журнал захищений ланцюжком хешів.
- Журнал запитів агентаСам агент записує рядок для кожного запиту, що змінює сервер, і для кожної відмови в доступі: Local API, команди з центру, Run now, зміни налаштувань, оновлення. Паролі та тіла запитів до журналу не потрапляють. Файл надходить до центру разом із логами.
- Вхід у HQ MonitorСесія триває 7 днів. Не більше 8 спроб входу з однієї адреси за 15 хвилин.
- Панель адміністратора центруОкремий вхід, лише з сертифікатом адміністратора. Сесія триває 8 годин. Після 5 невдалих спроб за 15 хвилин вхід закривається на 15 хвилин.
- До 2000 користувачівКожен має власний пароль і список серверів; пошук за сервером під час призначення серверів.
- 5 мов інтерфейсуАнглійська, російська, німецька, португальська (Бразилія), іспанська. Звіти зі статистики також використовують обрану мову.