HQbird sunucu sağlığı
Sunucu sağlığı bir dakikada
Ajan her dakika sunucu, işletim sistemi, diskler ve Firebird veritabanları hakkında veri toplar. Her 10 dakikada bir bu verileri eşik değerlerle karşılaştırır ve bir durum anlık görüntüsü yazar. Raporu açarsınız ve neyin, ne zaman bozulduğunu ve ne yapılması gerektiğini hemen görürsünüz.
- 1 dk sunucu ve veritabanı metrikleri
- 10 dk durum anlık görüntüsü
- 18 rapordaki sistem
- 24 sa · 7 · 14 gün geçmiş
- salt okunur izleme sunucuda hiçbir şeyi değiştirmez
Senaryo
Bir yöneticinin dakikası
Sabah. Kullanıcılar dün gece her şeyin yavaş olduğunu söylüyor. Dört HQ Monitor ekranı, kahveniz soğumadan yanıtı veriyor.
server_status
Veriler nasıl toplanır
Ajan Firebird sunucusunda çalışır ve verileri bulundukları yerden okur: işletim sistemi sayaçları, cgroup ve ETW, MON$ izleme tabloları, trace, firebird.log, veritabanı başlıkları ve kendi işlerinin sonuçları. Ayrı bir izleme sunucusu ve veritabanlarının içinde ajan yoktur.
Ajan her 10 dakikada bir her şeyi bir durum anlık görüntüsüne koyar. Her kontrolün iki eşiği vardır: uyarı ve ciddi. Her bulgunun bir anahtarı, bir metni ve bir ipucu vardır. Yeni bir sorun, üst üste iki anlık görüntüden sonra, yani yaklaşık 20 dakika sonra görünür. Bir acil durum, örneğin OOM veya veritabanı bozulması, hemen görünür. Anlık görüntü, diğer verilerle birlikte HQ Monitor'e gider.
- 1Toplaher dakika: CPU, bellek, diskler, bağlantılar, işlemler
- 2Anlık görüntüher 10 dakikada bir, 10 dakikalık ortalamalar ve zirveler
- 3Eşikleruyarı ve ciddi; ajan ayarlarında belirlenir
- 4Bulgune bulundu, nerede, bir ipucu, bir eylem düğmesi
- 5✓ Rapor24 sa, 7 veya 14 gün için matris; HQCenter'dan e-posta
Ajanın kendi ağır işleri (yedekleme, sweep, veritabanı kontrolü, disk testi) grafiklerde işaretlenir. Yedekleme sırasında yavaş geçen bir dakika, kullanıcı sorunu olarak sayılmaz.
CPU · bellek · programlar
Sunucu ve işletim sistemi
Yavaş bir veritabanı çoğu zaman Firebird'ün suçu değildir. HQ Monitor yalnızca sunucu yükünü değil, aynı zamanda bunu kimin oluşturduğunu da gösterir: Firebird, ajanın kendisi veya diğer programlar ve servisler.
| Ne görürsünüz | Ayrıntılar | Varsayılan eşik |
|---|---|---|
| Firebird sürümü ve klasörü | Sunucu listesindeki sürüm dizesi; panoda sürüm ve kurulum klasörü. | — |
| CPU ve yük ortalaması | Her dakika. 10 dakika için programa göre CPU: Firebird, ajan, diğerleri, kısa ömürlü süreçler. | 80% · 97% |
| Bellek | Kullanılan, takas, bellek baskısı (Linux'ta PSI). Servise göre (Linux) veya programa göre (Windows) bellek, dosya önbelleği, çekirdek. | 80% · 96% |
| OOM ve takas | Yalnızca Linux: OOM killer tarafından öldürülen süreçler ve etkin takas. | herhangi bir OOM — ciddi |
| İşletim sistemi önbelleğinde Firebird | Yalnızca Linux, çekirdek 6.5+: her veritabanı dosyasının ne kadarının işletim sistemi önbelleğinde olduğu ve dosyanın O_DIRECT ile açılıp açılmadığı. | — |
| Firebird belleği ve MON$ | Firebird sürecinin belleği, Firebird'ün MON$MEMORY_USAGE içinde kendi saydıklarının yanında. | — |
| Dosya sistemi | Günde bir kez: Firebird, veritabanı ve ajan klasörleri için dosya sistemi türü ve küme boyutu. | yol ile birlikte bulgu |
TasksMax · NPROC · NOFILE · threads-max
İşletim sistemi limitleri: arızanın öncesindeki arıza
“Firebird yük altında çöktü” genellikle şu anlama gelir: bir işletim sistemi limiti tükendi. Firebird bir iş parçacığı veya süreç oluşturamaz, yeni bağlantılar başarısız olur ve firebird.log içinde pthread_create failed görünür.
Linux'ta ajan, her Firebird sunucusunu dakikada bir işletim sistemi limitleriyle karşılaştırır. Limitin %80'inden itibaren uyarı, %95'inden itibaren ciddi, 10 dakikalık zirveye göre. Bulgu, üst üste iki anlık görüntüden sonra görünür. Bir limit zaten bir süreç oluşturmayı reddettiyse, bu beklemeden hemen ciddidir.
Ajan yalnızca okur: limitleri değiştirmez, root gerektirmez ve systemctl çağırmaz. Bulgunun ipucu, yönetici için hazır bir komut verir.
Örnek bir durum: TasksMax = 4915, bağlantı başına 3 iş parçacığı. Classic her bağlantı için bir süreç başlatır, bu yüzden önce TasksMax'e ulaşır.
| Limit | Nerede ayarlanır | Tükendiğinde ne olur |
|---|---|---|
| Firebird servisinin görevleri | Servisin veya üst dilimin TasksMax değeri | Classic yeni bir bağlantı kabul edemez |
| Firebird kullanıcısının görevleri | LimitNPROC, limits.d | İş parçacığı oluşturma reddedilir |
| Tüm ana makinenin görevleri | kernel.threads-max, pid_max | Tüm programlar için reddedilir; threads-max açılışta RAM'den hesaplanır |
| Açık dosyalar | LimitNOFILE | SuperServer ve SuperClassic bu limite önce ulaşır |
| Bellek | servis bellek limiti, RAM | OOM killer süreci öldürür |
- Hangi düzey sınırlıyorServis veya üst dilim, örneğin system.slice.
- Ajanın kendi payıKendi görevleri ve alt gbak ve fbsvcmgr süreçleri ayrı sayılır.
- Classic içinBağlantı başına iş parçacıkları ve limitin kaç bağlantıya daha izin verdiği.
- Bulgu yok, analiz içinDiski bekleyen görevler ve hipervizörün aldığı CPU zamanı (steal).
Alan · geçici · IO · gecikme
Diskler
Ajan her diskin rolünü bilir: veritabanlarını, Firebird geçici dosyalarını veya kurulum klasörünü barındırır. Bu diskler için boş alanı, doluluk tahminini, okuma ve yazma gecikmesini, IOPS'i ve diski kimin yüklediğini sayar.
- Boş alan5 GB altında uyarı, 1 GB altında ciddi. Her klasör için hangi diskte olduğunu görürsünüz.
- Doluluk yüzdesiUyarı: disk %90 dolu ve 20 GiB'den az boş alan var. Ciddi: %97 ve 5 GiB'den az. Her iki koşul da gereklidir, böylece yedek alanı olan büyük bir disk yanlış alarm vermez.
- Disk hızla doluyorMevcut hızda disk 6 saatten kısa sürede dolarsa uyarı; 2 saatten kısa sürede dolarsa ciddi. Normal bir gece yedeği alarm vermez. Bulgu, son 10 dakikada diske kimin yazdığını belirtir.
- Firebird geçici dosyalarıTüre göre kaç tane ve ne kadar büyük: sort, blob, undo, lock. 10 GB'dan itibaren uyarı, 50 GB'dan itibaren ciddi. Geçici dosyaların ve veritabanlarının aynı diskte olup olmadığını görürsünüz.
- Performans testiHaftada bir gece: geçici bir veritabanında bir milyon kaydın INSERT, UPDATE ve DELETE işlemleri. Farklı haftaların sonuçlarını karşılaştırabilirsiniz.
- Gecikme ve IOPSVeritabanları ve geçici dosyaların bulunduğu diskler için her dakika. Okuma: 20 ms'den itibaren uyarı, 50 ms'den itibaren ciddi. Yazma: 10 ms'den itibaren uyarı, 30 ms'den itibaren ciddi. 10 dakikalık ortalama, 10 IOPS veya daha fazla. Yalnızca geçici dosya içeren disk — uyarı seviyesinin üzerine çıkmaz.
- Disk dolu: firebird.log kaydı
firebird.logiçinde bir "no space" hatası derhal ciddi seviyeye geçer ve 24 saat boyunca kalır. Bulgu, en az boş alanı olan diski belirtir. - Windows'ta disk adıDisk, birim GUID'i yerine harfi ve birim etiketiyle adlandırılır, örneğin
b: (DATA, Disk 2, database).
Firebird, disk okumalarının veya yazmalarının %20'sinden azını yapıyorsa, diski başka bir program yüklüyor demektir. Bu durumda bulgunun ipucu, diskteki ana "komşu" programı ve Firebird'ün payını belirtir. Agent, ipucu metnini İngilizce yazar.
Diski kim yüklüyor
Linux'ta systemd servisi, Windows'ta süreç bazında. Firebird satırı vurgulanır. Firebird az okuyup yazıyorsa ama disk meşgulse, neden bir komşu programdır: bir antivirüs, yabancı bir yedekleme, başka bir servis. Windows'ta yazmalar sistem önbelleğinden geçer, bu nedenle orada Firebird'ün payı yalnızca okumalara göre hesaplanır.
Header · LWM · MON$ · gstat
Veritabanları
Sunucudaki her veritabanının kendi sayfası vardır: boyut, durum, sweep, sayfa boyutu, dialect, sahip, kendi güvenlik veritabanına sahip olup olmadığı. Dakika bazında dört grafik: bağlantılar ve sorgular, işlemler, sayfa okuma ve yazmaları, sorgu hazırlama ve çalıştırma.
Agent, durumu MON$DATABASE'den veya dosya başlığından hangisi daha yeniyse ondan alır: shutdown, salt okunur, replica, nbackup kilidi. Başlık, bağlantı olmadan okunabilir. Böylece shutdown durumundaki bir veritabanı, bağlantısı olmasa bile görünür. Grafikte bir dakikaya tıklamak, o dakikadaki trace'ten ağır sorguları ve tüm bağlantıları açar.
İşlemler: yavaşlamadan önce bir sinyal
Next − OAT, bir işlem uzun süre açık kaldığında büyür. Kayıt sürümleri birikir ve veritabanı yavaşlamaya başlar. 4 milyonluk farkta uyarı, 8 milyonda ciddi. Uzun işlemi bağlantılar tablosunda bulmak kolaydır. OST − OIT, çöp toplama yetişemediğinde, örneğin bir sweep gerektiğinde büyür.
- MON$ metrikleriAktif veritabanları için saatte bir: kayıt işlemleri, programa göre bellek, en ağır bağlantılar.
- İstemci sürümleriGünde bir: hangi istemci kütüphaneleri bağlanıyor ve her birinin kaç bağlantısı var.
- Analizli gstatTablolar ve indeksler için kritik bulguların ve uyarıların sayısı.
- Büyüme tahminiEn hızlı büyüyen tablo veya indeks için "N günde +%25"; 30 gün veya daha azsa kırmızı.
server_status
Sunucu sağlık raporu
Satırlar sunucu sistemleri, sütunlar zamandır. 24 saat için bir hücre bir saat, 7 gün için 4 saat, 14 gün için 6 saattir. Bir hücre, bu zaman aralığındaki en kötü seviyeyi gösterir. Kırmızı ciddi, turuncu uyarı, yeşil OK. Bir hücreye tıklamak o andaki anlık görüntüyü açar.
Yeni, daha kötü, gitti
Geçmiş paneli, bir bulgunun ne zaman ortaya çıktığını, daha ciddi hale geldiğini ve ortadan kalktığını gösterir. Log'daki tek seferlik bir hata hemen görünür ve metinde kaydın zamanıyla birlikte bir saat boyunca kalır.
Sorun ne kadar sürdü
Her seviyede geçirilen süre ve sorunlar tablosu: başlangıç, bitiş, süre, sistem. "Hâlâ aktif" hemen görünür.
Neden, ipucu, düğme
Bulgu metni nesneyi belirtir: disk, klasör, veritabanı, kullanıcı, program, istemci sürümü, sorgu. Her ipucu bir eylem belirtir. Yanında bir düğme vardır: yedekleme görevi ekle, yedekleme arama klasörlerini ayarla, bir görevi veya ayarı aç.
- 18 sistemSunucu, CPU, Bellek, İşletim sistemi limitleri, Diskler, Disk hızı, firebird.log, Trace hataları, İşlemler ve GC, Kilitler, Sorgular, Bağlantılar, İndeksler, Yedeklemeler, fbagent görevleri, Replikasyon, fbagent agent, Güvenlik ve lisans. Başka bulgular varsa bir "Diğer bulgular" satırı görünür.
- Grafikteki eşiklerCPU, bellek ve disk hızı için uyarı ve ciddi çizgilerini görürsünüz.
- Panellerdeki tablolarDiskler: birimler ve geçici klasörler. İşlemler: OIT/OAT farkı olan veritabanları ve kullanıcı ve süreçle birlikte uzun işlemler. Replikasyon: gecikmeyle master'lar ve replica'lar. Agent: sağlığı, dosya kuyrukları ve ana görevleri.
- Bir bulgu grubu için tek kartAynı türden ve aynı seviyeden üç veya daha fazla bulgu tek bir kart olarak gösterilir. Değer eşiğin yanında yer alır: "476.5 MiB / 1 GiB".
- Hatalar, sorgular, yedeklemelerSık görülen izleme hataları, Perf Report bağlantısıyla en yavaş sorgular, yedekleme bulgularının tablosu.
- Veri kaynaklarıHer kaynak için: verinin durumu ve yaşı. Durum İngilizce olarak belirtilir, örneğin stale veya missing. Bayat veya eksik kaynak vurgulanır. Sessiz bir ajan "her şey yolunda" gibi görünmez.
- Yanlış alarm üretmeyen durumlarAjanın işlem kuyruğu uyarı seviyesinin üzerinde değildir. Durdurulmuş bir Firebird, ajanın kendi durumunu ciddi hale getirmez: bu ayrı bir bulgudur.
- Panodaki başlık"Server status" simgesinin yanında tek bir satır bulunur: ana bulgu ve bulguları olan sistemler. Tıklandığında bu rapor açılır.
← HQbird 2027 genel bakışına dön · Yedeklemeler ayrıntılı olarak →