HQbird резервне копије
Резервне копије Firebird
Заказани gbak и nbackup, за једну базу података или за све базе података у фасцикли. За gbak можете укључити пробни опоравак после сваке резервне копије. База података се аутоматски ажурира из резервне копије, и ниједан прекид у току не оставља је у непознатом стању.
- 6 типова задатака за резервне копије
- nbackup нивои 0…4
- zip · gz · zstd са провером архиве
- S3 без посредничке датотеке
- пробни опоравак
Два алата
gbak или nbackup
HQbird подржава оба типа резервних копија Firebird, и можете користити оба за једну базу података. gbak прави логичку копију: мања је од базе података, а опоравак је проверава. nbackup копира странице базе података: брз је, а инкременти заузимају мало простора.
| gbak (проверена резервна копија) | nbackup (инкрементални) | |
|---|---|---|
| Шта копира | Податке и метаподатке. Смеће и старе верзије записа не улазе у копију. | Странице датотеке базе података. Ниво 0 је пун; нивои 1…N садрже само измењене странице. |
| Величина | Обично много мања од базе података; добро се компресује. | Ниво 0 је величине базе података; инкременти су мали. |
| Опоравак | Креира нову базу података и поново гради индексе. За велике базе података то траје дуго. | Спаја ланац нивоа. Брзо. |
| Провера | Пробни опоравак после сваке резервне копије, ако је укључен у задатку. | Провера ланца помоћу GUID-а. Нема нивоа 0 — агент га одмах прави. |
| Користите за | Поуздану копију, премештање између верзија и сервера, Backup-Restore-Replace. | Честе тачке опоравка током дана без оптерећења сервера. |
Ако gbak и nbackup једне базе података морају да почну у истом минуту, gbak се помера 15 минута касније. Док nbackup користи базу података, gbak чека (подразумевано до 60 минута) и не пада.
Типови задатака
Појединачни и групни задаци
Појединачни задатак покрива једну базу података и има сопствена подешавања. Користите га за главну базу података компаније: сопствени распоред, сопствену фасциклу, сопствено задржавање.
Групни задатак покрива фасцикле са базама података. Један скуп подешавања за све базе података у групи. У сваком циклусу агент поново претражује фасцикле по маскама, тако да нова база података аутоматски улази у резервну копију, без измене подешавања.
| Једна база података | Све базе података у фасциклама | |
|---|---|---|
| gbak са провером | vbackup | grpvbackup |
| nbackup са нивоима | nbackup | grpnbackup |
| nbackup dump | nbackup_dump | grpnbackup_dump |
Шта групни задатак узима, а шта прескаче
Агент пролази кроз фасцикле и проверава сваку датотеку према маскама за укључивање и искључивање. Опционо проверава и минималну величину и почетак датотеке. Датотеке резервних копија (.fbk, .nbk, .delta, архиве) никада не улазе у резервну копију.
База података која има сопствени појединачни задатак аутоматски се искључује из групе, чак и ако је тај задатак искључен. gbak група не узима базе података појединачних gbak задатака. nbackup група не узима базе података nbackup и dump задатака.
Системске базе података (називи који почињу са security и examples) се увек прескачу. Преглед скенирања приказује разлог за свако прескакање.
D:\data\ · маска *.fdb
- sales.fdbу групи
- stock.fdbу групи
- branch_new.fdb
нова база података: почиње од нивоа 0у групи - erp.fdb
има сопствени појединачни задатакпрескочи - security5.fdb
системска база податакапрескочи - bck_sales_20261107.fbk
датотека резервне копијепрескочи - orders.fdb.delta
nbackup delta датотекапрескочи
- База података уклоњена из фасциклеПостаје „сироче”. Њене резервне копије се чувају по правилу: N дана или увек. Или одмах прелазе у фасциклу
_orphanedи бришу се после 7 дана. - База података преименованаНови назив започиње нови ланац од нивоа 0. Старе резервне копије се чувају по правилу за базе података сирочад.
- Поновљени неуспесиПосле 5 неуспеха заредом, база података се паузира на 6 сати и затим се поново покушава.
- Грешка у једној бази података не зауставља групуГрупа наставља са следећом базом података. То је подешавање „Настави са следећим базама података после грешке”; подразумевано је укључено за gbak, nbackup, dump и sweep групе.
- Исход групе у реду задатка„Пронађено N база података · успешно M · грешке X · укупно време”. Детаљи садрже табелу база података са грешком: назив, путању и почетак текста грешке.
- Временски буџетЦиклус не започиње нове базе података када време истекне. За nbackup групе можете укључити наставак од следеће базе података у следећем циклусу.
- ПаралелизамКолико база података из групе да се обрађује истовремено. Заједничко ограничење за дуге задатке на серверу: подразумевано се не извршава више од два истовремено.
- Једна операција по базиПојединачни и групни послови, gbak и nbackup виде међусобне закључавања.
- Стабло фасцикли као у изворуПоље за потврду „Понови стабло изворне фасцикле“: резервна копија базе
x/y/EMPLOYEE.FDBиде у<backup folder>/x/y/EMPLOYEE.FDB/. Базе са истим именом из различитих фасцикли не сметају једна другој.
vbackup · grpvbackup
gbak: резервна копија са провером
Пре сваког корака агент проверава слободан простор: за резервну копију, за пробно враћање, за архиву. Ако нема довољно простора за враћање, агент га прескаче са разлогом no_space, а резервна копија остаје. gbak пише у привремену датотеку. Датотека добија назив .fbk само ако су величина и gbak дневник исправни. Тако непотпуна резервна копија са нормалним називом никада не појављује се у фасцикли.
- 1Провера простораза резервну копију; поново пре враћања и компресије
- 2gbakу привремену
.gbaktmp; на Firebird 5 — на N језгара - 3Проверавеличина и дневник; затим назив
.fbk - 4Пробно враћањеако је укључено; одвојена датотека, не производна база
- 5Компресијаархива се распакује и упоређује по SHA-256
- 6✓ Складиштењекопија у другу фасциклу; старе копије се бришу
- Јасни називи
bck_sales_20261107_02-00.fbk: почетак назива базе и време. Две базе у једној фасцикли не пишу исте називе. - Упозорење на преклапањеАко два посла почињу да пишу датотеке са истим називом у једну фасциклу, агент и уређивач приказују упозорење.
- Резултат пробног враћањаok, failed, skipped са разлогом, или not_run. Видите га у исходу последњег посла и у инвентару. У уређивачу, свако враћање приказује обе команде: резервну копију и враћање.
- Стара пробна базаНови посао започиње пробно враћање са
-rep: gbak преписује копију из претходног извршавања. Агент прво одјављује клијенте ове копије. Ако је путања пробне базе иста као производна база или база другог посла, враћање се прескаче. - gbak дневници и командеПоследње линије грешке су видљиве у конзоли; можете преузети дневник. Дневници се бришу заједно са својом резервном копијом. Агент чува историју извршених команди: до 50 за сваки корак посла, лозинке скривене.
- Прекидачи који кваре проверу
-Yшаље gbak излаз у датотеку, али агент проверава резервну копију по том излазу. Зато-Yније дозвољен. Ни посао са стримингом не прихвата-SEу линији за враћање. Уређивач означава ове прекидаче. - Временска ограничењаМеко: упозорење. Тврдо: gbak се зауставља.
- gbak време по коракуАгент сам додаје прекидач
-ST TDRWу сваку резервну копију и враћање и узима gbak време из излаза. Није вам потребан сопствени-STу опцијама посла: уређивач га не прихвата. - Агент поставља пријавуПрекидачи
-user,-password,-fetch_passwordи-trustedнису дозвољени у опцијама. Пробно враћање се извршава као власник базе, ако је власник забележен у подешавањима приступа бази. Ред за враћање приказује под којим корисничким именом је извршено. - Јасне порукеПростор и време у познатим јединицама: „8.1 GiB слободно, 11.8 GiB потребно“, „временско ограничење после 60 s“.
nbackup · grpnbackup
nbackup: нивои и тачке враћања
Ниво 0 копира целу базу. Ниво 1 копира странице промењене после последњег нивоа 0. Ниво 2 копира промене после последњег нивоа 1. Да бисте вратили базу на тренутак који вам је потребан, довољне су три датотеке.
Пример распореда: ниво 0 једном недељно, ниво 1 сваке ноћи, ниво 2 четири пута дневно. То даје 36 тачака враћања недељно: 1 + 7 + 28. Чува 5 копија нивоа 0, 7 нивоа 1 и 24 нивоа 2.
- Ланац без празнинаНема нивоа 0 — агент га одмах прави. За остале нивое, то је подешавање „Одмах направи недостајуће ниже нивое“. Без њега, извршавање се прескаче док нижи ниво недостаје.
- Провера по GUIDСваки ниво је везан за свој нижи ниво; страна датотека не улази у ланац.
- Три режима распоредаЈедноставно — по данима и сатима. Напредно — cron за сваки ниво, до нивоа 4. План — правила са нивоом, данима и временом.
- nbackup dumpПуна копија датотеке базе изван ланца нивоа, по сопственом распореду.
- База података у delta стањуАко база остане закључана после прекинутог nbackup-а, агент покушава да споји delta.
Режим плана
План је скуп правила: ниво, дани и време. Дани могу бити сваки дан, дани у недељи или дани у месецу. Ако се два правила поклопе у истом минуту, извршава се нижи ниво. План може сам да направи ниво 0 када је последњи ниво 0 старији од задатог броја дана. Извршава нижи ниво раније од заказаног када инкременти нарасту изнад задатог дела величине базе. У групном послу, свака база гради свој ланац нивоа.
Уређивач приказује план у календару неколико недеља унапред: који ниво се извршава и када. Једно дугме претвара једноставан или напредни распоред у план, а то можете опозвати пре него што сачувате.
- Задржавање по циклусимаЦиклус је ниво 0 са свим својим инкрементима. Агент задржава или брише цео циклус: по броју циклуса, по данима или по укупној величини. Најновији пуни циклус се никада не брише. Уређивач унапред приказује колико ће простора заузети резервне копије.
- Статус планаПоследња копија сваког нивоа, заузети простор и шта ће следеће чишћење обрисати. Агент ажурира статус после сваког извршавања плана.
Компресија · S3 · складиште
Где се чувају резервне копије
Резервна копија може да иде директно на S3: gbak или nbackup пише у ток, а ток иде у bucket. Нема посредничке датотеке на диску сервера, тако да вам није потребан простор за резервну копију на серверу.
zip, gz или zstd компресија ради и за локалне и за стриминг резервне копије. За локалну резервну копију, агент распакује готов архив и упоређује га са извором по величини и SHA-256. Тек после тога се изворна датотека брише. Ако провера не успе, ништа се не брише.
- Задржавање по бројуgbak: колико датотека задржати. nbackup: колико копија сваког нивоа.
- Копије на другим местимаКопија у други фолдер или мрежну путању. Отпремање на S3, FTP или FTPS — са засебним file_sync послом.
- Ваша сопствена скрипта после резервне копијеЗа gbak. Добија путање до резервне копије, тест базе и gbak логова.
- Шифровање архивеgbak посао може да шифрује zip архиву (AES-256) лозинком из кључева агента, на диску и у S3 току. 7-Zip отвара архиву. Враћање проналази исправан кључ само.
- Враћање из архивеФормат се открива из садржаја датотеке, локално и са S3.
- Враћање са S3Посao враћања чита резервну копију директно из bucket-а.
- АнтивирусИскључите фолдере за резервне копије и враћање из скенирања у реалном времену.
- Ви бирате компресијуНови посао се креира без компресије. zstd је први на листи формата. Можете поставити сопствену екстензију датотеке за архиву било ког формата.
- Amazon S3 водичКорак по корак подешавање bucket-а, кључева и посла. Доступно на енглеском и португалском.
Amazon S3 · компатибилно складиште
Резервне копије на S3
Агент шаље резервне копије у bucket на Amazon S3 или у компатибилно складиште. Ово ради за gbak и nbackup послове. Није вам потребан други програм за ово.
Подешавање има три дела: припремите bucket и приступни кључ, креирајте s3 циљ у подешавањима агента, укључите отпремање у послу резервне копије. Сваки посао користи један од два режима.
| Копија датотеке | Ток на S3 | |
|---|---|---|
| Датотека на диску сервера | Да. Резервна копија се пише на диск, затим се шаље. | Не. Резервна копија иде директно у bucket. |
| Простор на диску за резервну копију | Потребан. | Није потребан. |
| Куда | S3, FTP, FTPS | Само S3 |
| Брисање старих копија у bucket-у | Не. Користите правило животног циклуса bucket-а. | Да, по правилу задржавања посла. |
| Неуспех отпремања | Локална резервна копија остаје важећа. | Нема резервне копије: ниједан објекат не остаје у bucket-у. |
- Како изабратиКопија датотеке: када вам је потребна и локална копија и копија на S3. Ток: када је диск сервера мали или је S3 једино место за резервне копије.
- Враћање са S3Посао враћања чита стримовану резервну копију директно из bucket-а: најновији објекат или онај који наведете. Агент проверава величину и SHA-256 сваког објекта.
- ШифровањеШифровање bucket-а штити објекат на страни складишта. Шифровање архиве у послу штити датотеку лозинком пре него што напусти сервер.
- BucketДржите јавни приступ блокираним. Додајте правило које брише недовршена multipart отпремања после једног дана.
- Кључ само за резервне копијеКреирајте засебног корисника. Дајте му само потребна права: писање, читање и брисање објеката, прекид отпремања и листање недовршених отпремања bucket-а. Ако је bucket шифрован KMS кључем, потребна су му и права на овај кључ. На Amazon EC2 серверу можете радити без кључа: агент користи IAM улогу сервера.
- ПровераПокрените посао дугметом Run now, погледајте резултат и урадите тест враћања пре него што се ослоните на резервну копију.
Честе грешке
| Грешка | Узрок | Шта учинити |
|---|---|---|
AccessDenied | Недостаје право, или је путања у правима другачија. | Проверите права корисника. |
SignatureDoesNotMatch | Погрешан кључ, или размаци у његовој вредности. | Копирајте кључ поново. |
PermanentRedirect | Регион у подешавањима се не поклапа са регионом bucket-а. | Исправите регион. |
NoSuchBucket | Погрешно име bucket-а. | Исправите име. |
RequestTimeTooSkewed | Сат сервера је погрешан. | Синхронизујте сат са NTP. |
restore.replace_cycle
Backup-Restore-Replace
Циклус поново изграђује продукциону базу података. Агент прави gbak резервну копију, враћа је у нову датотеку и ставља нову датотеку на место старе. Нова база нема смеће, њени индекси су свежи и обично је много мања. Продукциона база се безбедно одваја и преименује: агент је прво ставља у shutdown full, све везе се затварају, и тек тада датотека добија ново име.
Подразумевано, циклус се покреће у суботу у 02:00; можете променити распоред. Покрени сада покреће циклус одмах, али прво тражи да откуцате назив датотеке базе података. База података може бити подешена путем путање или преко алијаса из databases.conf.
Клијенти
Датотеке на диску
Од гашења до замене, клијенти добијају „database not found“ или „database shutdown“. Закажите циклус за време када база података може бити недоступна током трајања прављења резервне копије и рестаурације. У режиму цеви (pipe mode), прављење резервне копије и рестаурација се извршавају истовремено, и ниједна датотека резервне копије се не уписује.
Циклус се не покреће ако
- „Дозволи замену“ (allow_replace) није укључено у задатку;
- база података је у стању гашења, шифрована или је реплика;
- база података је сигурносна база (security DB), сопствена или за друге базе података;
- поред ње се налазе датотеке незавршеног циклуса;
- нема довољно простора на диску.
Простор се израчунава унапред: датотека резервне копије и рестаурирана копија су истовремено на диску, свака приближно величине базе података. Оригинал се преименује, не копира, тако да не заузима простор. Ако је простор мали, циклус се зауставља пре гашења: база података се не дира, а клијенти настављају да раде.
Шта остаје на диску
Оригинали. Последњи оригинали у стању потпуног гашења (shutdown full) чувају се поред базе података, од 1 до 10, подразумевано 1. Додатни се бришу на почетку следећег циклуса, тако да је база података у стању пре последњег циклуса увек ту.
Датотека резервне копије се брише након замене. Ако рестаурација није успела, датотека се чува као .restore-failed.fbk за анализу.
Да се вратите на оригинал: зауставите продукциону базу података, преименујте датотеке и покрените gfix -online за оригинал.
Када је циклус прекинут
Неко може зауставити агента, сервер се може поново покренути, напајање може нестати. При нормалном заустављању сервиса пре замене, агент дозвољава gbak-у да заврши и поништава циклус. У случају квара, пре сваког корака агент уписује шта ради у датотеку намере (intent file). При покретању и затим сваког минута, агент чита ове датотеке и доводи циклус у познато стање.
База података се враћа у онлајн стање
Агент враћа базу података у онлајн стање и обнавља одлагање гашења.
Поништавање
Средња копија и непотпуна резервна копија се бришу, оригинал добија своје старо име и прелази у онлајн стање.
Завршетак
Нова база података остаје у продукцији, оригинал се чува у стању гашења. Скрипта „после“ се није извршила: покрените је сами ако је важна.
Ако датотеке на диску не одговарају ниједном познатом стању, агент ништа не мења, а исход задатка почиње са „потребан оператер“. Датотека намере наводи имена свих датотека циклуса. Поставите исправну базу података на њену путању, и агент ће сам завршити опоравак.
Ваше сопствене скрипте пре и после
Скрипта „пре прављења резервне копије“ се извршава пре гашења. Ако се заврши грешком, циклус се зауставља и база података се не дира. Скрипта „после рестаурације“ се извршава након замене. Пример: копирајте датотеку резервне копије у архиву пре него што је агент обрише.
| Променљива | Пре прављења резервне копије | После рестаурације |
|---|---|---|
FBAGENT_HOOK_PHASE | pre | post |
FBAGENT_JOB_ID | id задатка | |
FBAGENT_DB_NAME | назив у задатку: алијас или путања | |
FBAGENT_DB_PATH | датотека базе података: оригинал, онлајн | иста путања: нова база података, онлајн |
FBAGENT_ORIG_PATH | празно | путања до оригинала |
FBAGENT_FBK_PATH | будућа датотека резервне копије; празно у режиму цеви | датотека резервне копије, брише се након скрипте; празно у режиму цеви |
Инвентар · извештај о здравственом стању
Контрола: која база података нема резервну копију
Инвентар приказује све датотеке резервних копија на серверу, укључујући и оне које су направили други програми. Агент га ажурира након сваке резервне копије и потпуно свака 2 сата. Поред њега је табела рестаурација: тест и продукција, за 14 дана.
Свака резервна копија има колону Верификовано: тест рестаурација је успела, није успела или се није извршила. Поред ње су величина рестауриране базе података и време gbak-а. Табела рестаурација приказује величину базе података и трајање.
Извештај о здравственом стању сервера означава базу података без регистрованих резервних копија и наводи разлог: задатак није успео, још увек се извршава, одложен је или нема датотеке у фасциклама. Дугме поред налаза одмах отвара образац за нови задатак.