Backup Proxmox VE: jak skutecznie chronić maszyny wirtualne i kontenery?

Proxmox VE

Proxmox VE pozwala budować klastry wirtualizacyjne o wysokiej dostępności, wykorzystujące maszyny wirtualne KVM, kontenery LXC, lokalny storage, ZFS, Ceph czy zewnętrzne macierze. Żaden z tych mechanizmów nie zastępuje jednak prawidłowo zaprojektowanego systemu kopii zapasowych.

Awaria dysku lub całego hosta jest tylko jednym ze scenariuszy utraty danych. Równie realnym zagrożeniem jest błąd administratora, przypadkowe usunięcie danych, uszkodzenie systemu plików, nieudana aktualizacja, awaria aplikacji czy atak ransomware.

Dlatego backup środowiska Proxmox powinien być traktowany jako osobna warstwa infrastruktury, posiadająca własną retencję, kontrolę dostępu, monitoring, niezależną lokalizację oraz regularnie testowaną procedurę odtwarzania.

Backup nie jest skuteczny dlatego, że zadanie zakończyło się komunikatem „OK”. Jest skuteczny dopiero wtedy, gdy potrafisz z niego odtworzyć usługę w wymaganym czasie.

Snapshot, replikacja i backup to trzy różne mechanizmy

Jednym z częstszych błędów przy projektowaniu środowiska Proxmox jest traktowanie snapshotów, replikacji i backupu jako rozwiązań równoważnych. Każde z nich realizuje inne zadanie.

Snapshot

Punkt pozwalający szybko wrócić do wcześniejszego stanu wolumenu lub maszyny. Przydaje się przed aktualizacją lub zmianą konfiguracji, ale zazwyczaj pozostaje zależny od tego samego storage'u.

Replikacja

Utrzymuje dane również na innym hoście lub systemie storage. Zwiększa dostępność, ale może przenieść również błędne, uszkodzone lub zaszyfrowane dane.

Backup

Zapewnia historyczne punkty odtworzenia przechowywane zgodnie z polityką retencji i pozwala wrócić do stanu sprzed awarii, błędu lub ataku.

W dobrze zaprojektowanym środowisku te mechanizmy się uzupełniają. Snapshot może ułatwić wycofanie zmiany, replikacja ograniczyć skutki awarii pojedynczego hosta, a backup pozwala odzyskać dane z wcześniejszego punktu w czasie.

High Availability ogranicza przestój. Replikacja zwiększa dostępność danych. Backup pozwala cofnąć się w czasie. To trzy różne cele.

Proxmox Backup Server jako centralny system backupu

Proxmox Backup Server (PBS) jest osobnym systemem zaprojektowanym do wykonywania i przechowywania kopii zapasowych. Integruje się bezpośrednio z Proxmox VE i może przechowywać backupy maszyn wirtualnych oraz kontenerów.

W przypadku integracji PVE z PBS backupy są przesyłane przyrostowo — po pierwszej kopii przez sieć trafiają przede wszystkim zmienione dane. Po stronie PBS dane są deduplikowane i kompresowane, co może znacząco zmniejszyć wykorzystanie przestrzeni i sieci w środowiskach z wieloma podobnymi systemami.

Incremental backup

Kolejne zadania przesyłają głównie zmienione dane, co zmniejsza ruch sieciowy i czas wykonywania następnych kopii.

Deduplikacja

Powtarzające się fragmenty danych nie muszą być przechowywane wielokrotnie, co jest szczególnie przydatne przy wielu podobnych maszynach.

Weryfikacja integralności

PBS wykorzystuje sumy kontrolne i pozwala wykonywać zaplanowane zadania weryfikacji danych znajdujących się w datastore.

PBS obsługuje również szyfrowanie po stronie klienta, odtwarzanie pojedynczych plików, synchronizację między serwerami backupu oraz live restore maszyn wirtualnych.

Czy PBS powinien działać na tym samym klastrze Proxmox?

Technicznie Proxmox Backup Server może działać jako maszyna wirtualna, ale w środowisku produkcyjnym warto dokładnie przeanalizować zależności takiej architektury.

Jeżeli jedyny PBS działa jako VM na tym samym klastrze, z tego samego storage'u i tej samej infrastruktury, którą ma chronić, poważna awaria może jednocześnie pozbawić organizację produkcji i systemu backupowego.

Dlatego podstawowy serwer backupu warto możliwie mocno odseparować od infrastruktury produkcyjnej. Producent Proxmox również rekomenduje uruchamianie PBS na dedykowanym sprzęcie zamiast jako zwirtualizowaną instancję.

Backup powinien przetrwać awarię infrastruktury, którą chroni. Jeżeli znika razem z klastrem produkcyjnym, architektura wymaga dodatkowej warstwy ochrony.

Jak może wyglądać architektura backupu Proxmox?

W prostym środowisku punktem wyjścia może być dedykowany serwer Proxmox Backup Server z własnym datastore. W przypadku systemów istotnych dla działalności firmy warto jednak zaprojektować dodatkową warstwę ochrony.

Przykładowa architektura może obejmować:

  • dedykowany Proxmox Backup Server dla podstawowych kopii,
  • osobny storage przeznaczony wyłącznie na backup,
  • drugą kopię synchronizowaną do innej lokalizacji,
  • oddzielne konta i role administracyjne dla PVE oraz PBS,
  • niezależne przechowywanie kluczy szyfrujących,
  • monitoring backupu, synchronizacji, weryfikacji i wykorzystania datastore,
  • regularne testy odtworzenia.

Druga lokalizacja może znajdować się w innym centrum danych, oddziale organizacji albo w niezależnym środowisku przeznaczonym wyłącznie do ochrony danych.

Zasada 3-2-1-1-0 w środowisku Proxmox

Przydatnym punktem odniesienia podczas projektowania backupu jest zasada 3-2-1-1-0. Nie należy traktować jej jako sztywnego przepisu dla każdego środowiska, ale pomaga wychwycić sytuacje, w których wszystkie kopie zależą od tego samego systemu.

3 kopie danych

Dane produkcyjne oraz co najmniej dwie dodatkowe kopie pozwalające odzyskać system po utracie podstawowego środowiska.

2 rodzaje przechowywania

Ochrona nie powinna zależeć wyłącznie od jednego serwera, jednej macierzy, jednego klastra ani jednego typu infrastruktury.

1 kopia off-site

Co najmniej jedna kopia powinna znajdować się poza podstawową lokalizacją i nie zależeć od tego samego zdarzenia awaryjnego.

Kolejna „1” oznacza kopię odizolowaną — offline, logicznie odseparowaną albo zabezpieczoną w sposób istotnie utrudniający jej modyfikację lub usunięcie po przejęciu środowiska produkcyjnego.

„0” oznacza natomiast zero niewykrytych błędów. Kopie powinny być weryfikowane, monitorowane i okresowo odtwarzane.

Off-site nie oznacza automatycznie bezpiecznego backupu

Sama synchronizacja danych do drugiego centrum danych nie rozwiązuje wszystkich problemów.

Jeżeli oba serwery backupu wykorzystują te same konta administracyjne, znajdują się w tej samej domenie bezpieczeństwa i mogą zostać usunięte z jednego przejętego konta, druga lokalizacja nadal może być podatna na ten sam atak.

Projektując off-site warto więc analizować nie tylko lokalizację fizyczną, ale również:

  • tożsamości administracyjne,
  • uprawnienia do usuwania backupów,
  • segmentację sieci,
  • kierunek i sposób synchronizacji,
  • dostęp administracyjny do zdalnego datastore,
  • procedurę odzyskania dostępu podczas awarii podstawowego środowiska.

Ochrona backupu przed ransomware

Backup jest jednym z głównych celów atakującego. Jeżeli napastnik przejmie konto posiadające możliwość usuwania maszyn, snapshotów i kopii zapasowych, może próbować zniszczyć również mechanizm odtworzenia.

Aby ograniczyć to ryzyko, warto:

  • stosować osobne konta administracyjne dla PVE i PBS,
  • nadawać hostom Proxmox tylko wymagany zakres uprawnień,
  • nie przyznawać kontom wykonującym backup prawa do usuwania kopii, jeżeli nie jest ono potrzebne,
  • realizować retencję po stronie systemu backupowego,
  • stosować MFA dla kont administracyjnych,
  • odseparować sieć zarządzającą PBS,
  • utrzymywać dodatkową kopię off-site lub odizolowaną,
  • monitorować nietypowe operacje administracyjne i błędy synchronizacji.

Backup odporny na ransomware wymaga nie tylko drugiej kopii danych, ale także niezależności kont, uprawnień i ścieżek administracyjnych.

Szyfrowanie backupu — nie zgub klucza

Proxmox Backup Server umożliwia szyfrowanie danych po stronie klienta. Dzięki temu backup może być przechowywany również w lokalizacji, której nie chcemy w pełni ufać pod kątem dostępu do zawartości danych.

Szyfrowanie tworzy jednak dodatkową zależność: bez właściwego klucza zaszyfrowanego backupu nie będzie można odtworzyć.

Klucz nie powinien więc istnieć wyłącznie na klastrze Proxmox, który chronimy. Należy posiadać bezpieczną, niezależną kopię klucza i procedurę umożliwiającą jego odzyskanie podczas Disaster Recovery.

Zaszyfrowany backup bez dostępnego klucza jest równie bezużyteczny jak uszkodzona kopia zapasowa.

Polityka retencji — ile backupów przechowywać?

Nie istnieje jedna prawidłowa retencja dla każdego środowiska. Powinna wynikać z RPO, charakteru danych, częstotliwości zmian, dostępnej przestrzeni, wymagań biznesowych i ewentualnych obowiązków prawnych.

Przykładowa polityka może obejmować:

  • kopie godzinowe dla najbardziej dynamicznych systemów,
  • 7–14 punktów dziennych,
  • 4–8 punktów tygodniowych,
  • kilka lub kilkanaście punktów miesięcznych,
  • długoterminowe punkty odtworzenia, jeżeli wymagają tego potrzeby organizacji.

Proxmox Backup Server pozwala automatycznie stosować reguły retencji. Zadania pruning określają, które snapshoty backupowe mają zostać zachowane, a nieużywane już fragmenty danych mogą zostać później zwolnione podczas garbage collection.

Retencji nie warto projektować wyłącznie według zasady „ile zmieści się na dysku”. Problem może zostać wykryty dopiero po kilku dniach lub tygodniach, kiedy najnowsze kopie będą już zawierały ten sam błąd.

Backup kontenerów LXC — uwaga na bind mounty

Przy backupie kontenerów LXC trzeba sprawdzić, gdzie rzeczywiście znajdują się dane aplikacji. Sam fakt wykonania poprawnego backupu kontenera nie zawsze oznacza, że wszystkie dane widoczne wewnątrz kontenera znalazły się w kopii.

Szczególną uwagę należy zwrócić na dodatkowe mount pointy. Storage-backed mount point może zostać objęty backupem zgodnie z konfiguracją, natomiast zawartość bind mountów oraz device mountów nie jest backupowana przez vzdump.

Jeżeli kontener korzysta przykładowo z katalogu hosta, udziału NFS zamontowanego na hoście lub zewnętrznego zasobu udostępnionego poprzez bind mount, ten zasób musi posiadać własny mechanizm ochrony danych.

Przy LXC należy sprawdzać nie tylko wynik zadania backupowego, ale także listę mount pointów i rzeczywiste miejsce przechowywania danych aplikacji.

Backup maszyn wirtualnych a spójność aplikacji

Kopia całej maszyny wirtualnej jest bardzo wygodna przy odtwarzaniu serwera, ale nie zawsze wystarcza do zapewnienia oczekiwanego poziomu spójności aplikacji.

Ma to szczególne znaczenie w przypadku:

  • baz danych,
  • systemów ERP,
  • platform pocztowych,
  • systemów transakcyjnych,
  • aplikacji wykonujących intensywne operacje zapisu.

W zależności od wymagań backup całej VM warto uzupełnić mechanizmami działającymi na poziomie aplikacji, takimi jak:

  • backup natywny PostgreSQL, MariaDB, MySQL czy Microsoft SQL Server,
  • zrzuty logiczne danych,
  • archiwizacja WAL, binlogów lub logów transakcyjnych,
  • mechanizmy application-consistent,
  • kopie konfiguracji i danych przechowywanych poza samą maszyną.

Pozwala to oddzielić scenariusz „odtwórz cały serwer” od scenariusza „odzyskaj bazę danych do konkretnego punktu w czasie”.

Weryfikacja backupu nie zastępuje testu odtwarzania

Proxmox Backup Server umożliwia wykonywanie automatycznych zadań weryfikacji integralności kopii. Jest to bardzo ważny mechanizm, ponieważ pomaga wykrywać uszkodzenia danych znajdujących się w repozytorium.

Poprawna weryfikacja nie odpowiada jednak na pytanie, czy po odtworzeniu uruchomi się aplikacja, baza danych będzie spójna, administrator będzie posiadał wszystkie potrzebne klucze i hasła, a infrastruktura będzie miała wystarczającą wydajność.

Dlatego okresowy test powinien obejmować:

  • odtworzenie kompletnej maszyny lub kontenera,
  • uruchomienie systemu w odizolowanej sieci,
  • sprawdzenie startu systemu operacyjnego i usług,
  • weryfikację aplikacji i baz danych,
  • test odtworzenia pojedynczego pliku,
  • pomiar rzeczywistego czasu recovery,
  • udokumentowanie wyniku testu.

Test odtworzeniowy powinien odpowiedzieć na dwa pytania: czy potrafimy odzyskać usługę oraz ile rzeczywiście nam to zajmie.

RPO i RTO — od tego powinien zaczynać się projekt backupu

Liczba backupów sama w sobie niewiele mówi o tym, czy system ochrony danych spełnia potrzeby organizacji. Znacznie ważniejsze są dwa parametry: RPO i RTO.

RPO

Recovery Point Objective określa maksymalną akceptowalną utratę danych. RPO jednej godziny oznacza, że organizacja musi być w stanie wrócić do danych nie starszych niż około godzina.

RTO

Recovery Time Objective określa maksymalny akceptowalny czas przywrócenia usługi po awarii.

Priorytet biznesowy

RPO i RTO powinny być ustalane osobno dla poszczególnych systemów — inne wymagania ma środowisko testowe, a inne kluczowa baza danych.

Krótkie RTO może wymagać nie tylko szybkiego serwera PBS, ale także odpowiedniej sieci, wydajnego storage'u docelowego, infrastruktury zastępczej oraz wcześniej przygotowanych procedur Disaster Recovery.

Nie zapominaj o konfiguracji samej infrastruktury

Backup wszystkich VM i kontenerów nie oznacza jeszcze, że po utracie klastra szybko odtworzysz całe środowisko.

Należy zabezpieczyć również informacje potrzebne do odbudowy infrastruktury, w tym w zależności od architektury:

  • konfigurację klastra,
  • sieci i VLAN-ów,
  • firewalli,
  • storage'u,
  • kont administracyjnych,
  • certyfikatów,
  • kluczy szyfrujących,
  • konfiguracji systemów monitoringu i backupu,
  • dokumentacji Disaster Recovery.

Podczas poważnej awarii sama obecność plików backupowych niewiele pomoże, jeżeli nikt nie wie, jak odtworzyć platformę, do której mają zostać przywrócone.

Co monitorować w środowisku PVE + PBS?

System backupowy powinien być monitorowany tak samo jak infrastruktura produkcyjna. Sam alert informujący o błędzie ostatniego zadania nie wystarcza.

Monitoring powinien obejmować między innymi:

  • czas ostatniego poprawnego backupu każdej VM i każdego kontenera,
  • wynik zadań backupowych,
  • stan synchronizacji off-site,
  • wyniki weryfikacji backupów,
  • pruning i garbage collection,
  • wykorzystanie i tempo zapełniania datastore,
  • stan dysków i systemu plików serwera PBS,
  • wydajność wykonywania backupów,
  • błędy komunikacji PVE ↔ PBS,
  • ważność certyfikatów,
  • datę ostatniego udanego testu odtworzeniowego.

Najczęstsze błędy przy backupie Proxmox

Backup na tym samym storage'u

Jedna awaria może jednocześnie uszkodzić środowisko produkcyjne i jego jedyną kopię.

Brak testów recovery

Pierwsza próba odtwarzania podczas realnej awarii może ujawnić brak kluczy, haseł, dokumentacji albo niewystarczającą wydajność.

Za krótka retencja

Jeżeli problem zostanie wykryty dopiero po kilku dniach, wszystkie dostępne kopie mogą już zawierać ten sam błąd.

Wspólne konta administracyjne

Przejęcie jednego konta może umożliwić atakującemu uszkodzenie zarówno produkcji, jak i backupu.

Brak monitoringu

Backup może nie działać przez wiele dni z powodu braku miejsca, problemu sieciowego, certyfikatu albo błędnej konfiguracji uprawnień.

Brak kopii konfiguracji

Odtworzenie VM nie wystarczy, jeżeli utracono konfigurację sieci, storage'u, klucze szyfrujące i procedury odbudowy środowiska.

Jak powinien wyglądać skuteczny backup Proxmox?

Dobrze zaprojektowany backup Proxmox nie polega na uruchomieniu jednego nocnego zadania. Powinien tworzyć cały system ochrony danych obejmujący:

  • niezależny system backupowy,
  • retencję dopasowaną do wymagań biznesowych,
  • drugą kopię poza podstawową lokalizacją,
  • separację kont i uprawnień,
  • ochronę kluczy szyfrujących,
  • monitoring,
  • automatyczną weryfikację kopii,
  • regularne testy odtworzenia,
  • określone RPO i RTO,
  • procedurę Disaster Recovery.

Proxmox Backup Server dostarcza wiele mechanizmów potrzebnych do zbudowania takiego środowiska, ale o jego rzeczywistej odporności decyduje cała architektura — nie samo zainstalowanie PBS.

Celem backupu nie jest posiadanie kopii. Celem jest możliwość przywrócenia działania firmy po awarii, błędzie lub ataku.

Jak możemy pomóc?

sLogic Group projektuje systemy backupu i Disaster Recovery dla środowisk Proxmox VE. Analizujemy wymagane RPO/RTO, sposób przechowywania danych, retencję, separację infrastruktury, off-site, monitoring oraz procedury odtworzeniowe.

Możemy zaprojektować i wdrożyć Proxmox Backup Server, drugą lokalizację backupową oraz proces regularnych testów recovery. Więcej informacji znajdziesz w usłudze Backup i Disaster Recovery.

Jeżeli najpierw chcesz ocenić obecną architekturę wirtualizacji, storage'u i ochrony danych, punktem wejścia może być również Audyt i architektura IT.

Czy backup Twojego środowiska Proxmox rzeczywiście da się odtworzyć?

Zaprojektujemy architekturę backupu, retencję, off-site, monitoring i procedury recovery dopasowane do wymaganego RPO i RTO.

Porozmawiaj o backupie