Backup crash-consistent, un backup veeam inutile

[webstyler]

Eh già

in sintesi

ci troviamo ad avere una VM che da qualche segno di instabilità a seguito aggiornamenti windows.

Visto che non è una macchina "critica" decidiamo di eseguire il restore del backup di veeam del giorno prima

Premetto che la VM fino a quel momento è sempre stata up, si riavviava correttamente ed alcuni segnali di instabilità erano presenti solo da qualche ora.

alle 19 si fa il restore del ultimo punto di ripristino.. e da qui DISASTRO

la vm infatti non si avvia, blue screen..

proviamo un po' di tutto ma non ce n'è, non si avvia

tentiamo il restore su un altro host .. nulla, stessa cosa

tentiamo quindi il restore ad un punto precedente (2 giorni prima) .. stessa cosa (??) .. come ?? boo

dopo + di 1 ora di tentativi apriamo un ticket su vmware, che prontamente ci chiama.

Passiamo 2 ore con il supporto tecnico,.. ci fanno provare di tutto.. proviamo a ripristinare tutti i 14 punti disponibili.. risalenti agli ultimi 15 giorni, niente.

conclusione: "il backup non è utilizzabile, dovete creare una nuova VM e copiarci dentro quello che potete"

Ora, le certezze di veeam non dovrebbero essere tanto quelle che "fa il backup" ma che assicura ripristini integrali e veloci.

andiamo avanti con prove e test fino alle 3 di mattina, poi l'unica soluzione purtroppo risulta essere la creazione di una nuova VM, installazioni varie etc etc.. finiamo in tarda mattinata

se questa fosse stata una macchina critica da restorare in emergenza cosa sarebbe successo ??

--

La mattina successiva sentiamo cmq un contatto veeam che ci spiega che è "normale" in quanto non abbiamo abilitato l'opzione "application-aware image processing" ..

a parte che dubito sia un opzione utilizzata da chi gestisce un numero elevato di VM senza calcolare che solo chi ha in essere servizi gestiti può farlo, in quanto su servizi unmanaged non si hanno gli accessi..

ma è possibile che 14 punti siano TUTTI crash-consistent ?

[ldelloca]

Ciao,

ti posso rispondere per la mia esperienza con Veeam con un paio di considerazioni:

• utilizzi i backup sfruttando il VSS? Se no, sarebbe meglio utilizzarlo ovunque possibile

• se possiedi la licenza enterprise, SureBackup è da usare proprio per verificare che i backup siano utilizzabili

Ulteriore dubbio, usi per caso il reverse incremental? Può capitare col CBT che un blocco abbia al suo interno un pezzo di filesystem di Windows corrotto, il problema è che non viene più riscritto se non cambia nei futuri passaggi. A volte può essere interessante riavviare la catena del reverse incremental facendo un full active ogni tanto.

Mi spiace solo darti questi suggerimenti "dopo" il problema.

Ciao,

Luca.

[webstyler]

Ciao Luca

Se ti riferisci alla funzione "application-aware" di veeam no, al momento non l'abbiato attivata (intendevi questo?)

Si, abbiamo la licenza enterprise, però al momento non stiamo utilizzando surebackup.. l'ho sempre visto come uno strumento molto interessante e potente per controllia avanzati, non pensavo di incorrere in una problematica ad avvio macchina. Ora si vedrà, bisogna capire se permette un controllo a campione e/o rotazione

No, non usiamo il reserved incremental, tutto incremental con abilitato il synthetic fulls + trasformazione full > rollbacks .. questo nella stragrande maggioranza dei gruppi di job ed anche in questo.

Guarda, abbiamo provato tutti e 14 i punti di ripristino, tra cui 1 che era di fatto il FULL ma nulla.

Non capisco, anche se fosse dipeso dal VSS, come possa essere che tutti e 14 i punti siano così..

Forse mi sto perdendo qualche cosa del VSS ??

grazie per i suggerimenti

[ldelloca]

Ciao,

si il VSS è la modalità con Application Aware.

Riguardo i suggerimenti, so che sono "solo" per il futuro, purtroppo se i backup erano corrotti c'è poco da fare. Sicuramente l'uso massiccio del synthetic ti porta dietro un eventuale blocco corrotto per lungo tempo, se questo non viene mai riscritto. Per questo dicevo ogni tanto di fare un active full, in modo che hai un punto di ripristino nuovo senza dipendenze dai blocchi precedenti. E' sufficiente schedularne uno al mese ad esempio.

Surebackup è programmabile per fare test a campione, visto che lo possedete io ti consiglierei caldamente di imparare ad usarlo.

Ciao,

Luca.

[webstyler]

Riguardo l'application aware è che richiede l'utilizzo di un accesso admin alla VM windows

Inoltre questa strada è percorribile solo per soluzioni managed, per quelle unmanaged è ingestibile.

Inizialmente avevamo configurato i full backup ogni mese, poi per problemi di spazio per copia (quasi raddopiato) abbiamo rimosso questa opzione.

Grazie per i preziosi suggerimenti

[ldelloca]

Figurati, nessun problema.

Se il backup è unmanaged e non devi avere accesso ai server virtuali c'è poco da fare, si fanno i backup crash-consistent e il cliente deve essere conscio dei rischi. E' lo stesso approccio che abbiamo noi in datacenter per i clienti vCloud, o ci danno una user per fare il backup application-aware, oppure corrono il rischio di un backup solo crash-consistent.

Luca.

[webstyler]

l'utente quindi, nelle unmanaged, ve lo fornisce il cliente e gli assegna un profilo administrator giusto ?

in base alla tua esperienza ti è mai successo di vedere pasticci creati proprio a causa dell'attivazione di questa funzione ?

[ldelloca]

Per forza, altrimenti il VSS non lo posso invocare. Ci sarebbe il workaround dei vmtools freeze, ma è impraticabile data la complessità di dover gestire script diversi per i vari applicativi…

Per l'affidabilità di VSS, no non abbiamo mai avuto problemi di sorta.

Luca.

[fbonez]

Io gli script di pre-freeze e post-thaw li utlizzo ancora sulle VM Linux e per le applicazioni non MS su Win. :smileyhappy:

[ldelloca]

Ah, li per forza, ma parlando di VSS io preferisco usarlo invece di girare gli script anche su sistemi Windows…

Luca.

[fbonez]

Sui sistemi Windows li uso ancora per il MySQL.

Purtroppo c'è anche chi lo installa sotto Win. :smileyhappy:

[ldelloca]

(facepalm)

[webstyler]

ma i diritti, che tu sappia, devono per forza essere 100% administrator ?

[ldelloca]

Che sappia io si, infatti solitamente si usa un local admin del server se non si vuole usare un domain admin, con una password complessa… da quello che ho sempre saputo è un limite di VSS e non tanto di Veeam.

Luca.