PostgreSQL

Come si migrano oltre 100 database Oracle a PostgreSQL?

Scott Sternloff

Di Scott Sternloff, Enterprise Architect senior

LinkedIn · Aggiornato il

ORACLEPOSTGRESGREENYELLOWREDOracle to PostgreSQL Migration
In questa pagina

Migrare un database Oracle a PostgreSQL è un progetto. Migrarne più di cento è un programma, e trattarlo come un unico progetto di migrazione monolitico è il modo più comune in cui queste iniziative si bloccano o sforano il budget. L'approccio giusto parte dalla classificazione, non dalla conversione.

Questo articolo ripercorre come è stato definito il perimetro di una migrazione enterprise reale, 110 database Oracle presso un'organizzazione manifatturiera globale, compresi il modello degli strumenti, il sistema di triage della complessità e le domande tecniche e commerciali specifiche a cui è stato necessario rispondere prima di spostare anche un solo database.

Da dove si comincia una migrazione di queste dimensioni?

Dalla classificazione, non dalla conversione. Prima di toccare un solo database, suddividete il parco in livelli di complessità in base a quante funzionalità specifiche di Oracle usa effettivamente ciascun database.

Lo schema di classificazione usato in una migrazione reale di 110 database suddivideva i database in un sistema verde/giallo/rosso:

  • Verde: database con dipendenze minime da funzionalità specifiche di Oracle (tipi di dati semplici, nessuna o poche stored procedure) che gli strumenti di conversione automatica possono gestire con un intervento manuale minimo. Questo livello procede rapidamente e spesso può essere quotato a costo fisso per database.
  • Giallo: database in cui gli strumenti possono gestire la maggior parte della conversione (spesso si parla di circa il 95%), ma che richiedono lavoro di conversione manuale per elementi specifici come le stored procedure che non hanno una corrispondenza pulita nel PL/pgSQL di PostgreSQL.
  • Rosso: database con un ampio uso di funzionalità specifiche di Oracle (uso intensivo di stored procedure, tipi di dati specifici di Oracle o funzioni proprietarie) che richiedono interventi manuali consistenti e il coinvolgimento di esperti, non solo strumenti.

Come ha sintetizzato direttamente un consulente di migrazione durante la definizione del perimetro: "Per quelli verdi ha senso: un costo fisso ha perfettamente senso. Per i gialli e i rossi, l'aspettativa è che interveniamo con risorse, probabilmente per progetto, per aiutare nella correzione, perché qui la complessità va oltre quello che gli strumenti possono gestire."

Primo passo pratico: eseguite un inventario e una classificazione automatica sull'intero parco database prima di impegnarvi su tempistiche o budget per l'intero programma. Non è possibile stimare con precisione costi o durata per 110 database finché non si sa quanti ricadono in ciascun livello.

Cosa devono fare davvero gli strumenti di migrazione?

Un set completo di strumenti per la migrazione da Oracle a PostgreSQL deve coprire l'intero ciclo di vita, non solo la conversione dello schema. In una conversazione reale di definizione del perimetro, il requisito è stato espresso in modo esplicito: "Ci aspettiamo che il fornitore metta in campo tutti gli strumenti che ha a disposizione: evaluator, planner, migrator, conversione, transformer, verifica, comunque li vogliate chiamare."

Le fasi che contano:

  1. Evaluator: si collega al database Oracle di origine e analizza cosa viene effettivamente usato: tipi di dati, stored procedure, trigger, sintassi SQL specifica di Oracle
  2. Planner: traduce la valutazione in una strategia di migrazione specifica per il profilo di complessità di quel database
  3. Migrator/Transformer: esegue la conversione vera e propria di schema e dati, compresa la trasformazione del codice delle stored procedure dove automatizzabile
  4. Verifica: conferma che il database migrato funzioni davvero: connettività delle applicazioni, test unitari, test di integrazione e test di regressione per individuare i bug gravi prima del cutover

La fase di verifica in particolare non va saltata né considerata facoltativa. Il piano di migrazione reale prevedeva esplicitamente l'aggiornamento delle stringhe di connessione delle applicazioni, la conferma che l'applicazione si avviasse correttamente sulla nuova istanza PostgreSQL e poi l'esecuzione dell'intera suite di test applicativi (unitari, di integrazione e di regressione) proprio per individuare eventuali bug gravi introdotti dalla conversione prima di considerarla conclusa.

Conviene fare un proof of concept prima di impegnarsi nella migrazione completa?

Sì, ed è una prassi standard per migrazioni di questa portata, non un passaggio facoltativo. Un proof of concept ha uno scopo preciso che va oltre la validazione tecnica: costruisce fiducia interna nei team che dovranno effettivamente gestire PostgreSQL in futuro.

Nel caso reale citato in tutto l'articolo, l'organizzazione è stata esplicita sul perché il PoC fosse importante: i suoi team DBA, middleware e applicativi non avevano mai usato PostgreSQL in un ambiente di produzione live. Il PoC non verificava solo il funzionamento degli strumenti di migrazione, ma anche la capacità dei team interni di raggiungere il livello di sicurezza necessario per gestire PostgreSQL su larga scala. Come è stato detto direttamente: "Dopo questo PoC vogliamo davvero decidere se andare avanti o fermarci, se il loro livello di fiducia è molto basso... se invece si sentono a proprio agio, voglio proseguire con la mia strategia iniziale."

Cosa deve validare un PoC:

  • La stima della complessità per taglie (verde/giallo/rosso) regge davvero alla prova di 5-10 database reali, oppure la complessità effettiva è superiore a quella ipotizzata?
  • Il vostro team interno è in grado di gestire i database PostgreSQL risultanti senza una forte dipendenza continuativa dal fornitore, se questo è il vostro obiettivo?
  • La conversione delle stored procedure offerta dagli strumenti gestisce gli schemi effettivamente usati nella vostra organizzazione, non solo casi di test generici?

PostgreSQL va eseguito su VM o su Kubernetes?

È una scelta da fare in modo deliberato, invece di ripiegare su ciò su cui girano oggi i database Oracle. In un caso di migrazione reale si voleva proprio abbandonare PostgreSQL su VM a favore di un deployment self-service basato su Kubernetes, partendo dalla constatazione che il deployment su VM non offriva un'automazione completa del provisioning di nuovi database, mentre un modello basato su un operator Kubernetes avrebbe consentito agli sviluppatori di richiedere un database e di vederlo creato automaticamente su un cluster esistente.

Motivi per considerare Kubernetes per PostgreSQL:

  • Avete già cluster Kubernetes attivi in altre parti dell'infrastruttura e volete strumenti operativi coerenti
  • Il provisioning self-service dei database è un obiettivo: gli sviluppatori richiedono un database senza un passaggio manuale di provisioning da parte dei DBA
  • State abbandonando Oracle anche per il carico operativo e volete che la nuova piattaforma lo riduca strutturalmente, non che sostituisca un processo manuale su VM con un altro

Motivi per restare sulle VM:

  • Le competenze operative del team sono centrate sulle VM e un modello basato su operator Kubernetes aggiunge un nuovo requisito di competenze a migrazione in corso
  • I carichi PostgreSQL hanno requisiti specifici di storage o di prestazioni meglio soddisfatti da un'infrastruttura VM dedicata

Qualunque sia la scelta, usate dove possibile l'operator Kubernetes standard e pubblicamente disponibile per PostgreSQL anziché uno proprietario: si evitano costi di licenza aggiuntivi per l'organizzazione e si mantiene la portabilità tra ambienti cloud e on-premise.

Bisogna continuare a pagare uno strumento di migrazione proprietario o il team può gestire la conversione in autonomia?

Dipende interamente dagli obiettivi della vostra organizzazione, e va deciso in modo esplicito, senza lasciare ambiguità. Nel caso reale citato qui, l'organizzazione era chiara nel voler evitare il vendor lock-in sul processo, pur valutando gli strumenti dei fornitori: "Non vogliamo che sia un'azienda esterna a guidare il processo... per non gonfiare il budget della migrazione."

Esistono due modelli ragionevoli:

  • Licenza degli strumenti con esecuzione interna. Il fornitore mette a disposizione gli strumenti (evaluator, migrator, set di strumenti di conversione) a un canone fisso o a scaglioni, e il vostro team interno svolge il lavoro di conversione con quegli strumenti. In questo modo la tempistica della migrazione resta sotto controllo interno e si riduce la dipendenza continuativa dal fornitore.
  • Servizi di migrazione gestiti dal fornitore. Il team del fornitore esegue direttamente la migrazione, in particolare per i database di complessità gialla e rossa, dove gli interventi manuali richiedono una profonda competenza di conversione PostgreSQL/Oracle che il team interno potrebbe non avere. Di solito le risorse vengono allocate per progetto anziché con una licenza fissa degli strumenti.

La maggior parte delle grandi migrazioni finisce per usare entrambi i modelli contemporaneamente: i team interni gestiscono i database di livello verde con gli strumenti in licenza, mentre le risorse esperte del fornitore vengono impiegate specificamente per gli interventi sui livelli giallo e rosso.

Obiettivi di risposta da 15 minuti, in base al piano. Ingegneri senior dedicati.

Contattateci

E il patching continuativo e il supporto delle versioni di PostgreSQL dopo la migrazione?

Va pianificato nello stesso incarico, non trattato come un problema futuro a parte. In una conversazione reale di definizione del perimetro sono state poste domande esplicite sul supporto post-migrazione: se il fornitore potesse impegnarsi sul patching tecnico e di sicurezza di specifiche versioni di PostgreSQL nel caso in cui l'organizzazione dovesse restare su una determinata release, e se questo includesse il supporto agli upgrade di major version, non solo del motore del database ma anche dell'impatto di quegli upgrade sulle applicazioni a valle.

La distinzione che conta, espressa direttamente durante quella definizione del perimetro: gli impegni di patching per PostgreSQL in sé sono una cosa, ma "il modo in cui si ripercuotono sull'intera azienda è di solito un servizio separato". Il fornitore può quindi impegnarsi a rilasciare tempestivamente le patch di sicurezza di PostgreSQL, ma la valutazione dell'impatto e la correzione di come quelle patch incidono sulle vostre applicazioni sono di solito un incarico distinto, con un perimetro definito, anziché essere incluse automaticamente nel supporto di base alle patch.

Quale dovrebbe essere il passo successivo?

  1. Fate l'inventario dell'intero parco database ed eseguite (o commissionate) una classificazione automatica della complessità
  2. Scegliete la piattaforma di destinazione, VM o Kubernetes, in base agli obiettivi operativi e non solo alla comodità della migrazione
  3. Definite il perimetro di un proof of concept su un campione rappresentativo dei livelli verde, giallo e rosso
  4. Scegliete il modello di strumenti e servizi: strumenti in licenza con esecuzione interna, servizi gestiti dal fornitore o un modello ibrido suddiviso per livello di complessità
  5. Pianificate patching e supporto post-migrazione nello stesso incarico, compresa la gestione a valle degli upgrade di major version
Fase della migrazioneCosa determina l'impegno
Schema e tipi di datiTipi specifici di Oracle senza un equivalente diretto in PostgreSQL
PL/SQLStored procedure, package e trigger: di solito la voce singola più consistente
SQL applicativoDifferenze di dialetto, hint e tutto ciò che dipende da comportamenti specifici di Oracle
CutoverVolume dei dati, downtime accettabile e presenza di una replica in parallelo

Supporto per definire il perimetro di una migrazione da Oracle a PostgreSQL

State pianificando una migrazione su larga scala da Oracle a PostgreSQL? AceMQ fornisce supporto PostgreSQL e ingegneria della migrazione per i progetti di uscita da Oracle. Parlate con un ingegnere AceMQ per discutere classificazione, strumenti e perimetro di un proof of concept per il vostro parco database.

Domande frequenti

Da dove cominciare una migrazione su larga scala da Oracle a PostgreSQL?

Dalla classificazione, non dalla conversione. Suddividete il parco database in livelli di complessità verde, giallo e rosso in base alle dipendenze specifiche di Oracle prima di impegnarvi su tempistiche o budget: non è possibile stimare il costo di oltre 100 database finché non si sa quanti ricadono in ciascun livello.

Cosa significano verde, giallo e rosso in una migrazione da Oracle a PostgreSQL?

I database verdi hanno dipendenze minime da funzionalità specifiche di Oracle e possono essere convertiti quasi interamente con strumenti automatici a costo fisso. I database gialli sono gestiti dagli strumenti per circa il 95%, ma richiedono lavoro manuale su elementi come le stored procedure. I database rossi fanno ampio uso di funzionalità specifiche di Oracle e richiedono interventi manuali consistenti e il coinvolgimento di esperti.

Cosa devono coprire davvero gli strumenti di migrazione da Oracle a PostgreSQL?

L'intero ciclo di vita: un evaluator che analizza cosa usa davvero il database di origine, un planner che lo traduce in una strategia di migrazione, un migrator/transformer che esegue la conversione e una fase di verifica con test di connettività, unitari, di integrazione e di regressione prima del cutover.

Conviene fare un proof of concept prima di una migrazione completa da Oracle a PostgreSQL?

Sì. Un PoC valida sia gli strumenti sia la capacità dei team DBA, middleware e applicativi di acquisire la sicurezza necessaria per gestire PostgreSQL in produzione, aspetto particolarmente importante se non hanno mai usato PostgreSQL in un ambiente live.

Dopo la migrazione da Oracle, PostgreSQL va eseguito su VM o su Kubernetes?

Dipende dagli obiettivi operativi. Kubernetes è adatto ai team che vogliono un provisioning dei database self-service e automatizzato e che usano già Kubernetes altrove. Le VM sono adatte ai team con competenze operative centrate sulle VM o a carichi con requisiti di storage specifici. Se scegliete Kubernetes, usate un operator standard e non proprietario.

Serve un fornitore che guidi l'intera migrazione da Oracle a PostgreSQL?

No, i modelli più diffusi sono due: licenza degli strumenti con esecuzione interna, in cui il vostro team guida la conversione con gli strumenti del fornitore, oppure servizi gestiti dal fornitore per i database complessi. La maggior parte delle grandi migrazioni li combina: i team interni gestiscono i database di livello verde, mentre gli esperti del fornitore si occupano degli interventi sui livelli giallo e rosso.

Chi gestisce patching e upgrade di versione di PostgreSQL al termine della migrazione?

Va pianificato nello stesso incarico. Un fornitore può impegnarsi a rilasciare tempestivamente le patch di sicurezza di PostgreSQL, ma valutare e correggere l'impatto di quelle patch e degli upgrade di major version sulle vostre applicazioni è di solito un servizio separato, con un perimetro definito, non incluso automaticamente.

Una migrazione di oltre 100 database da Oracle a PostgreSQL riesce o si blocca in base alle decisioni prese prima di spostare il primo database: classificazione, modello degli strumenti, perimetro del PoC, scelta della piattaforma e supporto post-migrazione. Se queste sono giuste, la conversione in sé è la parte facile.

Consulenza gratuita

Fate esaminare a un esperto il vostro parco PostgreSQL

Che stiate risolvendo un incidente in produzione, pianificando una migrazione o cercando un secondo parere sulla vostra architettura, il nostro team è pronto. Nessun discorso commerciale, solo risposte.

Scriveteci