Le competenze globali e il quadro delle competenze per un mondo digitale

Ingegneria dei dati DENG

Progettazione, costruzione, messa in funzione, protezione e monitoraggio di pipeline di dati, archivi e sistemi di elaborazione in tempo reale per una gestione dei dati scalabile e affidabile.

Note di orientamento

Le attività possono includere, a titolo esemplificativo ma non esaustivo:

  • identificazione di fonti di dati, concetti e metodi di elaborazione dei dati
  • valutazione, progettazione e applicazione di soluzioni di data engineering on-premise, basate su cloud e ibride
  • strutturazione e archiviazione dei dati per analisi, apprendimento automatico, data mining e condivisione con applicazioni e organizzazioni
  • raccolta di dati strutturati e non strutturati
  • integrazione, consolidamento e pulizia dei dati
  • implementazione di pipeline di elaborazione dati in tempo reale e in batch
  • garantire la conformità con gli standard di governance dei dati, sicurezza e privacy, tra cui crittografia e multi-tenancy sicura
  • gestione dell'integrazione continua, distribuzione e monitoraggio delle pipeline di dati (DataOps)
  • migrazione e conversione di dati
  • applicazione di principi etici nella gestione dei dati
  • garantire che l'archiviazione dei dati sia conforme alla legislazione pertinente
  • integrazione di sicurezza, conformità, scalabilità, efficienza, affidabilità, fedeltà, flessibilità e portabilità nelle soluzioni di ingegneria dei dati.

Comprendere i livelli di responsabilità di questa abilità

Dove i livelli inferiori non sono definiti...
  • I compiti e le responsabilità specifiche non sono definiti perché l'abilità richiede un livello più elevato di autonomia, influenza e complessità nel processo decisionale rispetto a quanto generalmente previsto a questi livelli. È possibile utilizzare le istruzioni di essenza per comprendere le responsabilità generiche associate a questi livelli.
Dove i livelli più alti non sono definiti...
  • Le responsabilità e le responsabilità non sono definite perché questi livelli superiori implicano una leadership strategica e un'influenza organizzativa più ampia che va oltre l'ambito di questa specifica competenza. Vedi le dichiarazioni di essenza.

Sviluppare competenze e dimostrare le responsabilità relative a questa abilità

I livelli definiti mostrano la progressione incrementale delle competenze e delle responsabilità.

Dove i livelli inferiori non sono definiti...

Puoi sviluppare le tue conoscenze e sostenere gli altri che hanno responsabilità in questo settore:

  • Apprendimento dei concetti e dei principi chiave relativi a questa abilità e al suo impatto sul tuo ruolo
  • Esecuzione di abilità correlate (vedere le competenze SFIA correlate)
  • Supportare altri che svolgono compiti e attività di livello superiore
Dove i livelli più alti non sono definiti...
  • È possibile progredire sviluppando competenze correlate che sono più adatte ai livelli più elevati di leadership organizzativa.

Mostra/nascondi descrizioni e livelli extra.

Livelli di responsabilità per questa abilità

2 3 4 5 6

Ingegneria dei dati: Livello 2

Livello 2 - Assistere: Essenza del livello: fornisce assistenza agli altri, lavora sotto supervisione ordinaria e usa la sua discrezione per affrontare i problemi di routine. Apprende attivamente attraverso la formazione e le esperienze sul posto di lavoro.

Aiuta a sviluppare e implementare pipeline di dati e archivi di dati. Esegue attività amministrative per fornire accessibilità, recuperabilità, sicurezza e protezione dei dati. Supporta il monitoraggio delle operazioni della pipeline di dati, identificando i problemi e trasmettendoli a un livello superiore se necessario. Partecipa alle attività di migrazione e conversione dei dati sotto supervisione di routine.

Ingegneria dei dati: Livello 3

Livello 3 - Applicare: Essenza del livello: esegue varie attività, a volte complesse e non di routine, utilizzando metodi e procedure standard. Lavora seguendo indicazioni generali, esercita la discrezione e gestisce il proprio lavoro entro le scadenze. Migliora in modo proattivo le abilità e l'impatto sul posto di lavoro.

Segue approcci standard e modelli di progettazione consolidati per creare e implementare semplici pipeline di dati e archivi di dati per acquisire e preparare i dati. Applica standard e strumenti di ingegneria dei dati per creare e gestire pipeline di dati ed eseguire processi di estrazione, trasformazione e caricamento (ETL), incorporando pratiche di sicurezza e integrità dei dati. Contribuisce a progetti di migrazione e conversione dei dati, garantendone l'integrità e la coerenza. Esegue controlli di qualità dei dati di routine e la correzione.

Ingegneria dei dati: Livello 4

Livello 4 - Abilitare: Essenza del livello: svolge diverse attività complesse, supporta e guida gli altri, delega i compiti quando appropriato, lavora in modo autonomo sotto direzione generale e contribuisce con le competenze per raggiungere gli obiettivi del team.

Progetta, implementa e gestisce soluzioni di data engineering complesse per acquisire e preparare i dati. Crea e gestisce pipeline di dati per connettere i dati tra archivi dati, applicazioni e organizzazioni. Costruisce in conformità con gli standard di sicurezza e governance dei dati. Supporta lo sviluppo di pratiche di integrazione e distribuzione continue. Monitora e ottimizza le prestazioni e la scalabilità della pipeline. Esegue complessi controlli e rimedi della qualità dei dati. Guida le attività di migrazione e conversione dei dati.

Ingegneria dei dati: Livello 5

Livello 5 - Assicurare, consigliare: Essenza del livello: fornisce una guida autorevole nel suo campo e lavora in un'ampia direzione. Responsabile della fornitura di risultati di lavoro significativi, dall'analisi all'esecuzione fino alla valutazione.

Pianifica e guida lo sviluppo di soluzioni di data engineering, bilanciando requisiti funzionali e non funzionali. Monitora l'applicazione di standard, architetture e sicurezza dei dati, assicurando conformità e scalabilità. Sviluppa e promuove pratiche di integrazione, distribuzione e monitoraggio continue. Contribuisce alle policy, agli standard e alle linee guida organizzative per il data engineering.

Ingegneria dei dati: Livello 6

Livello 6 - Avviare, influenzare: Essenza del livello: ha un'influenza organizzativa significativa, prende decisioni di alto livello, modella le policy, dimostra leadership, promuove la collaborazione organizzativa e accetta la responsabilità in aree chiave.

Guida la selezione e lo sviluppo di metodi, strumenti e tecniche di data engineering. Sviluppa policy, standard e linee guida organizzative per lo sviluppo e il funzionamento sicuro di servizi e prodotti dati. Garantisce l'aderenza alle strategie e alle architetture tecniche. Pianifica e guida il data engineering per programmi strategici, ad alto impatto, ampi e complessi, assicurando l'allineamento con gli obiettivi organizzativi e le pratiche del settore.