Inżynieria danych DENG
Projektowanie, budowanie, operacjonalizacja, zabezpieczanie i monitorowanie potoków danych, magazynów i systemów przetwarzania w czasie rzeczywistym w celu skalowalnego i niezawodnego zarządzania danymi.
Uwagi zawierające wskazówki
Działania mogą obejmować między innymi:
- identyfikowanie źródeł danych, koncepcji i metod przetwarzania danych
- ocenianie, projektowanie i wdrażanie rozwiązań inżynierii danych w modelu lokalnym, chmurowym oraz hybrydowym
- strukturyzowanie i przechowywanie danych na potrzeby analityki, uczenia maszynowego, eksploracji danych i udostępniania ich aplikacjom i organizacjom
- pozyskiwanie danych ustrukturyzowanych i nieustrukturyzowanych
- integrację, konsolidację i oczyszczanie danych
- wdrażanie potoków przetwarzania danych w czasie rzeczywistym i potoków przetwarzania wsadowego
- zapewnianie zgodności ze standardami zarządzania danymi, bezpieczeństwa i prywatności, w tym szyfrowania i bezpiecznej wielodostępności
- zarządzanie ciągłą integracją, wdrażaniem i monitorowaniem potoków danych (DataOps)
- migrację i konwersję danych
- stosowanie zasad etycznych w pracy z danymi
- zapewnianie zgodności przechowywania danych z odpowiednimi przepisami
- uwzględnianie bezpieczeństwa, zgodności, skalowalności, wydajności, niezawodności, wierności, elastyczności i przenośności w rozwiązaniach dotyczących inżynierii danych.
Zrozumienie poziomów odpowiedzialności związanych z tą umiejętnością
Tam, gdzie niższe poziomy nie są zdefiniowane...
- Konkretne zadania i obowiązki nie są zdefiniowane, ponieważ umiejętność wymaga wyższego poziomu autonomii, wpływu i złożoności w podejmowaniu decyzji, niż zwykle oczekuje się na tych poziomach. Możesz użyć stwierdzeń esencji, aby zrozumieć ogólne obowiązki związane z tymi poziomami.
Tam, gdzie wyższe poziomy nie są zdefiniowane...
- Obowiązki i odpowiedzialność nie są zdefiniowane, ponieważ te wyższe poziomy obejmują strategiczne przywództwo i szerszy wpływ organizacyjny, który wykracza poza zakres tej konkretnej umiejętności. Zapoznaj się z esencjonalnymi stwierdzeniami.
Rozwijanie umiejętności i wykazywanie się obowiązkami związanymi z tą umiejętnością
Zdefiniowane poziomy pokazują stopniowy postęp w umiejętnościach i odpowiedzialności.
Tam, gdzie niższe poziomy nie są zdefiniowane...
Możesz rozwijać swoją wiedzę i wspierać innych, którzy są odpowiedzialni w tym obszarze poprzez:
- Poznanie kluczowych pojęć i zasad związanych z tą umiejętnością i jej wpływem na Twoją rolę
- Wykonywanie powiązanych umiejętności (zobacz powiązane umiejętności SFIA)
- Wspieranie innych, którzy wykonują zadania i działania na wyższym poziomie
Tam, gdzie wyższe poziomy nie są zdefiniowane...
- Możesz się rozwijać, rozwijając powiązane umiejętności, które są lepiej dostosowane do wyższych poziomów przywództwa organizacyjnego.
Pokaż/ukryj dodatkowe opisy i poziomy.
Poziom odpowiedzialności za tę umiejętność
2 | 3 | 4 | 5 | 6 |
Poziom 1
Inżynieria danych: Poziom 2
Pomaga w opracowywaniu i wdrażaniu potoków danych i magazynów danych. Wykonuje zadania administracyjne w celu zapewnienia dostępności, możliwości wyszukiwania, bezpieczeństwa i ochrony danych. Wspiera monitorowanie operacji potoku danych, identyfikując problemy i eskalując je w razie potrzeby. Uczestniczy w zadaniach migracji i konwersji danych pod rutynowym nadzorem.
Inżynieria danych: Poziom 3
Stosuje standardowe podejścia i ustalone wzorce projektowe do tworzenia i wdrażania prostych potoków danych i magazynów danych w celu pozyskiwania i przygotowywania danych. Stosuje standardy i narzędzia inżynierii danych do tworzenia i utrzymywania potoków danych oraz wykonywania procesów ekstrakcji, transformacji i ładowania (ETL), z uwzględnieniem praktyk bezpieczeństwa i integralności danych. Uczestniczy w projektach migracji i konwersji danych, zapewniając ich integralność i spójność. Przeprowadza rutynowe kontrole jakości danych i działania naprawcze.
Inżynieria danych: Poziom 4
Projektuje, wdraża i utrzymuje złożone rozwiązania inżynierii danych w celu pozyskiwania i przygotowywania danych. Tworzy i utrzymuje potoki danych w celu łączenia danych między magazynami danych, aplikacjami i organizacjami. Tworzy zgodnie ze standardami zarządzania danymi i bezpieczeństwa. Wspiera rozwój praktyk ciągłej integracji i wdrażania. Monitoruje i optymalizuje wydajność i skalowalność potoków. Przeprowadza złożone kontrole jakości danych i działania naprawcze. Kieruje działaniami związanymi z migracją i konwersją danych.
Inżynieria danych: Poziom 5
Planuje i kieruje rozwojem rozwiązań inżynierii danych, równoważąc wymagania funkcjonalne i niefunkcjonalne. Monitoruje stosowanie standardów danych, architektury i bezpieczeństwa, zapewniając zgodność i skalowalność. Rozwija i promuje praktyki ciągłej integracji, wdrażania i monitorowania. Współtworzy polityki organizacyjne, standardy i wytyczne dotyczące inżynierii danych.
Inżynieria danych: Poziom 6
Kieruje wyborem i rozwojem metod, narzędzi i technik inżynierii danych. Opracowuje polityki organizacyjne, standardy i wytyczne dotyczące rozwoju i bezpiecznego działania usług i produktów związanych z danymi. Zapewnia przestrzeganie strategii i architektur technicznych. Planuje i prowadzi inżynierię danych dla strategicznych, wpływowych, dużych i złożonych programów, zapewniając zgodność z celami organizacyjnymi i praktykami branżowymi.