Инжиниринг данных DENG
Проектирование, создание, эксплуатация, обеспечение безопасности и мониторинг конвейеров данных и хранилищ данных.
Методические рекомендации:
Деятельность может включать, но не ограничиваться:
- определение источников данных, концепций и методов обработки данных
- оценка, проектирование и внедрение локальных, облачных и гибридных решений в области инженерии данных
- структурирование и хранение данных для использования, включая - но не ограничиваясь - аналитику, машинное обучение, добычу данных, обмен с приложениями и организациями
- сбор структурированных и неструктурированных данных
- интеграция, консолидация и очистка данных
- миграция и конвертация данных
- применение этических принципов при работе с данными
- обеспечение надлежащего хранения данных в соответствии с действующим законодательством
- создание безопасности, соответствия, масштабируемости, эффективности, надежности, верности, гибкости и переносимости.
Уровни ответственности за этот навык
| 2 | 3 | 4 | 5 | 6 |
Инжиниринг данных: Уровень 1
Этот навык, как правило, не соблюдается и не практикуется на этом уровне ответственности и подотчетности.
Инжиниринг данных: Уровень 2
Помощь в разработке и внедрении конвейеров данных и хранилищ данных. Выполняет административные задачи для обеспечения доступности, возможности поиска, безопасности и защиты данных.
Инжиниринг данных: Уровень 3
Разрабатывает и внедряет конвейеры данных и хранилища данных для получения и подготовки данных. Применяет стандарты и инструменты инженерии данных для создания и обслуживания конвейеров данных, а также извлечения, преобразования и загрузки данных. Осуществляет рутинные проверки качества данных и их исправление.
Инжиниринг данных: Уровень 4
Разрабатывает, внедряет и обслуживает сложные решения по инженерии данных для получения и подготовки данных. Создает и поддерживает конвейеры данных для соединения данных внутри и между хранилищами данных, приложениями и организациями. Осуществляет комплексную проверку качества данных и их исправление.
Инжиниринг данных: Уровень 5
Планирует и управляет разработкой решений в области инженерии данных, обеспечивая баланс между функциональными и нефункциональными требованиями. Контролирует применение стандартов и архитектур данных, включая безопасность и соответствие требованиям. Вносит вклад в разработку организационных политик, стандартов и руководств по инженерии данных.
Инжиниринг данных: Уровень 6
Руководит выбором и разработкой методов, инструментов и технологий инженерии данных. Разрабатывает организационные политики, стандарты и руководства по разработке и безопасной эксплуатации сервисов и продуктов данных. Обеспечивает соблюдение технических стратегий и архитектур. Планирует и руководит деятельностью по проектированию данных для стратегических, крупных и сложных программ.
Инжиниринг данных: Уровень 7
Этот навык, как правило, не соблюдается и не практикуется на этом уровне ответственности и подотчетности.