データ工学 DENG

データパイプラインとデータストアの開発と実装を支援します。データのアクセシビリティ、検索可能性、セキュリティ、保護を実現するための管理タスクを実行します。データパイプライン運用の監視をサポートし、問題を特定し、必要に応じてエスカレーションします。日常的な監督のもとでデータ移行と変換のタスクに参加できる。

標準的なアプローチと確立された設計パターンに従って、データを取得して準備するためのシンプルなデータパイプラインとデータストアを作成して実装します。データエンジニアリングの標準とツールを適用して、セキュリティとデータインテグリティのプラクティスを組み込んで、データパイプラインの作成と管理、および抽出、変換、読み込み (ETL) プロセスの実行を行います。データ移行および変換プロジェクトに貢献し、データの整合性と一貫性を確保します。日常的なデータ品質チェックと修正を行います。

データを収集して準備するための複雑なデータエンジニアリングソリューションを設計、実装、保守します。データストア、アプリケーション、組織間でデータを接続するためのデータパイプラインを作成し、維持します。データガバナンスとセキュリティ標準に準拠するように構築します。継続的インテグレーションとデプロイメント手法の開発を支援します。パイプラインのパフォーマンスとスケーラビリティを監視し、最適化します。複雑なデータ品質チェックと修正を行います。データ移行とデータ変換活動を主導します。

機能要件と非機能要件のバランスを取りながら、データエンジニアリングソリューションの開発を計画および推進します。データ標準、アーキテクチャ、セキュリティの適用を監視し、コンプライアンスとスケーラビリティを確保します。継続的インテグレーション、デプロイ、モニタリングのプラクティスを開発、促進する。データエンジニアリングに関する組織の方針、基準、ガイドラインに貢献する。

データエンジニアリングの手法、ツール、技術の選択と開発を主導します。データサービスと製品の開発と安全な運用に関する組織の方針、基準、ガイドラインを策定する。技術戦略とアーキテクチャの遵守を保証する。組織の目標や業界慣行との整合性を確保しながら、戦略的で影響力の大きい、大規模で複雑なプログラムのデータエンジニアリングを計画し、指導する。