Poste
Dans le cadre de notre développement continu nous sommes à la recherche d’un Data Stage Junior/Medior qui pourra venir épauler notre équipe.
Les tâches de notre futur Data Stage seront notamment :
- Développement de jobs DataStage : Créer des jobs DataStage pour extraire, transformer et charger les données à partir de différentes sources de données vers des entrepôts de données ou d’autres systèmes cibles.
- Conception de flux de données : Concevoir des flux de données efficaces en utilisant les composants et les fonctionnalités disponibles dans DataStage, en tenant compte des exigences métier et des meilleures pratiques en matière de conception.
- Intégration de données : Intégrer des données provenant de sources hétérogènes telles que des bases de données relationnelles, des fichiers plats, des services web, etc., en utilisant les connecteurs et les transformateurs appropriés.
- Transformation des données : Appliquer des transformations aux données en utilisant les fonctionnalités de DataStage pour nettoyer, normaliser, agréger, filtrer ou enrichir les données selon les besoins spécifiques du projet.
- Optimisation des performances : Optimiser les performances des jobs DataStage en ajustant les configurations, en utilisant des techniques de partitionnement, de parallélisme et de mise en cache, afin de garantir des temps de traitement rapides et une utilisation efficace des ressources.
- Gestion des métadonnées : Définir et gérer les métadonnées associées aux flux de données, y compris les schémas de données, les règles de transformation, les dépendances entre les jobs, etc., pour assurer la cohérence et la traçabilité des données.
- Déploiement et maintenance : Déployer les jobs DataStage sur les environnements de production, surveiller leur exécution, diagnostiquer et résoudre les problèmes éventuels, et effectuer les mises à jour et les modifications nécessaires en fonction des évolutions des besoins métier.