Formation Formation BI : Maîtriser l'ETL et les Data Warehouses avec SSIS

Programme de la formation
Formation BI : Maîtriser l'ETL et les Data Warehouses avec SSIS

• Introduction à la Business Intelligence et aux Data Warehouses

  - Définition et enjeux de la BI
  - Architecture d'un système BI typique
  - Concepts de Data Warehouse, Data Mart et Data Lake
  - Rôle et place de l'ETL dans la chaîne décisionnelle

• Introduction à SQL Server Integration Services (SSIS)

  - Présentation de l'environnement de développement SSIS (SSDT)
  - Composants principaux d'un package SSIS : flux de contrôle, flux de données
  - Création d'un premier package simple
  - Déploiement et exécution de base d'un package

• Connexions et Sources de Données dans SSIS

  - Gestion des gestionnaires de connexions (OLE DB, ADO.NET, Excel, CSV, etc.)
  - Configuration des sources de données relationnelles (SQL Server, Oracle)
  - Extraction de données depuis des fichiers plats (CSV, TXT)
  - Utilisation de la source OLE DB pour extraire des données

• Transformations de Données Essentielles (Partie 1)

  - Composants de transformation courants : Colonne dérivée, Conversion de données
  - Agrégation de données avec le composant Agréger
  - Tri et fusion de données avec Tri, Fusion, Union Tout
  - Gestion des valeurs NULL

• Transformations de Données Essentielles (Partie 2)

  - Utilisation de la Recherche (Lookup) pour enrichir les données
  - Fractionnement conditionnel des flux de données
  - Gestion des erreurs et des lignes non concordantes avec la redirection d'erreur
  - Introduction aux scripts dans les transformations (composant Script)

• Chargement des Données et Destinations

  - Configuration des destinations OLE DB et SQL Server
  - Stratégies de chargement : insertion, mise à jour (Upsert), suppression
  - Gestion des performances de chargement
  - Chargement vers des destinations non relationnelles (fichiers plats)

• Flux de Contrôle Avancés et Conteneurs

  - Utilisation des conteneurs (Séquence, Pour chaque conteneur de boucle)
  - Gestion des boucles pour l'itération sur des fichiers ou des enregistrements
  - Exécution de packages enfants (Exécuter le package)
  - Introduction aux variables et paramètres SSIS

• Variables, Paramètres et Expressions

  - Définition et portée des variables SSIS
  - Utilisation des paramètres de projet et de package
  - Création d'expressions pour les propriétés de tâche, composants, variables
  - Expressions pour la gestion dynamique des chemins de fichiers ou requêtes

• Gestion des Erreurs et Robustesse des Packages

  - Implémentation du loggin des packages SSIS
  - Configuration des gestionnaires d'événements (On Error, On Warning)
  - Redirection des lignes d'erreur vers des destinations spécifiques
  - Stratégies de reprise en cas d'échec

• Présentation des Data Warehouses et Modélisation

  - Concepts de dimension et de faits
  - Modèles en étoile et en flocon
  - Clés primaires et clés étrangères dans un DW
  - Gestion des dimensions à variation lente (SCD Type 0, 1, 2)

• Mise en Œuvre de Dimensions à Variation Lente (SCD) avec SSIS

  - Comprendre les différents types de SCD
  - Implémentation du SCD Type 1 avec le composant Recherche et OLE DB Commande
  - Implémentation du SCD Type 2 avec le composant Lentement changeante dimension
  - Bonnes pratiques pour la gestion des dimensions

• Déploiement, Planification et Surveillance

  - Méthodes de déploiement des packages SSIS (Catalogue SSISDB)
  - Création de projets et d'environnements dans SSISDB
  - Planification des exécutions avec SQL Server Agent
  - Surveillance des exécutions de packages et rapports dans SSMS