Sélectionner une page
Formations Data Data Engineer Formation DataFold : Automatisation des Tests pour les Data Engineers

Formation DataFold

formation datafold
Prix 2390€ HT / personne
3 jours (21 heures)

Paris | Classe Virtuelle

Dernières places Virtuelle uniquement
Labs : Infrastructure DaaS avec Chrome
Cafés et déjeuners offerts en interentreprises
En intra-entreprise pour former votre équipe
Aide au financement 4000€ Bonus Atlas CPF

Présentation

Automatisez vos tests de données grâce à notre formation DataFold. DataFold est l’outil de référence pour le data testing en ingénieurie des données.

Notre cours vous enseignera l’installation et le paramétrage de l’outil, vous le prendrez en main pour la première fois afin d’exécuter vos premiers tests (test de validation, test de schéma et détection d’anomalies).

Nous vous apprendrons à écrire des tests de données avancées via des paramètres et des assertions personnalisés, vous saurez également valider vos pipelines pour assurer la qualité de vos actifs.

Ce cours comprend un chapitre QA essentiel pour l’analyse de vos modifications lors de vos tests. Ce programme comprend également une partie CI/CD pour appliquer l’intégration continue au sein de vos pipelines de données.

Par ailleurs, vous connaitrez les bonnes pratiques pour gérer correctement vos projets data en alliant collaboration, documentation et gestion des versions sur DataFold. 

 

Objectifs

  • Maîtriser les fondamentaux du data testing
  • Mettre en place des techniques avancées de test de données
  • Mettre en place des pipelines de validation des données
  • Intégrer DataFold dans ses workflows CI/CD
  • Automatiser les tests et les déploiements data

 

Public visé

  • Chefs de projet
  • Data analysts
  • Data scientists
  • Data engineers
  • Business analysts

 

Pré-requis

Expérience en gestion des données.

PROGRAMME DE NOTRE FORMATION DATAFOLD

 

INTRODUCTION À DATAFOLD

  • Présentation de DataFold
  • Les fonctionnalités clés
  • Installation et configuration initiale
  • Tour d’horizon de l’interface utilisateur

 

LES FONDAMENTAUX DU DATA TESTING

  • Introduction aux tests de données
  • Types de tests de données
    • Validation des données
    • Test des schémas
    • Détection des anomalies
  • Créer des tests basiques
  • Définition des cas de test
  • Mise en place des sources de données
  • Rédaction et exécution des tests
  • Interprétation des résultats

 

Techniques avancées de test de données

  • Scénarios de tests complexes
  • Écrire des cas de test avancés
  • Utilisation d’assertions personnalisées
  • Tests paramétrés

 

VALIDATION DES DONNÉES

  • Techniques de validation des données
  • Automatisation des tests de validation
  • Mise en place de pipelines de validation des données
  • Automatiser les notifications et les rapports
  • Analyse des résultats de validation
  • TP : Validation des données dans un pipeline

 

QA

  • Comprendre l’impact des modifications
  • Utilisation de DataFold pour analyser les impacts des changements
  • Prévision des impacts sur les pipelines de données
  • TP : Test QA

 

INTÉGRATION ET DÉPLOIEMENT CONTINU (CI/CD)

  • Principes CI/CD pour les pipelines de données
  • Intégration de DataFold dans les workflows CI/CD
  • Automatisation des tests et des déploiements
  • Surveillance et gestion des déploiements
  • TP : Mise en place d’un workflow CI/CD avec DataFold

 

PIPELINES DE DONNÉES

  • Optimisation des performances
  • Résoudre les goulots d’étranglement
  • Le suivi des performances
  • TP : Optimisation d’un pipeline de données

 

SÉCURITÉ DES DONNÉES

  • Principes de sécurité des données
  • Sécuriser ses données
  • Surveillance des accès et des utilisations

 

GESTION DE PROJETS DATA

  • Les bonnes pratiques de collaboration
  • Gestion de projets de données avec DataFold
  • Documentation et communication des résultats
  • Gestion des versions et des modifications
  • TP : Collaboration sur un projet de données

Pour aller plus loin

Formation Snowflake avancé

Formation Azure Data Factory

Formation AZ-104

Langues et Lieux disponibles

Langues

  • Français
  • Anglais / English

Lieux

  • France entière
    • Paris
    • Lille
    • Reims
    • Lyon
    • Toulouse
    • Bordeaux
    • Montpellier
    • Nice
    • Sophia Antipolis
    • Marseille
    • Aix-en-Provence
    • Nantes
    • Rennes
    • Strasbourg
    • Grenoble
    • Dijon
    • Tours
    • Saint-Étienne
    • Toulon
    • Angers
  • Belgique
    • Bruxelles
    • Liège
  • Suisse
    • Genève
    • Zurich
    • Lausanne
  • Luxembourg

Nos Formateurs Référents

Témoignages

⭐⭐⭐⭐⭐ 4,8/5 sur Google My Business. Vous aussi, partagez votre expérience !

Afficher tous les témoignages

⭐⭐⭐⭐⭐ 4,8/5 sur Google My Business. Vous aussi, partagez votre expérience !

Noter la formation

Prix 2390€ HT / personne
3 jours (21 heures)

Paris | Classe Virtuelle

Dernières places Virtuelle uniquement
Labs : Infrastructure DaaS avec Chrome
Cafés et déjeuners offerts en interentreprises
En intra-entreprise pour former votre équipe
Aide au financement 4000€ Bonus Atlas CPF

UNE QUESTION ? UN PROJET ? UN AUDIT DE CODE / D'INFRASTRUCTURE ?

Pour vos besoins d’expertise que vous ne trouvez nulle part ailleurs, n’hésitez pas à nous contacter.

ILS SE SONT FORMÉS CHEZ NOUS

partenaire sncf
partenaire hp
partenaire allianz
partenaire sfr
partenaire engie
partenaire boursorama
partenaire invivo
partenaire orange
partenaire psa
partenaire bnp
partenaire sncf
partenaire hp
partenaire allianz
partenaire sfr
partenaire engie
partenaire boursorama
partenaire invivo
partenaire orange
partenaire psa
partenaire bnp