Formation Administration Big Data : Infrastructure NoSQL Apache Cassandra

Programme de la formation
Administration Big Data : Infrastructure NoSQL Apache Cassandra

• Introduction au Big Data et NoSQL

  - Comprendre les enjeux du Big Data et ses défis
  - Distinguer les types de bases de données NoSQL
  - Présentation d'Apache Cassandra et son écosystème
  - Cas d'usage et avantages de Cassandra dans le Big Data
  - Installation des outils pré-requis (JDK, Python, etc.)

• Architecture d'Apache Cassandra

  - Nœuds, clusters, datacenters et racks
  - Fonctionnement de la réplication et de la consistance
  - Comprendre le cycle de vie des données (Memtable, SSTable)
  - Le rôle du Commit Log et récupération après sinistre
  - Architecture distribuée et scalabilité horizontale

• Installation et Configuration de Cassandra

  - Installation pas à pas d'un nœud Cassandra
  - Configuration des fichiers de base (cassandra.yaml)
  - Paramétrage de la mémoire et des chemins de données
  - Démarrage et arrêt du service Cassandra
  - Vérification de l'état du cluster avec `nodetool`

• Modélisation de Données CQL (Cassandra Query Language)
• Opérations CRUD avec CQL et cqlsh

  - Insertion de données (`INSERT`)
  - Sélection de données (`SELECT`) et filtrage
  - Mise à jour de données (`UPDATE`) et suppression (`DELETE`)
  - Utilisation de cqlsh pour interagir avec Cassandra
  - Gestion des types de données complexes (List, Map, Set, UDT)

• Administration du Cluster Cassandra avec nodetool

  - État du cluster et des nœuds (`status`, `info`)
  - Gestion des nœuds (ajout, suppression, remplacement)
  - Réparation des données (`repair`) et compactage (`compact`)
  - Surveillance des performances (`tpstats`, `cfstats`)
  - Dépannage courant des problèmes de cluster

• Surveillance et Optimisation des Performances

  - Metrics Cassandra et outils de monitoring (Prometheus, Grafana)
  - Analyse des logs et des erreurs
  - Optimisation des requêtes CQL
  - Tuning des paramètres JVM et Cassandra
  - Gestion des read/write latencies et des tombstones

• Sécurité dans Apache Cassandra

  - Authentification et autorisation des utilisateurs
  - Gestion des rôles et des permissions
  - Chiffrement des données en transit et au repos (SSL/TLS)
  - Audit des activités et bonnes pratiques de sécurité
  - Intégration avec des systèmes externes (LDAP, Kerberos)

• Sauvegarde et Restauration

  - Stratégies de sauvegarde (snapshots, incremental)
  - Procédures de sauvegarde à chaud et à froid
  - Restauration de données à partir de sauvegardes
  - Planification et automatisation des sauvegardes
  - Test de la résilience du système de sauvegarde

• Scalabilité et Haute Disponibilité
• Intégration de Cassandra avec d'autres Outils Big Data

  - Connecteurs Apache Spark et Cassandra
  - Intégration avec Apache Kafka pour le streaming de données
  - Utilisation de l'API Java DataStax (drivers)
  - Exemples de pipelines de données avec Cassandra
  - Exploration des outils d'ETL compatibles

• Maintenance Avancée et Dépannage

  - Analyse des dumps de thread et de heap
  - Utilisation d'outils de profiling avancés
  - Résolution des problèmes de performance complexes
  - Planification de la maintenance préventive
  - Stratégies de mise à jour et de migration de version