Hadoop est la principale plateforme de Big Data. Elle permet d’assurer le stockage et le traitement d’immenses volumes de données. Cette formation vous permettra de comprendre son architecture et d’acquérir les compétences nécessaires pour installer, configurer et administrer un cluster Hadoop.

• Pouvoir définir l’architecture d’une solution Hadoop
• Installer et configurer un cluster Hadoop
• Configurer et personnaliser un environnement Hadoop pour optimiser la disponibilité et le débit des données.

Introduction

• Présentation générale d’Hadoop
• Exemples d’utilisations d’Hadoop
• Principales Distributions d’Hadoop
• Planification

Architecture et composants de la plateforme Hadoop

• Approche conceptuelle d’Hadoop
• HDFS : NameNode / DataNode
• Paradigme MapReduce et YARN
• Les technologies émergentes

Installation d’une plateforme Hadoop

• Définir l’architecture
• Installation d’Hadoop / HDFS
• Installation des principaux composants : Hive, Pig, etc.
• Mise en œuvre : installation d’Hadoop et de quelques composants

Configuration de l’environnement Hadoop

• Étude des fichiers de configuration
• modes de configurations : ligne de commandes, API Rest, serveur http intégré, APIS natives
• Configuration des services: HDFS, YARN, Logs, etc.
• Configuration des droits d’accès

Administration et gestion des ressources

• Affecter les quotas
• Gérer les planificateurs

Administration de HDFS

• Gestion des démons Hadoop
• Ajout/Suppression des nœuds
• Gestion des données dans HDFS

Administration de MapReduce

• Gestion des taches MapReduce
• Gestion des nœuds de calcul

Planification des stratégies de sécurité et de récupération des données

Travaux pratiques

• Installation, configuration et administration pas à pas d’un cluster Hadoop

• Avoir les bases de la programmation informatique
• Savoir Configurer un environnement de programmation
• familiariser l’étudiant avec l’approche orientée objet

Plateforme avec des TP , des quiz et des évaluations : pour apprendre à utiliser les compétences et les connaissances acquises et à interagir avec certaines tâches et situations de programmation réelles.

Chapitre 1

Introduction à la programmation informatique avec Python

1. Bases de la programmation informatique;
2. Configurer votre environnement de programmation;
3. Compilation vs interprétation;
4. Introduction à Python.

Chapitre 2

Types de données, variables, opérations d’entrée-sortie de base, opérateurs de base

1. Votre premier programme
2. Littéraux Python
3. Opérateurs – outils de manipulation de données
4. Variables – boîtes en forme de données
5. Comment parler à l’ordinateur?

Chapitre 3

Valeurs booléennes, exécution conditionnelle, boucles, traitement de listes et de listes, opérations logiques et au niveau du bit

1. Prendre des décisions en Python
2. Boucles de Python
3. Opérations logiques et binaires en Python
4. Listes – collections de données
5. Tri de listes simples – l’algorithme de tri à bulles
6. Listes – quelques détails supplémentaires
7. Listes dans les applications avancées

Chapitre 4

Fonctions, tuples, dictionnaires et traitement des données

1. Fonctions d’écriture en Python
2. Comment les fonctions communiquent avec leur environnement ?
3. Renvoyer un résultat d’une fonction
4. Portées en Python
5. Faisons un peu de plaisir … désolé, fonctions
6. Tuples et dictionnaires

Chapitre 5

Modules, packages, méthodes de chaîne et de liste, et exceptions

1. Utiliser des modules
2. Quelques modules utiles
3. Qu’est-ce que le package?
4. Erreurs – le pain quotidien du programmeur
5. L’anatomie d’exception
6. Certaines des exceptions les plus utiles
7. Caractères et chaînes vs ordinateurs
8. La nature des chaînes de Python
9. Méthodes de chaîne
10. Cordes en action
11. Quatre programmes simples

Chapitre 6

L’approche orientée objet : classes, méthodes, objets et caractéristiques d’objectif standard; Gestion des exceptions et utilisation des fichiers

1. Concepts de base de la programmation d’objets
2. Un court voyage de l’approche procédurale à l’approche objet
3. Propriétés
4. Les méthodes
5. Héritage – l’un des fondements de la programmation d’objets
6. Des exceptions encore
7. Générateurs et fermetures
8. Traitement des fichiers
9. Travailler avec de vrais fichiers

Si l’intégrité de l’infrastructure de votre réseau vous préoccupe, ce cours va vous apprendre les outils du piratage éthique et les techniques nécessaires pour accroître la défense de votre réseau. Vous commencerez par apprendre le fonctionnement des défenses du périmètre. Vous scannerez et attaquerez votre propre réseau (aucun réseau véritable ne sera endommagé), vous apprendrez comment fonctionnent les intrus, et les mesures indispensables pour sécuriser un système.

• Les agents de sécurité
• Les vérificateurs
• Les professionnels de la sécurité
• Les administrateurs de site
• Les personnes soucieuses de l’intégrité de l’infrastructure réseau

• Au moins deux années d’expérience en matière de sécurité
• Très bonne connaissance pratique de TCP/IP

Introduction au piratage éthique

Empreinte et reconnaissance

Scannage des réseaux

Énumération

Piratage du système

Menaces des logiciels malveillants

Reniflement

Ingénierie sociale

Déni de service

Détournement de session

Piratage des serveurs web

Piratage des applications Web

Injection SQL

Piratage des réseaux sans fil

Piratage des plates-formes mobiles

Évitement des pare-feu, IDS et Honeypots

Informatique en nuage

Chiffrement