Dernière mise à jour le 12/12/2024

AWS : BigData avec Hadoop EMR

Informations générales

Type de formation : Formation continue
Domaine : Systèmes et Réseaux
Filière : Cloud computing
Rubrique : AWS
Formation éligible au CPF : Non
Formation Action collective : Non

Objectifs & compétences

Savoir mettre en oeuvre les techniques de calcul distribué avec Hadoop EMR

Public visé

Architectes, chefs de projets souhaitant bénéficier des services offerts par la distribution Hadoop fournie par AWS

Pré-requis

Connaissance des fondamentaux du cloud

Programme

Présentation AWS Hadoop EMR  
Rappels des services de base : EC2 (Elastic Compute Cloud), VPC (Virtual Private Cloud), S3 (Simple Storage Service), EBS (Elastic Block Storage), RDS (Relational Database Service)
Caractéristiques du calcul distribué et du service EMR (Amazon Elactis MapReduce)  
La distribution Hadoop EMR  
Historique du projet hadoop
Les fonctionnalités : stockage, outils d'extraction, de conversion, ETL, analyse, ...  
Exemples de cas d'utilisation sur des grands projets.
Les principaux composants :HDFS pour le stockage et YARN pour les calculs.
Les distributions et leurs caractéristiques.
Composants de la distribution Hadoop EMR  
Mise en œuvre  
Démonstrations sur une architecture Hadoop multi-noeuds.
TP : mise en place d'une configuration de base avec HBase.
Cycle de fonctionnement.
Transferts par s3.
Envoi des travaux.
Visualisation des résultats.
Suivi des travaux avec Hue.
Interactivité avec les Notebooks : jupyter.
Configuration des composants de la distribution.  
Exploitation  
Gestion des évènements avec Events.
Contrôle du réseau et des VPC.
Automatisation de l'exécution sur AWS depuis un poste local.
Suivi distant des travaux.
Journalisation, visualisation des logs.Utilisation de la ferme aws en débordement d'une ferme locale.  
Sécurité : mise en place d'une configuration de sécurité.
Liens avec IAM.  
Optimisation  
Analyse des performances.
Déploiement d'une configuration avec Spark.
Evaluation des performances par rapport à une ferme locale.
Comparaison des coûts.
Mise en place d'automates d'optimisation.
 

Modalités

Modalités : en présentiel, distanciel ou mixte . Toutes les formations sont en présentiel par défaut mais les salles sont équipées pour faire de l'hybride. – Horaires de 9H à 12H30 et de 14H à 17H30 soit 7H – Intra et Inter entreprise.
Pédagogie : essentiellement participative et ludique, centrée sur l’expérience, l’immersion et la mise en pratique. Alternance d’apports théoriques et d’outils pratiques.
Ressources techniques et pédagogiques : Support de formation au format PDF ou PPT Ordinateur, vidéoprojecteur, Tableau blanc, Visioconférence : Cisco Webex / Teams / Zoom.
Pendant la formation : mises en situation, autodiagnostics, travail individuel ou en sous-groupe sur des cas réels.

Méthodes

Fin de formation : entretien individuel.
Satisfaction des participants : questionnaire de satisfaction réalisé en fin de formation.
Assiduité : certificat de réalisation.
Validations des acquis : grille d'evalution  des acquis établie par le formateur en fin de formation.
Code de formation : VC203

Tarifs

Prix public : 1900
Tarif & financement :
Nous vous accompagnons pour trouver la meilleure solution de financement parmi les suivantes :
Le plan de développement des compétences de votre entreprise : rapprochez-vous de votre service RH.
Le dispositif FNE-Formation.
L’OPCO (opérateurs de compétences) de votre entreprise.
France Travail: sous réserve de l’acceptation de votre dossier par votre conseiller Pôle Emploi.
CPF -MonCompteFormation
Contactez nous pour plus d’information : contact@aston-institut.com

Lieux & Horaires

Durée : 21 heures
Délai d'accès : Jusqu'a 8 jours avant le début de la formation, sous condition d'un dossier d'insciption complet

Prochaines sessions

Handi-accueillante Accessible aux personnes en situations de handicap. Pour toutes demandes, contactez notre référente, Mme Rizlene Zumaglini Mail : rzumaglini@aston-ecole.com

à voir aussi dans le même domaine...

Formation continue

Cloud computing

MSDP203

Microsoft Azure – Ingénierie de données

Savoir explorer les options de calcul et de stockage pour les charges de travail d'ingénierie des données dans Azure Être capable de concevoir et mettre en oeuvre la couche de diffusion Pouvoir comprendre les considérations d'ingénierie des données

28 heures de formations sur 4 Jours
En savoir plus

Formation continue

Cloud computing

AWS001

AWS Fondamentaux techniques

#Cloud #actioncollective #computing

A l’issue de la formation, le stagiaire sera capable d’intégrer efficacement dans sa réflexion stratégique les fondamentaux des services, usages et enjeux économiques des solutions Cloud AWS (Amazon Web Services).   --> La formation vise l’acquisition des connaissances et compétences rattachées au cours officiel sur les fondamentaux des notions techniques d’AWS Fondamentaux (ou équivalent en cas d’évolution décidée par l’éditeur). --> Ce cours s’inscrit dans le cursus de certification proposé par l’éditeur mais le passage de l’examen n’est pas compris dans la présente consultation. Identifier les bénéfices et les contraintes du Cloud AWS   Appréhender la terminologie et les concepts relatifs à la plateforme AWS Comprendre les capacités de sécurité, les contrôles et les assurances dédiées au maintien de la sécurité des données et du réseau   Comprendre l’impact financier des solutions Cloud AWS sur la gestion des coûts d'une entreprise     

7 heures de formations sur 1 Jours
En savoir plus

Formation continue

Cloud computing

VM001

VMware vSphere 7 – Troubleshooting

This hands-on training workshop provides you with the advanced knowledge, skills, and abilities to achieve competence in troubleshooting the VMware vSphere® 6 environment. This workshop increases your skill and competence in using the command-line interface, VMware vSphere® Web Client, VMware vRealize tm Log lnsight tm, and other tools to analyze and solve problems.

35 heures de formations sur 5 Jours
En savoir plus

Formation continue

Cloud computing

AZ305

Microsoft Azure – Conception de solutions d’infrastructure

Apprendre à concevoir et recommander des solutions de gouvernance Apprendre à concevoir et recommander des solutions réseau Apprendre à concevoir et recommander des solutions de stockage de données non relationnelles. Apprendre à concevoir et recommander des solutions de stockage de données relationnelles. Apprendre à concevoir et recommander des solutions d’intégration de données Apprendre à concevoir et recommander des architectures d’application Apprendre à concevoir et recommander des solutions d’authentification et d’autorisation. Apprendre à concevoir et recommander des solutions de journalisation et de monitoring Apprendre à concevoir une solution pour la sauvegarde et la reprise d’activité Apprendre à concevoir et recommander des solutions de migration

28 heures de formations sur 4 Jours
En savoir plus

Formation continue

Cloud computing

MSDP300

Microsoft Azure : Administrer des bases de données relationelles

Planifier, déployer et configurer les offres Azure SQL. Surveiller les performances de la base de données et régler une base de données et des requêtes pour des performances optimales. Planifier et configurer une solution hautement disponible

28 heures de formations sur 4 Jours
En savoir plus

Formation continue

Cloud computing

AWS002

Architecture sur AWS

#Cloud #actioncollective #computing

A l’issue de la formation, le stagiaire sera capable de bâtir et déployer une infrastructure informatique exécutées sur la plateforme AWS (Amazon Web Services). --> La formation vise l’acquisition des connaissances et compétences rattachées au cours officiel d’Architecture sur AWS (ou équivalent en cas d’évolution décidée par l’éditeur). --> Ce cours s’inscrit dans le cursus de certification proposé par l’éditeur mais le passage de l’examen n’est pas compris dans la présente consultation. Employer les modèles d'architecture de solutions courantes sur AWS : applications Web, traitement par lot et hébergement d'applications informatiques interne Utiliser les composants et les fonctionnalités de conception pour garantir évolutivité, élasticité et haute disponibilité Concevoir des solutions intégrant des fonctions de sécurité, d'authentification et d'autorisation avec AWS Identifier les procédures de migration vers le cloud   Concevoir des solutions en optimisant les coûts   

21 heures de formations sur 3 Jours
En savoir plus