Aller directement au contenu
Format : Stage pratique
Niveau Fondamentaux
Répartition du temps : 50% exposés
40% pratique
10% échanges

La formation en détails

Description

Si les algorithmes de Machine Learning ont connu des avancées majeures ces dernières années, c'est avant tout grâce à la quantité d'information disponible pour les entraîner. Accumuler toute cette donnée, la traiter, et la rendre disponible sont les enjeux principaux du mouvement Big Data.

 

Au cours de cette formation, nos consultants mettent à disposition les connaissances issues de leurs retours d'expériences auprès de nos clients, et vous font découvrir les bases des architectures permettant de répondre à ces enjeux de stockage et d'accès.

Objectifs

  • Découvrir les notions centrales de stockage de données
  • Appréhender les enjeux des nouvelles architectures de données (Hadoop, NoSQL, Spark), et positionner leurs usages au sein de l'univers Big Data
  • Savoir manipuler ces technologies et les bases de données de façon conjointe, pour mener à bien des analyses efficaces

Public cible

  • Analyste
  • Statisticien
  • Développeur

Prérequis

  • Notions de programmation sur la base d'un langage quelconque
  • Manipulation basique de la ligne de commande Linux

Modalités pédagogiques

Formation avec apports théoriques, échanges sur les contextes des participants et retours d'expérience pratique du formateur, complétés de travaux pratiques et de mises en situation.

Profil du formateur

Toutes nos formations sont animées par des consultants-formateurs expérimentés et reconnus par leurs pairs.

Modalités d'évaluation et de suivi

L'évaluation des acquis se fait tout au long de la session au travers des ateliers et des mises en pratique.

Afin de valider les compétences acquises lors de la formation, un formulaire d'auto-positionnement est envoyé en amont et en aval de celle-ci.

Une évaluation à chaud est également effectuée en fin de session pour mesurer la satisfaction des stagiaires et un certificat de réalisation leur est adressé individuellement.

Programme détaillé

Jour 1

 

INTRODUCTION

 

ACCÈS AUX DONNÉES

Les fichiers

  • Arborescence
  • Formats

 

Les bases de données

  • Notion de Catalogue
  • Le langage SQL
  • Data Warehouses et Data Lake
  • Bases d'analyse

 

API

  • Définition
  • Web Scraping

Traitements en mémoire

 

ARCHITECTE DE DONNÉES

Limites des systèmes traditionnels

  • Limites des fichiers
  • Limites des SGBD

 

Les architectures distribuées

  • Patterns d'accès
  • 1OLTP
  • 2OLAP
  • Distribution vs Réplication

 

Concepts essentiels

  • Disponibilités
  • Cohérence
  • Tolérance à la partition

Le théorème CAP

Quorums

 

BASES NOSQL

Avantages et inconvénients

Modèles de données

  • Key-Value
  • Documents
  • Column-Family
  • Graph

 

Exemple : MongoDB

 

Les moteurs de recherche

 

JOUR 2

 

HADOOP

Introduction à Hadoop

  • Histoire
  • Ecosystème

 

HDFS

Map-Reduce

  • Les phases de Map-Reduce
  • Notion de job
  • Exemple

 

YARN

 

Les distributions

 

La ligne de commande

 

Administration d'un cluster

  • Resource Manager
  • History Server
  • Hue

 

ÉTUDES DE CAS

Traitements de courbes de charge

  • Contexte et hypothèses
  • Raisonnements

 

Analyse de logs

  • Contexte et Hypothèses
  • Raisonnements

 

CONCLUSION

Rappels des points abordés

Questions et réponses

Synthèse

 

Jour 3

 

DÉCOUVERTE DE SPARK

Spark Core

  • RDD
  • Transformations
  • Pair RDD

 

Spark SQL

 

Spark Streaming

 

Structured Streaming

Ce qu'en disent les participants

3.70 / 5
Satisfaction moyenne
Sur la base de 8 avis, collectés en fin de formation durant les 12 derniers mois.

Nos autres formations du domaine « Data Science » Toutes les formations du domaine

DSFDX Fondamentaux de la Data Science
S'initier à la pratique de la Data Science et constituer sa première boîte à outils de Data Scientist
Durée : 21 h / 3 j
Fondamentaux
 
 
 
 
Prochaine session : 24 juin 2024
DSNVA Data Science : niveau avancé
Approfondir des concepts avancés de machine learning et enrichir sa boîte à outils de Data Scientist
Durée : 21 h / 3 j
Avancé
 
 
 
 
Prochaine session : 01 juillet 2024
NLPSR Intelligence Artificielle : Natural Language Processing (NLP) & Speech Recognition
Devenir un expert du langage écrit et parlé avec python
Durée : 21 h / 3 j
Avancé
 
 
 
 
Prochaine session : 27 mai 2024
DSETI Data Science : s’approprier les bonnes pratiques de l'Intelligence Artificielle Responsable
Appréhender les enjeux éthiques et favoriser l'interprétabilité et la vigilance des modèles de Machine Learning
Durée : 7 h / 1 j
Fondamentaux
 
 
 
 
Prochaine session : 20 septembre 2024
GREAI Green AI : l’intelligence artificielle responsable
Concevoir des modèles de Machine Learning en visant un équilibre entre performance et frugalité
Durée : 14 h / 2 j
Avancé
 
 
 
 
Prochaine session : 20 juin 2024
DSGDP Cadrage et pilotage d'un projet de Data Science
Comprendre les spécificités d'un projet de Data Science pour mieux le piloter de la conception au delivery
Durée : 14 h / 2 j
Avancé
 
 
 
 
Prochaine session : 27 mai 2024

Besoin d'aide pour trouver votre formation ?

Contactez-nous

Sessions & Inscriptions

Session partagée avec d'autres organisations

Prochaines sessions
  • du 13 au 15/05/2024
    Présentiel, Paris
    2 500,00 € HT
  • du 09 au 11/09/2024
    Présentiel, Paris
    2 500,00 € HT
  • du 11 au 13/12/2024
    Présentiel, Paris
    2 500,00 € HT
Durée
21 h / 3 j

Demander un devis Nous contacter
Télécharger le programme

Organiser une session dédiée à votre organisation

Durée
21 h / 3 j

Vous avez plusieurs collaborateurs à former ?

Cette formation peut être organisée
sous la forme de sessions dédiées
aux membres de votre organisation.

Demander un devis Nous contacter Télécharger le programme

Personnaliser cette formation

Cette formation vous intéresse
et vous souhaitez l'adapter pour
vos collaborateurs ?

Nos formateurs et notre équipe pédagogique sont à
votre disposition pour en discuter
et vous proposer un programme sur-mesure.

Nous contacter Télécharger le programme

OCTO Academy respecte votre vie privée

Ce site web stocke des informations vous concernant via le dépôt de cookie afin de mesurer l’audience du site. Ces données de navigation sont anonymisées.

En cliquant sur « OK pour moi », vous manifestez votre consentement pour le dépôt de ces cookies.

Lire la politique de confidentialité

À propos des cookies

Sur ce site, nous utilisons des cookies pour mesurer notre audience, entretenir la relation avec vous et vous adresser de temps à autre du contenu qualitif ainsi que de la publicité. Vous pouvez sélectionner ici ceux que vous autorisez à rester ici.

Cookies