Les fondamentaux du big data engineering
L'ingénieur big data ou data engineer exerce ses fonctions aux côtés du data scientist. Il est responsable de la conception des architectures informatiques et du développement des logiciels utilisés pour stocker les données volumineuses. Son principal objectif est de mettre en place un système de traitement des données et de garantir que celles-ci seront bien exploitées. À ce titre, l'ingénieur data a également pour mission de créer des bases de données adaptées à l'activité de l'entreprise et de s'assurer que celles-ci sont utilisables en procédant à des tests réguliers. Enfin, il est garant de la bonne mise en œuvre des algorithmes complexes d'analyse des données.
Le programme de cette formation de niveau 1 vous permet d'acquérir les bases de l'ingénierie de données (data engineering). Elle vise à vous former aux méthodologies et aux problématiques du big data. Ainsi, selon le type de situation, vous saurez choisir la meilleure solution pour structurer une architecture de données et les meilleures solutions techniques pour sa mise en place.
À l'issue de ces cours de 3 jours, vous acquerrez toutes les compétences et les connaissances nécessaires pour comprendre le big data engineering. Vous apprendrez à vous servir des bons outils et des bonnes méthodes pour créer un modèle de données performant via des travaux pratiques.
Objectifs
Après avoir suivi la formation big data engineering, vous acquerrez les objectifs d'apprentissage suivants :
- comprendre ce qu'est le big data et comment il est apparu ;
- utiliser les bons outils et la bonne infrastructure de données en fonction de la situation ;
- savoir comment créer un modèle de données puissant en réponse à un cas critique.
Programme
Présentation générale du big data
- L'histoire du big data et ses différentes technologies.
- Les éléments clés des problématiques du big data.
- Présentation d’un cas pratique qui pose des problèmes.
- Initiation au Framework Hadoop pour le traitement des big data.
- Initiation à MapReduce pour l'optimisation du traitement Hadoop.
Conception d'un modèle de données pour le Big Data
- Les particularités des différentes solutions de stockage de données pour le Big Data.
- La création de l'infrastructure de données et la conception d'un système de données.
- La création du modèle de données.
Intégration de l'ingénierie système face aux défis du Big Data
- Les différentes problématiques liées aux données massives sur une architecture.
- Les solutions liées aux données massives lors de la mise en œuvre d'une architecture de système.
Prérequis
Suivre la formation big data engineering nécessite le prérequis suivant :
- connaître et savoir utiliser un langage de programmation.
Public
Cette formation s'adresse aux publics suivants :
- Les data scientists qui souhaitent se spécialiser dans le domaine du bid data;
- les équipes de support chargé de la gestion des données ou les équipe de recherche et développement ;
- les responsables informatiques qui souhaitent se spécialiser dans le domaine des datas ;
- toute personne désireuse de se reconvertir dans les technologies du big data et de l'intelligence artificielle.
Points forts
Objectifs
Après avoir suivi la formation big data engineering, vous acquerrez les objectifs d'apprentissage suivants :
- comprendre ce qu'est le big data et comment il est apparu ;
- utiliser les bons outils et la bonne infrastructure de données en fonction de la situation ;
- savoir comment créer un modèle de données puissant en réponse à un cas critique.
Programme
Présentation générale du big data
- L'histoire du big data et ses différentes technologies.
- Les éléments clés des problématiques du big data.
- Présentation d’un cas pratique qui pose des problèmes.
- Initiation au Framework Hadoop pour le traitement des big data.
- Initiation à MapReduce pour l'optimisation du traitement Hadoop.
Conception d'un modèle de données pour le Big Data
- Les particularités des différentes solutions de stockage de données pour le Big Data.
- La création de l'infrastructure de données et la conception d'un système de données.
- La création du modèle de données.
Intégration de l'ingénierie système face aux défis du Big Data
- Les différentes problématiques liées aux données massives sur une architecture.
- Les solutions liées aux données massives lors de la mise en œuvre d'une architecture de système.
Prérequis
Suivre la formation big data engineering nécessite le prérequis suivant :
- connaître et savoir utiliser un langage de programmation.
Public
Cette formation s'adresse aux publics suivants :
- Les data scientists qui souhaitent se spécialiser dans le domaine du bid data;
- les équipes de support chargé de la gestion des données ou les équipe de recherche et développement ;
- les responsables informatiques qui souhaitent se spécialiser dans le domaine des datas ;
- toute personne désireuse de se reconvertir dans les technologies du big data et de l'intelligence artificielle.