Formation Formation Logstash Elasticsearch : Ingestion et Indexation Big Data

Introduction au Big Data et à l'écosystème ELK

• —Définition et enjeux du Big Data
• —Présentation de la suite ELK (Elasticsearch, Logstash, Kibana)
• —Cas d'usage et architecture typique d'un pipeline Big Data
• —Installation et configuration initiale des composants ELK

Principes fondamentaux d'Elasticsearch

• —Architecture distribuée d'Elasticsearch (nodes, clusters, shards, replicas)
• —Concepts de documents, index et types (Elasticsearch 6.x et 7.x)
• —Opérations CRUD de base avec l'API REST
• —Mappage des données et types de champs

Requêtage avancé et agrégations Elasticsearch

• —Le langage de requête DSL (Domain Specific Language)
• —Requêtes de recherche plein texte (full-text search)
• —Filtres et requêtes booléennes
• —Introduction aux agrégations : métriques, buckets, pipeline

Logstash : architecture et configuration de base

• —Rôle de Logstash dans le pipeline de données
• —Architecture de Logstash (Input, Filter, Output)
• —Installation et exécution de Logstash
• —Fichiers de configuration Logstash (structure et syntaxe)

Inputs Logstash : acquisition de données diverses

• —Configuration d'inputs courants : file, stdin, beats
• —Input de base de données (JDBC) et API REST
• —Input Syslog et TCP/UDP
• —Gestion des chemins multiples et sources hétérogènes

Filtres Logstash : transformation et enrichissement des données

• —Les filtres Grok pour parsage de logs
• —Filtres Date, Mutate, Rename, Coerce
• —Enrichissement des données avec Geolocation et User Agent
• —Traitement des données JSON et CSV

Outputs Logstash : persistance des données

• —Configuration de l'output Elasticsearch
• —Options de l'output : index dynamique, ID de document
• —Outputs alternatifs : Console, File, Kafka
• —Gestion des erreurs et des échecs d'ingestion

Pipeline Logstash avancé et performance

• —Configurer des pipelines Logstash complexes avec des conditions avancées
• —Optimiser la performance des pipelines à l'aide de la mise en cache
• —Utiliser des plugins tiers pour étendre les capacités de Logstash
• —Analyser et ajuster les performances des pipelines en temps réel
• —Implémenter des stratégies de gestion des erreurs dans Logstash

Indexation de données structurées et non structurées

• —Stratégies d'indexation pour différents formats : logs, CSV, JSON
• —Gestion des données semi-structurées
• —Création de mappings personnalisés dans Elasticsearch
• —Indexation de données en temps réel et batch

Monitoring et supervision avec Kibana

• —Configurer des dashboards Kibana pour visualiser les données en temps réel
• —Déployer des alertes basées sur des requêtes pour surveiller l'intégrité des données
• —Utiliser des visualisations avancées pour analyser des tendances et anomalies
• —Intégrer des métriques de performance pour optimiser l'utilisation de l'ELK
• —Analyser les logs d'application pour identifier les problèmes de performance

Optimisation et scalabilité de l'écosystème ELK

• —Stratégies d'optimisation des performances Elasticsearch
• —Gestion des index et des cycles de vie (ILM)
• —Dimensionnement des clusters Elasticsearch et Logstash
• —Bonnes pratiques pour un pipeline robuste

Cas pratiques et déploiement de bout en bout

• —Conception d'un pipeline complet : de la source à la visualisation
• —Intégration avec des sources de données externes
• —Déploiement en environnement de production (notions)
• —Exercices pratiques et résolution de problèmes complexes

OPCO

Formations financées via votre opérateur de compétences

FAF

Aide à la formation pour les indépendants

France Travail

Des aides pour les demandeurs d'emploi

Employeur

Votre entreprise peut financer votre formation

FNE-Formation

Un soutien pour les entreprises en transformation

- Connaissances de base en informatique et systèmes d'exploitation (Linux/Windows). - Familiarité avec les concepts de bases de données et de manipulation de données. - Compréhension des notions de stockage et de traitement de données.

- Un ordinateur portable performant (8 Go RAM minimum recommandé). - Accès administrateur sur l'ordinateur pour l'installation de logiciels. - Connexion internet stable. - Logiciels préinstallés : Java Development Kit (JDK) 8 ou plus récent, un éditeur de texte/IDE (VS Code, Sublime Text, IntelliJ IDEA...).

5 tests d'évaluation sont proposés à l'apprenant en fin de formation pour connaître son niveau sur chaque compétences visées.

Plateforme et contenus e-learning à disposition. Test de positionnement Quizz & Evaluations

Nous vous recevons lors d’un rendez-vous d’information préalable gratuit et confidentiel en visioconférence pour analyser vos besoins et co-construire votre parcours personnalisé. Chaque demande s’accompagne de la remise d’une convention ou d’un contrat précisant l’ensemble des informations relatives à la formation (Tarifs, calendrier, durée, lieu…). Ce contrat/convention sera transmis électroniquement par email.

A partir de l’accord de prise en charge par le financeur sollicité, le bénéficiaire peut démarrer sous un délai de 11 jours ouvrés. Si vous financez votre parcours de formation par vos propres moyens, alors le délai d'accès est immédiat. Vous pouvez entrer en formation tout au long de l’année.

♿️ Nous accueillons les personnes en situation de handicap. Les conditions d’accessibilité aux personnes handicapées sont inscrites sur le site imi-education.fr, rubrique Accessibilité.

Saskia Cazettes Pour tout renseignement : 07 80 91 06 14 / saskia.c@imi-executive-solutions.com

23 mars 2026

La formation alterne apports théoriques, mises en situation pratiques et échanges entre participants. Chaque concept est directement appliqué via des exercices concrets et des cas réels.

Oui, chaque participant reçoit un support de cours complet (format numérique et/ou papier) qu'il peut conserver à l'issue de la formation.

Certaines de nos formations sont éligibles au Compte Personnel de Formation (CPF). Consultez la fiche formation ou contactez-nous pour vérifier l'éligibilité.

Plusieurs dispositifs de financement existent : CPF, OPCO, plan de développement des compétences, financement individuel. Notre équipe peut vous accompagner dans vos démarches.

Oui, notre équipe reste disponible pour toute question post-formation. Vous bénéficiez également d'un accès à nos ressources en ligne pendant 6 mois après votre parcours.

Logstash et Elasticsearch offrent une grande flexibilité et une grande puissance de traitement pour ingérer et indexer des données Big Data. Ils permettent également de créer des pipelines de données efficaces et d'optimiser la recherche et l'analyse de vos données.

Oui, Kibana est un outil très intuitif et facile à utiliser. Les participants à cette formation seront capables de visualiser et d'analyser des données avec Kibana même si ils n'ont pas d'expérience en informatique.

Les objectifs de la formation sont de maîtriser l'utilisation de Logstash pour ingérer des données Big Data, de comprendre les fonctionnalités d'indexation et de recherche avec Elasticsearch, d'apprendre à visualiser et analyser des données avec Kibana, et d'optimiser les pipelines Big Data ELK pour améliorer les performances.

Notre organisme de formation s'engage à accueillir et accompagner les personnes en situation de handicap. Notre référente handicap, Mme Lorène Travaux est disponible pour étudier avec vous les adaptations pédagogiques, techniques ou logistiques nécessaires avant toute inscription. Contactez-nous à hello@imi-executive-solutions.com ou au 06 72 09 69 52.