Meetup Elasticsearch Lyon #2

France
Tue, Mar 24, 2015, 7:00 PM (CET)

About this event

Agenda

Attention ! Nombre de places limité ! Comme toujours, si vous avez un empêchement, merci de ne pas bloquer des sièges inutilement ! 

Voici le second meetup pour la communauté francophone Elasticsearch à Lyon!

Pour la soirée, nous aurons le plaisir d'être accueillis par La Cuisine du Web.

19:00  Registration & Drinks

19:30 - Talk 1

20:00 - Talk 2

20:45 - Q & A 

21:00 - Networking & Pizza

22:00 Wrap up

Talk #1 

Speaker: Fabien Wernli (@faxm0dem)

Bio:

Fabien Wernli has been administering Linux clusters at the Computing Centre of the National Institute of Nuclear Physics and Particle Physics (CC-IN2P3) for 10+ years. Among others, he is an expert on performance-data monitoring and infrastructure management.

Abstract:

Le Centre de Calcul de l'Institut National de Physique Nucléaire et de Physique des Particules (CCIN2P3) a pour mission de mutualiser les ressources informatiques de l'institut du CNRS. Il est en outre l'un des12 "Datacenter" de niveau 1 du Large Hadron Collider (LHC) de l'Organisationeuropéenne pour la recherche nucléaire (CERN). Les quatres expériences du LHC à savoir Atlas, CMS, Alice et LHCb produisent potentiellement de l'ordre de un Pétaoctet de données par seconde. Une partie sélectionnée de ces données transite sur le réseau dédié LHCOPN et arrivent au CCIN2P3 à raison de plusieures centaines de Mégaoctets par seconde. Outre cette masse de données qu'il s'agit de stocker et traiter sur les 20'000 CPU logiques mis à disposition, l'une des missions de l'équipe système du CCIN2P3 est de s'assurer d'une disponibilité optimale du"Datacenter". Cette dernière est possible grâce à une gestion avancée des événements techniques ("logs") et des données de performance ("metrics") de l'ensemble des équipements informatiques et appareillages électriques.

Nous présentons l'infrastructure de gestion des événements qui a été mise à jour récemment dans le cadre du projet COLOSS, dont le coeur de l'implémentation sont les logiciels libres Syslog-NG, Riemann et Elasticsearch. 

Nous présentons le modèle de l'infrastructure, ainsi que les outils, puis une démonstration "live".  Nous discuterons en outre des problèmes rencontrés, des solutions  apportées et des évolutions à venir.

Talk #2 

Speakers: Claire Villard et Vladislav Pernin (@vladislavpernin)

Bios:

Claire est architecte Java depuis 2 ans chez Sopra Stéria Group. Travaillant actuellement pour le compte d'ErDF, elle a été amenée à s'intéresser aux problématiques de monitoring applicatif en temps réel, de performances, mais aussi d'intégration et de déploiement continu.

Vladislav est architecte chez ErDF. Passionné depuis plus de neuf ans par l'écosystème Java, il s'intéresse tout particulièrement aux domaines de l'intégration et du déploiement continu, aux problématiques de performances, de monitoring et de tuning avancé sur la stack Java complète et au BigData. 

Abstract:

Si vous vous reconnaissez dans un des cas suivants, alors vous avez besoin de centraliser vos logs :

- vous en avez marre d'ouvrir 10 terminaux SSH ;

- vous n'êtes pas 12ème dan en tail, grep, sed, pipe ou awk ;

- vous mettez plus de 2 minutes à diagnostiquer un problème en production ;

- vous vous demandez pourquoi est ce que les utilisateurs sont mécontents des performances...

Nous verrons comment chez ERDF nous avons assemblé une chaîne complète, robuste, performante et scalable avec Logstash, Spring AMQP, RabbitMQ et ElasticSearch pour remplir nos besoins.

Nous indexons des milliers de logs par seconde, cherchons instantanément dans des centaines de Go et plusieurs dizaines de millions de logs.

Nous vous donnerons notre retour d'expérience après plusieurs années en production, mais aussi ce qui ne s'apprend pas dans les blogs, les autres options et nos pistes d'évolution à court terme.

When

Tuesday, Mar 24
7:00 PM - 10:00 PM (CET)

Organizer

  • David Pilato

    David Pilato

    Elastic

    Developer | Evangelist

    View Profile