Se ha denunciado esta presentación.
Utilizamos tu perfil de LinkedIn y tus datos de actividad para personalizar los anuncios y mostrarte publicidad más relevante. Puedes cambiar tus preferencias de publicidad en cualquier momento.
@crochefolle
Directeur Excellence Opérationnelle @ OUI.sncf
Christophe ROCHEFOLLE
Pour la première fois, les indisponibilités
arrivent en tête des sujets d’inquiétude
des responsables informatiques,
devan...
Et pourtant on teste à tous les étages !!
Sécurité, charge,
métier
Interface graphique,
bout en bout,
fonctionnels
Intégra...
« Comment tester dans un
environnement comme celui d’Amazon ?
Devez-vous construire un autre Amazon
pour les tests quelque...
Et ça se complexifie …
 DevOps,
 Cloud, scalabilité
 BigData, Smartdata,
 IA,
 Ordinateur quantique
CHAOS ENGINEERING
« Discipline de l'expérimentation sur un système distribué afin de
renforcer la confiance dans la capaci...
Les grandes dates
2004
2010
2012
2016
2017
2018
Amazon—Jesse Robbins. Master of disaster
Netflix—Greg Orzell. @chaosimia -...
La Question :
A quel point votre système
est-il proche du précipice
et peut sombrer
dans le chaos ?
Expérimenter en
production ?!?
Expérimenter
pour éprouver nos systèmes
Expérimenter
pour apprendre
Expérimenter
en production
sur un système stable et performant
Designer
l’expérimentation
1. Question
2. Périmètre
3. Mesure
4. Communiquer
5. Injecter
6. Analyser
Expérimenter
en continue
Automatiser l’expérience
pour qu’elle se réalise en continue
afin de suivre l’évolution du système
Chaos Engineering (rappel)
https://medium.com/russmiles/chaos-engineering-for-the-business-17b723f26361
Et concrètement ?
Bras digital au service de tous les transporteurs du groupe SNCF
DevOps
Excellence
opérationnelle
Agilité
 Un acteur tech...
avec un ADN commun
Equipe : 840
3 Sites : Lille,
Paris La Défense,
Nantes
CULTURE AGILE
FEATURE TEAMS
DEVOPS
40
BILLETS VE...
POC
Squad inter-équipe dev & ops
Développement en mode expérimental,
à base de mini-hackatons
Mars 2016
Mai 2017
…
Janvier...
Grâce à la communauté
nous disposons d’un bestiaire
à l’image de la Simian army de
Netflix
Mars 2016
Mai 2017
…
Janvier 20...
Initiation au test en production,
La panne va-t-elle avoir un impact notable?
Pilotage et validation pour les devs Entrain...
Chaos Monkey en production,
La finalité
Mon appli en prod
Chaos Monkey
Libéré! Délivré!
LES DEV OPS
Même pas peur
Objectif...
Premier Chaos Monkey en production…
…et la production marche toujours
Mars 2016
Mai 2017
…
Janvier 2016
Octobre 2016
Févri...
Et chaque mois de nouvelles applications
exécutant régulièrement un chaos monkey en
production
Mars 2016
Mai 2017
…
Janvie...
Days of Chaos
Chapter One
Vendredi 13 Janvier 2017
Résolution Dev
Incident Ops
Détection Dev Diagnostic Dev
Remise en état...
Validation Ops
Gestion d’une panne Question bon...
113 joueurs
18 équipes 2 commentateurs
2 aides de camp
8 ops
Objectif accompli !
Détection : 87%
Diagnostic : 73%
Résolution : 45%
Supervision et alerting
Tests techniques
Partage des connaissances
Arbres d’analyse
8 -> 6 pannes
4h -> 3h30 de jeu
80% In...
Communication et marketing
Cohésion intra et inter-équipes
Gamification
Points forts
Days of Chaos
Chapter 1
Days of Chaos
Chapter 2
CHAPTER 3
Le Chaos Engineering dans le monde
https://days-of-chaos.slack.com
Paris Chaos Engineering Meetup
http://meetu.ps/c/3BMlX/xNjMx/f
https://chaosengineering.sl...
Cloud Expo Europe 2018 - "Et si on testait en production ?"
Próxima SlideShare
Cargando en…5
×

Cloud Expo Europe 2018 - "Et si on testait en production ?"

336 visualizaciones

Publicado el

Résilience de nos systèmes informatiques et organisationnels ? "A quel point votre système est-il proche du précipice et peut sombrer dans le chaos ?" Cette conférence s'adresse à tous ceux qui sont intéressés pour tenter de répondre à cette question et développer cette nouvelle discipline et les pratiques associées : Chaos Monkey, Chaos Gameday (AWS, Days Of Chaos, ...).

Publicado en: Ingeniería
  • Sé el primero en comentar

  • Sé el primero en recomendar esto

Cloud Expo Europe 2018 - "Et si on testait en production ?"

  1. 1. @crochefolle Directeur Excellence Opérationnelle @ OUI.sncf Christophe ROCHEFOLLE
  2. 2. Pour la première fois, les indisponibilités arrivent en tête des sujets d’inquiétude des responsables informatiques, devançant ainsi la sécurité. Sondage réalisé sur un échantillon de 400 entreprises en Grande-Bretagne, Allemagne, France, Suède et Pays-Bas par Quocirca pour Splunk Source: Master of Machines III - Réduire l’impact des incidents IT Quocirca
  3. 3. Et pourtant on teste à tous les étages !! Sécurité, charge, métier Interface graphique, bout en bout, fonctionnels Intégrations, API Unitaires
  4. 4. « Comment tester dans un environnement comme celui d’Amazon ? Devez-vous construire un autre Amazon pour les tests quelque part, qui aurait le même nombre de machines, le même nombre de centres de calcul, de clients et les mêmes tables et fichiers ? » Werner Vogels, CTO Amazon
  5. 5. Et ça se complexifie …  DevOps,  Cloud, scalabilité  BigData, Smartdata,  IA,  Ordinateur quantique
  6. 6. CHAOS ENGINEERING « Discipline de l'expérimentation sur un système distribué afin de renforcer la confiance dans la capacité du système à résister à des conditions turbulentes en production. » http://principlesofchaos.org/ initiée par
  7. 7. Les grandes dates 2004 2010 2012 2016 2017 2018 Amazon—Jesse Robbins. Master of disaster Netflix—Greg Orzell. @chaosimia - Première implémentation d’un Chaos Monkey pour renforcer l’usage de services stateless en auto- scale NetflixOSS met à disposition en open source la Simian Army Création de Gremlin Inc Sortie du livre Netflix “Chaos Engineering” Projet Open Source “Chaos toolkit” Déploiement à l’international des concepts Chaos et la première Chaos Conf en septembre 2018 à San Francisco 2004 2010 2012 2016 2017 2018
  8. 8. La Question : A quel point votre système est-il proche du précipice et peut sombrer dans le chaos ?
  9. 9. Expérimenter en production ?!?
  10. 10. Expérimenter pour éprouver nos systèmes Expérimenter pour apprendre
  11. 11. Expérimenter en production sur un système stable et performant
  12. 12. Designer l’expérimentation 1. Question 2. Périmètre 3. Mesure 4. Communiquer 5. Injecter 6. Analyser
  13. 13. Expérimenter en continue Automatiser l’expérience pour qu’elle se réalise en continue afin de suivre l’évolution du système
  14. 14. Chaos Engineering (rappel) https://medium.com/russmiles/chaos-engineering-for-the-business-17b723f26361 Et concrètement ?
  15. 15. Bras digital au service de tous les transporteurs du groupe SNCF DevOps Excellence opérationnelle Agilité  Un acteur technologique de référence des solutions de mobilités  Pour un service de bout en bout (de la conception à l’exploitation)
  16. 16. avec un ADN commun Equipe : 840 3 Sites : Lille, Paris La Défense, Nantes CULTURE AGILE FEATURE TEAMS DEVOPS 40 BILLETS VENDUS / SECONDE Source ODV 2018 +6000 SERVEURS +2 To DE DONNEES TRAITEES / JOUR 1 PRA Actif en permanence : 70% des internautes à Lille, 30% à St Denis 99,997% Taux de dispo infra 150 APPLICATIONS
  17. 17. POC Squad inter-équipe dev & ops Développement en mode expérimental, à base de mini-hackatons Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017 Communauté Résilience et Tests Techniques Objectifs : • Proposer des outils de test de résilience • Aider à la mise en place des outils et patterns • Apporter un changement culturel Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017
  18. 18. Grâce à la communauté nous disposons d’un bestiaire à l’image de la Simian army de Netflix Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017
  19. 19. Initiation au test en production, La panne va-t-elle avoir un impact notable? Pilotage et validation pour les devs Entrainement pour les ops Chaos Monkey Bridé Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017
  20. 20. Chaos Monkey en production, La finalité Mon appli en prod Chaos Monkey Libéré! Délivré! LES DEV OPS Même pas peur Objectif : Aucun impact financier Même pas mal! Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017
  21. 21. Premier Chaos Monkey en production… …et la production marche toujours Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017
  22. 22. Et chaque mois de nouvelles applications exécutant régulièrement un chaos monkey en production Mars 2016 Mai 2017 … Janvier 2016 Octobre 2016 Février 2017
  23. 23. Days of Chaos Chapter One Vendredi 13 Janvier 2017
  24. 24. Résolution Dev Incident Ops Détection Dev Diagnostic Dev Remise en état... Validation Ops Gestion d’une panne Question bonus Vidéo explicative1 2 3
  25. 25. 113 joueurs 18 équipes 2 commentateurs 2 aides de camp 8 ops
  26. 26. Objectif accompli ! Détection : 87% Diagnostic : 73% Résolution : 45%
  27. 27. Supervision et alerting Tests techniques Partage des connaissances Arbres d’analyse 8 -> 6 pannes 4h -> 3h30 de jeu 80% Intérêt du jeu 70% Qualité de l’organisation 74% Prise de conscience • Disponibilité • Préparation des pannes • Trop peu pour gérer autant de joueurs • Quelques ratés organisationnels • Ambiance • Nouveauté • Intérêt • Jeu bien calibré pour une première
  28. 28. Communication et marketing Cohésion intra et inter-équipes Gamification Points forts
  29. 29. Days of Chaos Chapter 1 Days of Chaos Chapter 2 CHAPTER 3
  30. 30. Le Chaos Engineering dans le monde
  31. 31. https://days-of-chaos.slack.com Paris Chaos Engineering Meetup http://meetu.ps/c/3BMlX/xNjMx/f https://chaosengineering.slack.com http://days-of-chaos.com/ https://medium.com/paris- chaos-engineering- community

×