Le stockage à la mode cloud est partout. Quels en sont les principes ? Quelles sont les différentes techniques du stockage à la demande ? Comment optimiser ce stockage en cloud hybride ?
Speakers : François Tonic (Programmez! / cloudmagazine.fr ), Thomas Varlet (Microsoft), Philippe Berthot (Microsoft France)
Retour d’expérience sur ‘TFS Online’ (VSTS) dans une solution industrielle (c...
Mon Stockage a la Cloud Attitude
1.
2. Mon Stockage a la Cloud
Attitude
Francois Tonic | (Programmez! / cloudmagazine.fr )
Philippe Berthot | Microsoft France
Thomas Varlet | Microsoft France
ftonic@programmez.com
Philippe.Berthot@microsoft.com
thomas.varlet@microsoft.com,
Infrastructure, communication & collaboration
3. Donnez votre avis !
Depuis votre smartphone sur :
http://notes.mstechdays.fr
De nombreux lots à gagner toutes les heures !!!
Claviers, souris et jeux Microsoft…
Merci de nous aider à améliorer les Techdays !
#mstechdays
Infrastructure, communication & collaboration
4. Objectifs de la Session
•
•
•
#mstechdays
Quels sont les futurs enjeux du
stockage,
Comprendre la valeur du cloud
pour le stockage,
Découvrir le stockage hybride.
Infrastructure, communication & collaboration
6. De quoi parle-t-on ?
• Il existe différents types de stockage
– stockage interne : NAS, DAS, SAN
– stockage virtualisé interne
– stockage cloud "grand public" : iCloud, Google Drive,
(Sky)(One)(?)Drive,Dropbox,Box, etc.
– stockage cloud public : de type S3, Azure Storage,
Numergy, Oracle Cloud Public, etc.
– stockage cloud privé : évolution du stockage interne
(virtualité ou non)
– stockage cloud hybride : par exemple notion de
débordement (bursting)
#mstechdays
Infrastructure, communication & collaboration
7. Les défis du stockage actuel
• Défis du chaud et du froid (mais pas que)
– gérer et différentier les données chaudes et les données
froides : impact direct sur les performances imposées et sur le
type de stockage
– compression, déduplication, backup des données
– comment stocker efficacement : les problématiques d'index,
de colonnes, par blocks, par objets (type blobs)
– gérer en même temps les données structurées et non
structurées : approche relationnelle et approche de type
NoSQL
– encaisser les fortes volumétries
– réplication géolocalisée, redondante, asynchrone et notions
de snapshot Infrastructure, communication & collaboration
#mstechdays
8. Vous ne pouvez pas tout faire !
localisation
données privés
durabilité
SLA...
Dois-je géo-licaliser
mes données ? oui mes
lesquelles ?
Vous ne pouvez pas
tout faire avec n'importe
quelle donnée
Quel est le SLA ?
Comment est-il calculé ?
Certaines données
doivent rester en
Europe / France
Le cloud ne vous
décharge pas des
responsabilités
Problème simple : le
stockage cloud ne me
garantit pas une
durabilité certaine de
stockage (disons 10-15
ans)
Faites de la géoréplication et géolocalisation des
données
Suis-je propriétaire de
mes données ?
#mstechdays
Certaines données
doivent être accessibles
durant 20,30 ans ou +
Si j'efface, la donnée
est-elle effacée ?
Infrastructure, communication & collaboration
Si le stockage tombe,
comment les données
sont de nouveaux
accessibles ?
Réversibilité ?
Doubler le stockage
9. Stockage cloud ? Et alors ?
• Les questions à se poser
–
–
–
–
–
pour quelle utilisation ?
pour stocker quelle type de données ?
je dématérialise mon stockage ?
combien cela me coûte réellement ?
est-ce que des stockages cloud différents sont ils
interopérables ?
– le stockage cloud est par défaut dans + en + de logiciels même
sans le savoir
– établir un projet de stockage clair, surtout dans une approche
hybride
#mstechdays
Infrastructure, communication & collaboration
10. MON STOCKAGE EN
MODE CLOUD PRIVÉ
#mstechdays
Infrastructure, communication & collaboration
11. Panorama du stockage en mode cloud
privé
Logiciel de gestion,
sauvegarde, archivage
etc etc…
Stockage
Primaire
Stockage
d’archive
Sauvegarde
sur disques/VTL
Gestion
des bandes
SAN
#mstechdays
Infrastructure, communication & collaboration
Réplication/DR
SAN
PRA froid
Site de secours
12. Quelques contraintes du stockage en mode cloud privé
•
Comment faire évoluer mon stockage
efficacement et quelle est la meilleure
solution pour répondre à mes
contraintes métier
•
Les locaux dédiés à l’IT pourront ils
faire face aux nouveaux besoins
•
Les outils permettent ils de gérer et
d’optimiser le stockage, L’IT est il
aligner avec les besoins métiers et
utilisateurs
3380
5398
#mstechdays
Infrastructure, communication & collaboration
13. MON STOCKAGE EN
MODE CLOUD
HYBRIDE
#mstechdays
Infrastructure, communication & collaboration
14. La valeur ajoutée du stockage cloud
hybride
I am an open minded IT professional
I work with hybrid cloud storage
And you ?
#mstechdays
Infrastructure, communication & collaboration
15. La valeur ajoutée du stockage cloud
hybride
Réduction du
TCO jusqu’à
80%
Storage SAN IP
Stockage
Primaire
Cloud-as-a-Tier
automatique
Stockage
d’archive
Thin, Reduced
Snapshots
Sauvegarde
sur disques/VTL
Cloud Snapshots
Gestion
des bandes
SAN
#mstechdays
Infrastructure, communication & collaboration
Réplication/DR
SAN
DR directement
depuis le Cloud
PRA froid
Site de secours
16. Architecture Hybrid Cloud Storage – StorSimple CiS + Cloud Azure
Serveurs applicatifs
StorSimple « Cloud integrated Storage » supporte les serveurs
physiques & virtuels : Hyper-V & vmware.
StorSimple
CiS Données très
actives
Facilite la connexion au Cloud Windows Azure en quelques
minutes sans modification d’environnement
sur
SSD
Données moins
actives sur NLSAS
Rapidité du SSD +
Elasticité du Cloud
Cloud Primaires
Azure
Données
inactives
+ Backup
+Archive
+ PRA
#mstechdays
•
Consolidation d’environnements de stockage
•
PRA simple grâce à l’intégration du Cloud Azure
•
Cloud Snapshots : Rapide, simple et fiable
•
•
Pour la sauvegarde et la restauration des données
Réduction du TCO stockage jusqu’à 80%
Infrastructure, communication & collaboration
17. Architecture type et mode de gestion
Serveur
d’applications
ou de fichiers
StorSimple CiS
SSD
NL-SAS
Stockage Blob
•
•
#mstechdays
Nom du Compte
Clé d’accès
Infrastructure, communication & collaboration
Stockage
en mode
Block
Stockage
en mode
Object
18. Plan de reprise d’activité
F:
Restauration “Any where”
Data
“Bucket” primaire
Serveur
d’applications
ou de fichiers
Metadata
(map catalogue)
“Bucket” sedondaire
Stockage Windows Azure
SSD
NL-SAS
Stockage Local
#mstechdays
Infrastructure, communication & collaboration
19. Plan de reprise d’activité
Recovery Time
90 Jours
Regular Cloud
Backup
30 Jours
Avec un lien de 100 Mbps
WAN
• PRA efficace et sélectif
• Test de PRA rapide et simple
7 Jours
Tape
• Les données sont restaurées à la
demande
1 Jour
StorSimple Cloud
Snapshots
1 Heure
• Remplace les bandes
Avec un lien de 50 Mbps WAN
15 Min.
1 TB
#mstechdays
• PRA indépendent de la localisation
5 TB
20 TB
50 TB
100 TB
Infrastructure, communication & collaboration
20. En synthèse
Hybrid cloud
Stockage
Primaire
storage: a simplified approach
Stockage
d’archive
Sauvegarde
sur
disques/VTL
Gestion
des bandes
PRA froid
Site de
secours
Les données
peu actives
sont
hébergées
dans le cloud
Les
sauvegardes
sont gérées
par le cloud
Une solution
unique pour
optimiser le
stockage et les
sauvegardes
DR simplifié
grâce au cloud
Azure
StorSimple
Stockage
Primaire local
pour les
données
actives
21. CiB (Cloud integrated Backup)
PC,
Tablette
s
Serveur
s
Applicat
if
Serveur
s
CiB
Cache
local
• Cloud Integrated Backup ?
• Utilisation du stockage Windows
Azure comme device de
sauvegarde
• Outils de backup/archivage qui
intègrent le cloud comme devices
Elasticité/Couts du Cloud
Cloud Azure
Backup
#mstechdays
Infrastructure, communication & collaboration
22. MON STOCKAGE EN
MODE CLOUD
PUBLIQUE
#mstechdays
Infrastructure, communication & collaboration
23. Stockage dans Windows Azure
• Les clients précisent la région géographique dans
laquelle leurs données seront stockées
• Extensible, hautement disponible et accessible
• Exposé via une API REST
• Trois Modèles
– Blob
– Tables
– Queues
#mstechdays
Infrastructure, communication & collaboration
26. Stockage Géo Redondant avec Accès en Lecture
(RA-GRS)
Lecture
Ecriture
myaccount.<service>.core.windows.net
Lecture
myaccount-secondary.<service>.core.windows.net
North Europe
West Europe
(Primary)
(Primary)
Stockage Windows Azure
#mstechdays
Infrastructure, communication & collaboration
28. Big Data, données bizarres...
• Big Data : le mot buzz actuel
– stocker d’importantes quantités de données
– faire “joujou” avec ces données pour en extraire la bonne information au
bon moment = comment donner de la valeur à la donnée et à l'analyse
• Big Data : 2 choses essentielles, enfin 3 ou 4
– des données totalement hétérogènes : structurées, non ou semi
structurées (images, vidéo, son, ERP, CRM, factures, ticketing...)
– comment et où stocker ces données
– avoir un accès immédiat et à haute performance
– avoir les outils d'analyses
#mstechdays
Infrastructure, communication & collaboration
29. Hadoop sinon rien...
• C'est quoi cette bestiole ?
–
–
–
–
–
–
–
“High-Availability Distributed Object-Oriented Platform”
un framework Java
une implémentation de Map/Reduce
Open Source
une référence du marché
existe de multiple distribution
sur Windows Azure : HDInsight
– un marché très éclaté et de nombreux acteurs / fournisseurs
– un marché global estimé entre 20 et 30 milliards $ d'ici 2018
#mstechdays
Infrastructure, communication & collaboration
31. Hadoop dans l’architecture de donné d’entreprise
#mstechdays
Infrastructure, communication & collaboration
32. Une architecture taillée
• une approche massivement distribuée
composant
Common
outils de base
HDFS
système de fichier
massivement distribué
YARN
framework pour
ordonnancer les jobs et
gérer les ressources cluster
MapReduce
#mstechdays
fonction
pour le traitement parallèle
des grandes données
Infrastructure, communication & collaboration
33. Hadoop sous Azure
• HDInsight
–
–
–
–
distribution Hadoop déployable sur Windows Azure
création simplifié d'un cluster Hadoop distribué
système de fichier distribué
stockage de données sur Windows Azure Storage :
• HDInsight exploite des données stockés dans des blob
– administration possible via PowerShell
– connexion et exploitation des données avec des outils standards
tels que PowerBI, Excel
#mstechdays
Infrastructure, communication & collaboration
34. Pour aller plus loin…
http://aka.ms/MVA
Offre spéciale TechDays limitée aux 200
premières demandes, 1 pack par individu
http://aka.ms/jeveuxwindows2012
Approfondissez
Microsoft System Center 2012
Agenda des séminaires
techniques pour les IT Pros :
http://aka.ms/itcamps-france
Agenda des séminaires
fonctionnels pour les décideurs :
http://aka.ms/TDI
#mstechdays
http://aka.ms/jeveuxmoncloudprive
http://aka.ms/free/trial
Infrastructure, communication & collaboration
We make 3 copies of data for durability and availability. So if a rack or server goes down, you data is available and accessible. We provide 99.9% SLA for storage.Windows Azure Storage system is the underpinning to everything in Azure that requires storage. The Windows Azure storage system provides a solid robust data platform for different services that make use of it – Blobs, Tables and Drives. Use Blob service for storing large amounts of unstructured data that can be accessed from anywhere in the world via HTTP or HTTPS. A single blob can be hundreds of gigabytes in size, and a single storage account can contain up to 100TB of blobs. Common uses of Blob storage include: Serving images or documents directly to a browser, Storing files for distributed access, Streaming video and audio, Performing secure backup and disaster recovery, Storing data for analysis by an on-premises or Windows Azure-hosted serviceTables is a NoSQLdatastorewhich is ideal for storing structured, non-relational data. Common uses of the Table service include:Storing TBs of structured data capable of serving web scale applications, or storing datasets that don’t require a full fledged relational DB.Drives are what are attached to VMs. They automatically provide get the same durability and availability. This differentiates us from other competitive offerings (like AWS) that have less reliable and durable storage systems for their VM instances.