2. #BigData
#Cloud
L'apprentissage commence par l’écoute
@ Excelerate Systems, nous écoutons vos Big Data!
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
3. DATA Source
(???)
DATA Source
(Database)
Le Traitement de
Données…
DATA Source
(CSV)
DATA Source
(SIG)
DATA Source
(Log)
encore
aujourd’hui
Administrateurs de
centre de données
Analyste B.I
Forces de Ventes
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
4. Plus de 90% sont des données non structurées
500 quadrillion de fichiers
Quantité double tous les 2 ans
Évolution de la DATA
Des changements
considérables lors
des 30 dernières
années
+3 trillion Go de données créées en 2013…
Applications
Internet
Smartphones & Tablettes
Machines intelligentes
Capteurs
UNSTRUCTURED DATA – 90%
STRUCTURED DATA – 10%
2013
1980
1 Trillion = 1018, soit un milliard de milliards.
1 Quadrillion = 1024
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
5. • Fastest sort of a TB, 62secs
over 1,460 nodes
• Sorted a PB in 16.25hours
over 3,658 nodes
Hadoop
BigBang
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
9. ENGINEERS
Les
Changements
Meta Data/
ETL Tools
ANALYSTS
IDEs
DATA
ARCHITECTS
DATA SCIENTISTS
Modeling
Tools
BI /
Analytics
SYSTEM
OPERATORS
BUSINESS USERS
Enterprise
Reporting
Cloudera
Manager
ODBC, JDBC,
NFS, HTTP
dans le Système
d’Information
des Entreprises
Sqoop
Sqoop
Flume
Logs
Flume
Files
#Cloud #BigData #Security #Mobile
Flume
Web Data
@ExcelSysFrance
Enterprise Data
Warehouse
Online Serving
Systems
Sqoop
Relational
Databases
ExcelerateSystemsFrance
CUSTOMERS
Web/Mobile
Applications
10. Le modèle
Data Driven Entreprises
repose sur une architecture
Enterprise Data Hub
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
11. Risk Modeling
Quels sont les
domaines
d’applications de
Hadoop ?
Customer Churn
Analysis
Recommendation
Engine
Ad Targeting
Point of Sale
Transactional
Analysis
Threat Analysis
Trade
Surveillance
Search Quality
Data Sandbox
Source: Cloudera “Ten Common Hadoopable Problems”
12. Moteurs de Recommandations: les géants du Web et les sites de e-commerce qui utilisent Hadoop, l’utilisent
pour proposer à leurs clients des produits et services basés sur l'analyse du profil utilisateur et les données
comportementales. LinkedIn utilise cette approche pour alimenter son "personnes que vous connaissez peutêtre", tandis qu’Amazon l’utilise pour proposer des produits liés aux habitudes d’achats pour les
consommateurs en ligne.
BigData
Cas d’Usages !
Analyse de Sentiments: Utilisé en conjonction avec Hadoop, et des outils avancés d'analyse de
texte, essentiellement non structuré des médias sociaux et des publications et blogs de réseautage social, y
compris les tweets et messages Facebook, afin de déterminer le sentiment des utilisateurs liés à des
entreprises particulières, des marques ou des produits. L'analyse peut se concentrer sur une analyse macrosentiment jusqu'au sentiment de chaque utilisateur.
Modélisation des risques: les entreprises financières, les banques et d'autres utilisent Hadoop et Entrepôts de
données nouvelle génération pour analyser de grands volumes de données transactionnelles pour déterminer
le risque et l'exposition des actifs financiers, afin de préparer des scenarii potentiels "what-if" basés sur le
comportement du marché simulé, et de marquer des clients potentiels pour le risque.
Détection de la fraude: Utiliser les techniques du BigData pour combiner le comportement des
clients, historiques et données transactionnelles pour détecter les activités frauduleuses. Les sociétés de
cartes de crédit, par exemple, utiliser les technologies BigData pour identifier le comportement transactionnel
qui indique une forte probabilité d'une carte volée.
Analyse campagne de marketing: Les départements de marketing dans les industries ont longtemps utilisé
la technologie pour surveiller et évaluer l'efficacité des campagnes de marketing. BigData permet aux équipes
de marketing d’intégrer l'augmentation des volumes de données de plus en plus granulaires pour augmenter
la précision de l'analyse.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
13. Analyse du taux de désabonnement des clients: Les entreprises utilisent Hadoop et les technologies de
BigData pour analyser les données du comportement des clients pour identifier les modèles qui indiquent que
les clients sont plus susceptibles de les quitter pour un service ou fournisseur concurrent. Action peut alors
être prise pour sauver et garder les plus rentables de ces clients.
BigData
Cas d’Usages !
(suite.)
Analyse Social Graph: les données de prochaine génération et les données de réseaux sociaux sont extraites
pour déterminer quels clients ont le plus d'influence sur les autres à l'intérieur de réseaux sociaux. Ceci aide
les entreprises à déterminer quels sont leurs «plus importants», clients qui ne sont pas toujours ceux qui
achètent le plus de produits ou dépensent le plus, mais ceux qui ont tendance à influer sur le comportement
d'achat d’autres personnes.
Data Analytics: utiliser Hadoop et les grandes technologies connexes pour intégrer des données provenant
de canaux d'interaction client cloisonnés tels que centres d'appels, chat en ligne, Twitter, etc… pour avoir une
vision complète de l'expérience client. Cela permet aux entreprises de comprendre l'impact d'un canal
d'interaction client dispose sur un autre afin d'optimiser l'expérience client dans son ensemble du cycle de vie.
Réseau de surveillance: Hadoop et d'autres technologies BigData sont utilisés pour ingérer, analyser et
afficher les données collectées à partir des serveurs, périphériques de stockage et autres matériels
informatique pour permettre aux administrateurs de surveiller l'activité du réseau et de diagnostiquer les
goulots d'étranglement et autres problèmes. Ce type d'analyse peut également être appliqué à d'autres
formes de réseaux, notamment des Réseaux de Transport afin d'améliorer l'efficacité énergétique.
Recherche et développement: les entreprises, comme les fabricants de produits pharmaceutiques, utilisent
Hadoop pour passer au peigne fin les volumes énormes de texte basé sur la recherche et d'autres données
historiques pour aider au développement de nouveaux produits.
Ce ne sont, bien sûr, que quelques exemples et cas d’utilisation du BigData.
En effet, le cas d'utilisation le plus convaincant dans une entreprise est peut-être celui qui n’est pas encore
élaboré. Telle est la promesse de BigData !
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
15. Chief Data Officer (CDO) : la responsabilité du CDO concerne les données et leur état
(riches, fraîches, fiables et cohérentes) ainsi que leur gouvernance.
Les données peuvent être d’origine interne ou externe, privée ou publique
Les Nouveaux
Métiers
Data Scientist : est chargé de développer les outils adaptés à la structure, de
collecter, de faire parler les données numériques et de les présenter sous un format
simple (DataViz)
Data Analyst : va manipuler les données une fois que la base est opérationnelle, afin
de faire remonter les informations susceptibles de favoriser les prises de décisions.
Et l’évolution des métiers d’Architectes, d’Administrateurs Réseaux, de DBA … etc.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
16. Le manque de ressources et de compétences est l'un des
obstacles à l'adoption du BigData.
Selon McKinsey, à horizon 2018,
Comment ?
les États-Unis devront faire face à une pénurie de :
• 140.000 à 190.000 personnes avec des compétences d'analyse de données
• 1,5 million d’analystes avec le savoir-faire minimum leur permettant utiliser
l'analyse de données massives pour prendre des décisions efficaces.
En France, et au vu du faible taux de pénétration de ces nouveaux modèles de
BigData dans les entreprises, la pénurie devrait être proportionnellement plus
importante.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
19. Excelerate Systems est votre interlocuteur Cloudera en France.
Ensemble, nous offrons aux entreprises une puissante plate-forme BigData basée sur Apache Hadoop
Cloudera est le plus grand
contributeur au projet
OpenSource
#BigData
C’est une distribution CDH prête à
l’emploi pour les entreprises.
Intègre les projets les plus
populaires liées à Hadoop dans
un package unique, qui est géré
par le biais d'une série de tests
rigoureux afin de garantir la
fiabilité lors de la mise en
production.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
Initialement développé et utilisé
par des entreprises tels que
Google, Yahoo et
Facebook, Hadoop est maintenant
largement utilisé dans :
la finance,
la technologie,
Les télécommunications,
Les médias et le divertissement,
Les organisations
gouvernementales,
les instituts de recherches
ExcelerateSystemsFrance
20. Solution basée sur Apache Hadoop
INGEST
Cloudera
Enterprise
The Platform
for Big Data
STORE
MANAGEMENT
SOFTWARE &
TECHNICAL SUPPORT
(SUBSCRIPTION)
EXPLORE
PROCESS
ANALYZE
CM
CS
CLOUDERA MANAGER
SERVE
CLOUDERA SUPPORT
CDH
OSS
APACHE HADOOP & OPEN SOURCE SOFTWARE
BRINGS STORAGE &
COMPUTE TOGETHER
#Cloud #BigData #Security #Mobile
WORKS WITH EVERY
TYPE OF DATA
@ExcelSysFrance
CHANGES THE
ECONOMICS OF DATA
MANGAGEMENT
ExcelerateSystemsFrance
20
22. Excelerate Systems,
+20 Experts reconnus mondialement,
Depuis 2011, nous avons
développé un réseau de
consultants hautement
qualifiés.
#BigData
Expertise
Nous avons réalisé plusieurs
projets dans divers secteurs
d’activités.
e-Commerce
Data Scientistes,
Game
Architectes,
e-Gouvernement
Administrateurs,
Banque et Finance
Développeurs,
Grande Distribution
Analystes, Statisticiens
Marketing
Communication
Sécurité
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
24. Pour vos Projets BigData
Approche Globale - produits et services
Analyse des Besoins et Recommandations
#BigData
Services
Plateformes de Tests, PoC
Maitrise d’ouvrage et Pilotage de Projets
Support technique (espagnol, anglais, portugais et Français)
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
25. Nos réalisations…
Société de Jeux Video
Recommandation pour la transformation de l'architecture MySQL vers NoSQL
Amélioration des schémas des bases de données et accélération de la vitesse d'exécution des programmes et des
procédures (70 min à moins de 5 Sec)
Choix technique: CDH sur Amazon (AWS) Versus MySQL sur OVH
Organisme Public gestionnaire d’une métropole urbaine (28 communes)
#BigData
Les Projets
Plate-forme Sentiment Analysis pour un projet de participation citoyenne.
Collecter, analyser et visualiser les usages et données de Twitter, de site de presse en ligne et de blogs
Choix technique: CDH sur AWS
Société de Marketing Internet
Techlead de l’Equipe Hadoop/BigData.
Réécriture de l'ETL propriétaire en place en se basant sur l'application « importtsv » de Hbase.
Implémentation de jobs Mapreduce de déduplication de mailling-list.
Assistance et conseil à l'élaboration d'une plateforme d'analyse de données basée sur l'environnement Hadoop.
Rédaction de cahiers de charges pour le provisioning du cluster Hadoop/Hbase.
Initiation à l'agilité (scrum/xp).
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
26. D’autres réalisations de nos Consultants…
Plateforme E-Commerce multicanal Groupe de grande distribution (France/Lille)
Référent technique Hadoop/HBase.
Automatisation du provisionning du cluster Hbase avec Whirr.
Mise en place de tests d'intégrations.
Revue de code.
Proposition et Conseil sur les choix techniques et d'implémentation de la solution.
#BigData
Les Projets
Plateforme E-Commerce Voyagiste (France/Courbevoie)
Proposition d'une architecture basée sur l'environnement Hadoop pour mise en place d'une solution de « Web
Usage Mining » (W.U.M).
Réalisation d’une solution de W.U.M basée sur Apache Mahout et Apache Hadoop.
Deep refactoring du mécanisme de collecte des données destinées aux W.U.M. remplaçant le stockage dans une
base relationnelle par une approche Write-Ahead logging. ….etc.
Et bien d’autres exemples de réalisations
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
27. #BigData
#Cloud
La Performance commence par le Changement
@ Excelerate Systems, nous transformons vos centres de Données !
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
29. What is OpenStack able to do for you?
Your organization will be enabled to create and offer cloud
computing services running on standard hardware.
Who’s behind OpenStack? Founded by Rackspace Hosting and
NASA. OpenStack is a global collaboration producing the ubiquitous
open source cloud computing platform for public and private clouds.
Who
uses
OpenStack?
Corporations,
service
providers, VARS, SMBs, researchers, and global data centers
looking to deploy any-scale cloud deployments for private or public
clouds
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
30. Your company will be enabled to configure, deploy and operate
OpenStack clouds with a high level of automation, easily and quickly
thanks to its Head Manager Dashboard.
Advantages:
Create your whole private cloud platform in few hours.
Delegate most operation tasks because of a high level of
automation.
Launch a new instance in few seconds.
Provide your platform with a HA solution fully integrated.
Provide your internal customers with a Self-service dashboard .
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
31. How can StackOps do it?
Features:
StackOps Automation eases the installation and operation of your cloud.
High Availability fully integrated
Monitoring tool integration.
Cloud user Portal.
Accounting Portal.
Chargeback Portal.
Third Party components seamless support.
Cloud User dashboard Integration
Integration with Amazon.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
32. StackOpsVirtual Private Cloud
StackOps enables your company to provide fully isolated virtual private
clouds.
No resource sharing, fully dedicated hardware, StackOps administration
portal and no upfront investment
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
34. Vous vous demandez comment entrer dans le BigData, et vous
vous posez des questions sur les coûts, la complexité, les
compétences et surtout quels avantages vous en tireriez.
Entrez
Rapidement
dans le l’ère
BigData
vous pensez à l'explosion massive des données structurées et non
structurées dans votre entreprise et vous vous demandez
comment utiliser ces nouvelles technologies pour les exploiter
Peut-être que vous savez déjà ce que vous voulez faire avec
l’architecture BigData, mais ne savez pas comment commencer.
Vous recherchez un partenaire qui peut vous aider à naviguer dans
ces nouvelles technologies et capable de vous offrir la BigData
dont vous avez besoins.
Besoin également d’applications d’intégration de données
massives structurées et non structurées et parfois multilingues !
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
35. Excelerate Systems a établi un partenariat solide avec Cloudera et
d'autres technologies innovantes de l’industrie du Cloud et du
BigData pour vous fournir une infrastructure à votre
mesure, hautement performante et avec les avantages suivants :
BigDataCloud
QuickStart
avec
Tarification à
l’Usage
Coûts Réduits
Payez en fonction de votre utilisation, sans aucun frais initial ni
engagement à long terme.
Élasticité
Déployez instantanément votre application et données.
Augmentez ou diminuez vos ressources à l'échelle, en fonction de
vos besoins.
Flexibilité
Tout ce que vous pouvez exécuter dans un centre de données peut
s'exécuter dans la plateforme BigDataCloud.
Vous disposez d'une maîtrise totale.
Sécurité
Bénéficiez d'une plate-forme technologique sécurisée, répondant
à toutes les normes en vigueur.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
36. De nombreux clients savent, veulent ou ont besoin d'entrer dans le
BigData !
nous les aidons à démarrer, assurons leurs formations sur ces
technologies et les accompagnons dans ces nouveaux environnements.
Démarrez
BigDataCloud
QuickStart
C’est un accès immédiat { un environnement fonctionnel dans le Cloud
composé d’un Nœud de 5 Clusters Cloudera, avec une visualisation
complète des résultats en 5 jours.
Excelerate Systems peut mettre en œuvre votre Cluster Cloudera
personnalisé, rapidement en quelques jours.
Essayez le BigDataCloud. Pendant un mois à 3 mois.
Activer / Arrêter / Redémarrer le service quand vous le souhaitez et ne
payer que pour les ressources dont vous avez besoin au moment où
vous en avez besoin.
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
37. Ils nous font confiance…
Finance
Telecoms
Government
+100 Clients
Worldwide
Commercial
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
Retail
38. Entreprise Privée, Fondée en 2007 à Seattle (Redmond), Washington
USA
Qui sommesnous ?
Des bureaux pour l’Europe à Bordeaux (France), pour l’Amérique
Latine à Mexico (Mexique), et des représentations en Afrique du
Sud, Australie, Inde et Chine.
Offre Riche dans 4 catégories
1.
2.
3.
4.
BigData, Cloud et Virtualisation.
Sécurité et Protection des Données et Optimisation des S.I
Gestion et Sécurité du Mobile en Entreprise et le CRM-Mobile.
Connectivité au Systèmes Centraux et l’intégration des Mainframes
#Cloud #BigData #Security #Mobile
@ExcelSysFrance
ExcelerateSystemsFrance
We do that by delivering a transformative Big Data solution that’s based on an open source technology called Apache Hadoop. Hadoop is a game-changer for data management for 3 reasons:BRINGS STORAGE AND COMPUTATION TOGETHER IN A SINGLE SYSTEMPROCESS & ANALYZE DATA IN PLACEREMOVE NETWORK BOTTLENECKSELIMINATE DATA MIGRATIONSWORKS WITH EVERY TYPE OF DATA, IN ITS NATIVE FORMATNO NEED TO FIT A SINGLE SCHEMANOTHING LOST THROUGH ETLLOOK AT ALL YOUR DATA FOR A COMPREHENSIVE VIEWCHANGES THE ECONOMICS OFDATA MANAGEMENTOSS + COMMODITY HARDWAREKEEP EVERYTHING ONLINE SUPERCOMPUTING FOR EVERYONE
Cloudera’s complete solution includes software, education and professional services. We provide the most comprehensive Hadoop solution available. We can engage with you no matter where you are on the Big Data “learning curve” and give you everything you need to make your deployment a success.Cloudera Enterprise is our Big Data platform based on Apache Hadoop. There are three components to Cloudera Enterprise. First, CDH which is our 100% open source and enterprise-ready Hadoop distribution, Cloudera Manager which provides central, end-to-end administration for CDH, and Cloudera Support which provides either 8x5 or 24x7 technical support for both CDH and Cloudera Manager.Cloudera University is our comprehensive education program for Hadoop developers, administrators, managers and data scientists.Our full range of professional services