Introduccion a SQL Datawarehouse en Azure, casos de uso y evolucion en synapse

1. Azure SQL Data Warehouse
Introducion
Juan Manuel Alvarado Ortiz
MVP Data Platform
Twitter: juanbizzz

2. EX TRAER
Data Warehouse moderno
PREPARAR TRANSFORMAR SERVIR
ALMACENAMIENTO
VISUALIZAR
On-premises data
Cloud data
SaaS data

3. El mejor en
relacion
Costo/Rendimiento
Productividad de
desarrolladores
Administracion
inteligente de cargas
Flexibilidad de datos
Hasta 94% menos
costoso que los
competidores
Manejo de prioridad en
cargas de trabajo
Carga de diferentes tipos
de datos
Use su herramienta de
Desarrollo preferida con
SQL data warehouse
Lider en la industria a
nivel seguridad
Seguridad avanzada y
99.9% de disponibilidad
en servicio
Azure SQL Data Warehouse

4. Azure SQL Data Warehouse ventaja en
rendimiento
Gen2 adaptive caching – using non-volatile memory
solid-state drives (NVMe) to increase the I/O bandwidth
available to queries.
Azure FPGA-accelerated networking enhancements – to
move data at rates of up to 1GB/sec per node to improve
queries
Instant data movement – leverages multi-core
parallelism in underlying SQL Servers to move data
efficiently between compute nodes.
Query Optimization – ongoing investments in
distributed query optimization
Overview

5. Seguridad
completa
Data In Transit
Data encryption at rest (Service & User Managed Keys)
Data Discovery and Classification
Native Row Level Security
Table and View Security (GRANT / DENY)
Column Level Security
SQL Authentication
Native Azure Active Directory
Integrated Security
Multi-Factor Authentication
Virtual Network (VNET)
SQL Firewall (server)
Integration with ExpressRoute
SQL Threat Detection
SQL Auditing
Vulnerability Assessment
Data Protection
CATEGORY FEATURE SQL DATA
WAREHOUSE
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes
Yes

6. 1 2 10 11
Running Queued
3 4 5 6 7 98 121011 12
Scheduler Without Importance
9 10
QueuedQueued
CEOCEOCEO
By default, workloads are run on a first-in first out basis.
Administracion de la carga de trabajo
importancia de los roles

7. 1 2 10 11
Running Queued
3 4 5 6 7 98 12
Scheduler With Importance Turned On
12
Queued
CEOCEO
LowNormal Normal High
CREATE WORKLOAD CLASSIFIER classifier_name
WITH
(
WORKLOAD_GROUP = 'name’ ,
MEMBERNAME = 'security_account' [ [ , ]
IMPORTANCE = { LOW | BELOW_NORMAL | NORMAL (default) | ABOVE_NORMAL | HIGH }])
Administracion de la carga de trabajo
Importancia del trabajo

8. Data Heterogenea- JSON
Leer datos JSON data almacenados en un
string:
• ISJSON – Verifica si es Json valido
• JSON_VALUE Extraer un valor
• JSON_QUERY – Extraer un arreglo o un
objeto de un string Json
Overview
-- Return all rows with valid JSON data
SELECT CustomerId, OrderDetails
FROM CustomerOrders
WHERE ISJSON(OrderDetails) > 0;
CustomerId OrderDetails
101
N'[{ StoreId": "AW73565", "Order": { "Number":"SO43659",
"Date":"2011-05-31T00:00:00“ }, "Item": { "Price":2024.40, "Quantity":1 }}]'
-- Extract values from JSON string
SELECT CustomerId,
Country,
JSON_VALUE(OrderDetails,'$.StoreId') AS StoreId,
JSON_QUERY(OrderDetails,'$.Item') AS ItemDetails
FROM CustomerOrders;
CustomerId Country StoreId ItemDetails
101 Bahrain AW73565 { "Price":2024.40, "Quantity":1 }

9. Use su herramienta
preferida
Para desarrollar en
Azure SQL Data
Warehouse
Productividad
del
desarrollador

10. Azure Synapse Analytics
Evolucion de Azure SQL Datawarehouse

11. Azure Synapse is Azure SQL Data Warehouse evolucion — conecta big
data, data warehousing, y data integration en un solo servicio de principio a fin
, para soluciones analiticas y escalable en la nube.
Azure Synapse Analytics

12. Facil de usar
Rapido de explorar
Rapido de comenzar a usar
Big Data
O
Este es el resultado en los negocios, son forzados a
mantener dos tipos de sistemas criticos, en forma
independiente para sus soluciones analiticas
Alta seguridad
Pieza clave en privacidad
Dependiente de rendimiento
Data Relacional
Data Lake Data Warehouse

13. Bienvenidos a Azure Synapse Analytics
Azure conecta lo major de los dos mundos, en un solo servicio
Facil de usar
Rapido de explorar
Rapido de comenzar
Alta seguridad
Pieza clave en privacidad
Dependiente de rendimiento

14. Escenarios de uso
Big data y analitica avanzada
SQL
data warehousing moderno
“Necesitamos integrar toda
nuestros datos – incluyendo Big
Data—con nuestro data
warehouse”
Analitica Avanzada
“Queremos tartar de predecir
el comportamiento y churn de
nuestros clientes”
Analitica en tiempo real
“Estamos tratanto de realizar
analisis en tiempo real de los
sensores de nuestros equipos
en la fabrica”

15. Analitica usando Azure Synapse
Platforma
METASTORE
SECURITY
MANAGEMENT
MONITORING
DATA INTEGRATION
Analytics Runtimes
PROVISIONED ON-DEMAND
Form Factors
SQL
Languajes
Python .NET Java Scala R
Experiencia Azure Synapse Studio
Power BI
Azure Machine
Learning
On-premises data
Cloud data
SaaS data Azure
Data Lake Storage Gen2
Common Data Model
Enterprise Security
Optimized for Analytics
Extrae datos de
multiples Fuentes de
datos
Prepara los datos
Analiza los datos
preparados
previamente
Provee los analisis a
multiples usuarios
Construye dashboards
y reportes para BI

16. Analitica usando Azure Synapse
Platforma
METASTORE
SECURITY
MANAGEMENT
MONITORING
DATA INTEGRATION
Analytics Runtimes
PROVISIONED ON-DEMAND
Form Factors
SQL
Languajes
Python .NET Java Scala R
Experiencia Azure Synapse Studio
Power BI
Azure Machine
Learning
On-premises data
Cloud data
SaaS data Azure
Data Lake Storage Gen2
Common Data Model
Enterprise Security
Optimized for Analytics
Extrae datos de
multiples Fuentes de
datos
Prepara los datos
Analiza los datos
preparados
previamente
Provee los analisis a
multiples usuarios
Construye dashboards
y reportes para BI

17. Azure Synapse Studio
Ambiente único donde desarrolla y
administra todos los componente
de la solución analítica incluyendo:
Data Lakes, Machine Learning,
Power BI, Sparks SQL
Datawarehouse y Data Flows

18. Q&A

19. Thank you for joining us.