Este documento resume las capacidades de Data Quality Services (DQS) y cómo se puede integrar con SQL Server Integration Services (SSIS) para automatizar la limpieza de datos. DQS permite el descubrimiento de conocimiento, manejo de dominios, normas de coincidencia y servicios de referencia de datos. SSIS ahora incluye componentes para limpieza de datos, actualización de dominios y aplicación de normas de coincidencia de DQS. También se discute el manejo de dominios de DQS en Excel.
1. Automatizando la limpieza de datos con SSIS
5 de Marzo de 2014
José L. Rivera, MBA, MCITP, MCSA
MCITP SQL Server 2008 (DBA, DD, BI)
PASS Global Spanish Chapter Leader
Consultant at Nagnoi, LLC
2. /SQLConqueror
• Líder del Capítulo Global PASS en Español
• VP - Puerto Rico PASS
• Azure VC Webmaster
• Profesional de Bases de Datos con mas de 10 años
usando SQL Server y tecnologías relacionadas
• Especializado en ETL e Inteligencia de Negocios
• Blog: http://sqlconqueror.com
• Email: jose@sqlconqueror.com
3. Agenda
•
•
•
•
Resumen de las capacidades de Data Quality Services (DQS)
Soporte nativo para limpieza de datos en SSIS
Soporte a normas de coincidencia (Matching Policy) en SSIS
Manejo de Dominios en Excel (export/import)
4. Resumen de las capacidades de Data
Quality Services (DQS)
6. Data Quality Services (DQS)
• Descubrimiento de Conocimiento
(Knowledge Discovery)
• Manejo de Dominios
(Domain Management)
• Normas de Coincidencia
(Matching Policy)
• Servicios de Referencia de Datos
(Reference Data Services)
http://technet.microsoft.com/en-us/library/hh213015.aspx
7. Data Quality Services (DQS)
• Limpieza de Datos
(Data Cleansing)
• Coincidencia de Datos
(Data Matching)
• Perfilado y Notificaciones
(Profiling and Notifications)
http://technet.microsoft.com/en-us/library/hh213015.aspx
8. Data Quality Services (DQS)
• Monitoreo de Actividades
(Activity Monitoring)
• Configuración
(Configuration)
• Seguridad de DQS
(DQS Security)
http://technet.microsoft.com/en-us/library/hh213015.aspx
11. Componente SSIS – Actualización de Dominios
• Este componente maneja la retroalimentación de los dominios con
la información de los proyectos
• CodePlex
SSIS DQS Domain Value Import
https://domainvalueimport.codeplex.com/
13. Componente SSIS – Normas de Coincidencia
• No hay un componente nativo para realizar estas operaciones
• CodePlex
SSIS DQS Matching Transformation
https://ssisdqsmatching.codeplex.com/
18. Manténgase conectado a nosotros!
Visítenos en http://globalspanish.sqlpass.org
/SpanishPASSVC
lnkd.in/dtYBzev
/user/SpanishPASSVC
/SpanishPASSVC
19. Calendario de Sesiones
Fecha
19 Marzo
Conferenciante
Guillermo Taylor
SQL Server MVP
….
Tema
….
…
Diagnóstico y resolución de problemas en SQL Server
9 Abril
Enrique Cátala
SQL Server MVP
Mentor para SolidQ
En mi día a día como consultor me encuentro con una gran
variedad de problemas relacionados directa o indirectamente con
SQL Server. El diagnóstico de las causas reales de estos problemas
suele requerir analizar tanto el hardware como el software de la
plataforma. Presentar el diagnóstico y la resolución de problemas
reales así como los procesos y herramientas utilizadas es el objetivo
de esta sesión.
20. Programa de Reconocimiento
Programa de Voluntario Sobresaliente
•
PASS le invita a nominar a su voluntario favorito para ser “Voluntario Sobresaliente del Mes”
•
Enviar nominaciones en todo momento a: VolunteerRecognition@sqlpass.org
Favor proveer:
• Información de contacto del nominado,
• una lista breve de los programas de PASS que a participado el nominado
• los años que lleva activo en la comunidad
• una corta descripción por el cual considera que esta persona debe ser reconocida
•
Los nominados seleccionados serán anunciados en la edición del boletín PASS Connector y recibirán un
certificado de apreciación.
21. JOIN US for our second annual event to get the best learning for
analyzing, managing, and sharing business information and
insights through the Microsoft Data Platform of technologies.
22. November 4 - 7 |
Seattle, WA
http://www.sqlpass.org/summit/2014
23. Manténganse Conectados!
•
Solicite su suscripción gratuita en sqlpass.org
•
•
•
•
Linked In: Professional Association for SQL Server
Facebook: Professional Association for SQL Server Group
Twitter: @SQLPASS
The PASS Blog: sqlpass.org