Método de evaluación SCAMPI A y resultados del profile oficial del SEI de marzo 2012

1. Un camino claro hacia la madurez
de tus procesos:
¿Cómo alcanzar niveles de
madurez del CMMI?
é ó
SM SCAMPI is a service mark of Carnegie Mellon University

2. Objetivos
 SCAMPI:
Conocer los elementos generales del método
de evaluación de procesos (SCAMPI)
Identificar los usos de una evaluación
SCAMPI
Identificar los tipos de evaluación SCAMPI
Compartir lecciones aprendidas de las
evaluaciones SCAMPI
 Cifras de SCAMPI

3. Referencias
• CMMI for Development, Version 1.3 CMU/SEI-2010-
TR-033
• Standard CMMI Appraisal Method for Process
Improvement (SCAMPI), Version 1.3: Method
Definition Document, Technical Report CMU/SEI-
2011-HB-001
• http://www.sei.cmu.edu/cmmi/tools/cmmiv1-3/
• http://www.sei.cmu.edu/cmmi
• http://www.sei.cmu.edu/cmmi/why/profiles
• http://sas.sei.cmu.edu/pars/

4. Propiedad intelectual
• En la presentación veremos los términos:
– Capability Maturity Model®
– CMMI®
– SCAMPISM
– CMM IntegrationSM
– IDEALSM
• son “service marks” y/o marcas registradas (trademarks)
de Carnegie Mellon University.
• Algunas partes de esta presentación hacen referencia
a material que es propiedad de SEI/CMU.
• Prohibida la copia y/o distribución de esta
presentación y/o sus partes sin consentimiento de los
autores.

5. SCAMPI

6. IDEALSM
Compuesto por 5 fases que permiten
administrar un programa de mejora y
establecer las bases para la estrategia a
largo plazo.
• Iniciar (Initiating)
Plan de Definición y
• Diagnosticar (Diagnosing)
mejora ajuste de
procesos
• Establecer (Establishing) Evaluación
SCAMPI
Capacitación
BISC/SEPG
• Ejecutar (Acting)
. Verificación de
implantación
• Aprender
Fase IV.
(Learning)

7. Diagnosticar (Diagnosing)
Obtener un entendimiento completo del
trabajo a realizar.
Caracterizar el estado actual y futuro de la
organización.
Se realiza con base en algún modelo de
Plan de
Definició
ny
ajuste
referencia.
mejora de
proceso
Se proponen recomendaciones que sirven
s
Evaluaci
ón
SCAMP Capacitaci
I BISC/SEPG ón
.
Verificació
n de
Fase IV.
implantació
n
para definir las actividades siguientes del
programa de mejora.
McFeeley, Bob: IDEAL: A User’s Guide for Software Process Improvement, Handbook, CMU/SEI-96-HB-001.

8. ¿Qué es un diagnóstico?
También conocido como:
 Evaluaciones
 Análisis de brecha
 En inglés:
• Evaluations, diagnostics, gap analysis appraisals,
assesments
Pero… ¿qué es un diagnóstico?
 Dime qué haces
 Dime cómo lo haces
 Verificaré lo qué haces cómo dices que lo haces

9. “Si no sabes dónde estás,
un mapa no te va a ayudar”
Watts Humphrey

10. Tipos de Evaluaciones
 Iniciales:
–En dónde estoy y cuánto me falta
–Auto-evaluaciones
 Externas:
–Impuestas de manera externa (cliente, gobierno,
contratista)
–Grupo externo (independiente) que tomará alguna
decisión de negocios
 Internas:
–Se realiza por interés propio
–Se toman decisiones sobre SPI
–Sirven para medirse

11. ¿SCAMPI o SCAMPI?
0 1 2 3
PA1
PA2
PA3
PA4
PA5
5 PA6
Level
4 3
3
2

12. ¿Qué es una evaluación SCAMPI?
 Standard CMMI Appraisal Method for Process
Improvement
 SCAMPI está basado en meta modelo
 Un solo método para evaluaciones para DEV/ACQ/SVC
 Para diagnósticos interno y/o para evaluación de
proveedores
 Capaz de producir perfil de capacidad con base en PAs o
niveles de madurez de una organización
0 1 2 3
5 PA1
Level PA2
4 3 PA3
3 PA4
PA5
2 PA6

13. Usos de una evaluación
 Comparar los procesos de la
organización con las prácticas en el
modelo e identificar áreas de mejora
 Comunicar a clientes y proveedores
la forma en que la organización
cumple con las prácticas en el
modelo
 Cumplir los requerimientos
contractuales de un cliente
 Benchmarking

14. Clases de Evaluaciones SCAMPI
CLASE A CLASE C
CLASE B

15. SCAMPI Clase A
Es el método más
amplio, con mayor
cobertura del modelo y
proporciona un nivel
de madurez/capacidad
CLASE A CLASE C
CLASE B

16. SCAMPI Clase B
Es menos amplio que A, se
considera como una
evaluación inicial o parcial,
enfocado en las áreas que
requieren atención y no
proporciona un nivel de
madurez
CLASE A CLASE C
CLASE B

17. SCAMPI Clase C
Es una visión más rápida que
verifica áreas especiales de
riesgo, es el método más
económico y requiere una
capacitación menor. No
proporciona nivel de
madurez/capacidad
CLASE A CLASE C
CLASE B

18. Comparativo en los tipos de SCAMPI
Características Clase A Clase B Clase C
Cantidad de evidencia Alta Media Baja
objetiva obtenida
Genera calificación Si No No
Recursos necesarios Alta Media Baja
Tamaño de equipo Grande Mediano Pequeño
Requerimientos de líder de Evaluador Evaluador Líder Persona
equipo Líder o persona capacitada y
capacitada y con
con experiencia experiencia
* Fuente: SEI, Mike Phillips

19. Principios del SCAMPI
 Tener un modelo de procesos como marco de
referencia
 Observar ESTRICTA confidencialidad
 Involucrar a la alta dirección como patrocinador de
la evaluación
 Tener un enfoque colaborativo y sobre actividades

20. Objetivos del SCAMPI
Comprender el estado actual de las
prácticas de la organización
Identificar los puntos fuertes y
oportunidades de mejora
Identificar las prioridades para las
acciones de mejora
Determinar el grado de cumplimiento vs.
marco de referencia
Facilitar el inicio y la continuación del
programa de mejora
Contar con agregación de información
recolectada a través de diferentes tipos
de EO

21. Participantes de la Evaluación
 Equipo Evaluador
– SCAMPI Lead Appraiser
– Miembros del equipo evaluador (Mini-teams)
 Participantes
– Sponsor de la evaluación
– Gerencia media
– Líderes de proyecto
– Representantes de las áreas funcionales (FAR’s)
– Site Coordinator

22. Fases de una Evaluación SCAMPI
Fase I
Planear y preparar la evaluación
Fase II
Ejecutar la evaluación
Fase III
Reportar los resultados de la evaluación

23. Procesos dentro de una evaluación
SCAMPI
1. Analizar requerimientos 1. Preparar a los participantes
2. Desarrollar el plan de 2. Examinar la evidencia objetiva
evaluación 3. Documentar la evidencia objetiva
3. Seleccionar y preparar al 4. Verificar la evidencia objetiva
equipo evaluador 5. Validar los hallazgos pre-
4. Obtener y analizar eliminares
evidencia objetiva 6. Generar los resultados de la
preliminar evaluación
5. Preparar la ejecución de la
evaluación
1. Entregar los resultados de la
evaluación
FASE II 2. Empacar y archivar la
documentación de la evaluación
FASE I
FASE III

24. Actividades generales
 Fase I: Planeación y preparación
– Determinar el alcance de la evaluación
– Determinar la muestra adecuada y representativa
– Analizar los requerimientos de la organización
– Generar el plan de evaluación & plan de
recolección
– Seleccionar y preparar al equipo y a los
participantes
– Obtener evidencia objetiva de los proyectos y de
la organización

25. Actividades generales
Fase II: Ejecución
– Examinar la evidencia objetiva
– Documentar la evidencia objetiva
– Entrevistar a los participantes
– Consolidar información
– Caracterizar las prácticas
– Verificar la evidencia objetiva
– Rating (nivel de madurez)
– Presentar resultados

26. Actividades generales
Fase III: Reportar resultados
– Enviar documentación al SEI
• Appraisal Disclosure Statement (ADS)
• Plan evaluación
• Presentación final de resultados
– Llenar retroalimentación de evaluación
– Generar respaldo de información
Managed
– Esperar notificación del SEI Configuration management
Process & product quality assurance
Measurement & analysis
NA Supplier agreement management
Project monitoring & control
Project planning
Requirements management

27. Lecciones aprendidas SCAMPI
 Objetividad
 Honestidad
 Estar abiertos a la mejora
 Considerar el material informativo del
modelo
 Colaborar con el equipo evaluador y el
SLA
 Confidencialidad y no atribución
 Tener en el contexto de la organización
 Es solo… la cereza del pastel
© Avantare Consultores S. A. de C. V. – Derechos Reservados

28. Al final del ciclo… (1)
 Lo importante no es el nivel, sino las
mejoras tangibles y mantenerse
 Ligar los objetivos de negocio con las
metas y objetivos de calidad
 Mantener una cultura de mejora
exitosa
 Volverse autocríticos
 Reconocer y retener a la gente
 Implementar la mejora con
herramientas que soporten la
operación
© Avantare Consultores S. A. de C. V. – Derechos Reservados

29. Al final del ciclo… (2)
 Hacer que la mejora continua sea el
espíritu de la empresa
 Mantener la comunicación abierta
 Rotar a los participantes en el
SEPG y la operación
 Buscar nuevos retos de acuerdo a
las necesidades del negocio
 Continuar mejorando y alimentando
la necesidad de mejorar
© Avantare Consultores S. A. de C. V. – Derechos Reservados

30. Condiciones para el éxito
Leadership Skills Incentives Resources Plan Outcome
Confusion
Anxiety
Slow change
Frustration
False starts
Adapted from the SEI class: Managing the technological change

31. CIFRAS DE SCAMPI

32. SCAMPIs en el mundo

33. SCAMPIs por nivel de madurez

34. SCAMPIs reportados por continente

35. Tamaño de las organizaciones que
realizan SCAMPI

36. Países que han reportado más
evaluaciones

37. Niveles de madurez
China & USA
0
54 45 71 10
5 68
470
636
NIVEL 1 NIVEL 2 1686
NIVEL 3 NIVEL 4 NIVEL 5 NIVEL 1 NIVEL 2 NIVEL 3 NIVEL 4 NIVEL 5
China + USA = 55% del total de las evaluaciones

38. Evaluaciones SCAMPI A
en México
1 5 0
56
52
 CBA-IPI 1999 – Tecnosys IBM
(n3)
 SCAMPI 2005 – IBM (n5)
NIVEL 1 NIVEL 2 NIVEL 3 NIVEL 4 NIVEL 5
150
Evaluaciones en México
100
50
0
2007 2008 2009 2010 2011
http://www.sei.cmu.edu/appraisal-program/appraisal-results.html

39. ¡ Gracias !
M. en A. Mariana Pérez-Vargas O.
Certified SCAMPI Lead Appraiser
www.avantare.com
AVANTARE
+52 (55) 5544.3321
informacio@avantare.com