Appraisal Requirements For CMMI

Autores:
Enrique María Arjonilla Cobreros
Jorge Calvillo Arbizu
Manuel Jesús Domínguez Morales
Ramiro Romero Arjona
Ángel Jesús Varela Vaca

TECNOLOGÍADEL PROCESOSOFTWARE
MÁSTEROFICIALENINGENIERÍAYTECNOLOGÍADELSOFTWARE
UNIVERSIDADDESEVILLA

Contenido
¿Qué es ARC v1.2?
¿Para qué sirve ARC v1.2?
Beneficios y características
Requisitos estructurados por clases
Requisitos
SCAMPI: Una implementación de ARC
Conclusiones
Referencias

¿Qué es ARC v1.2?

 CMMI: modelo para la mejora de procesos que proporciona a las organizaciones
los elementos esenciales para procesos eficaces.
 Evaluación de CMMI: debe ajustarse a los requerimientos recogidos en ARC
 SCAMPI: método de evaluación que cumple todos los requerimientos de ARC

¿Qué es ARC v1.2?
 ARC (Appraisal Requirements for CMMI): Requisitos de Evaluación de
CMMI.
 Define el conjunto de criterios de alto nivel para el desarrollo, la
definición y el uso de métodos de evaluación basados en modelos
CMMI.
 Abarca:
 Evaluación de la mejora de procesos internos
 Evaluación de la capacidad  Monitorización

 Evolución progresiva desde CMM  CAF
 ARC influenciada por EIA/IS 731.2 e ISO/IEC 15504

 ARC define los criterios de evaluación de un evaluador de CMMI

 Equipo de evaluación usa CMMI para identificar debilidades y fortalezas
mediante un evaluador de CMMI (p.e. SCAMPI)

 Los resultados de la evaluación sirven para:

 Planificar una estrategia de mejora de la organización
 Generar la puntuación a nivel de madurez o a nivel de capacidad
 Elaborar guías para la toma de decisiones
 Mitigar los riesgos para la adquisición de productos, desarrollo y
vigilancia


 ARC permite la generación de métodos de evaluación multidisciplinares.
 Permite obtener resultados para una disciplina o varias conjuntamente.

 Es posible alinear los requisitos de ARC con los de ISO 15504

ARC

Requisitos estructurados por clases (I)

 Estructuración por clases de los requisitos

Requisitos Clase A Clase B Clase C
Tipos de evidencias Documentos y Documentos y Documentos y
objetivo recogidos entrevistas entrevistas entrevistas
Clasificaciones Clasificación de No permitido No permitido
generadas objetivos
requeridos
Cobertura de la Requerido No requerido No requerido
unidad de
organización
Tamaño mínimo del 4 2 1
equipo
Requisitos del líder Evaluador Persona instruida y Persona instruida y
del equipo principal experimentada experimentada
evaluador

Requisitos estructurados por clases (II)

 Requisitos ARC por clases (fragmento inicial)
Requisitos Clase A Clase A Clase B Clase C
(conforme a (no conforme
ISO 15504) a ISO 15504)
Responsabilidades
5.1.1 – Patrocinador evaluación si si si si
5.1.2 – Líder del equipo si si si si
evaluador
Evaluación del método de documentación
5.2.1 – Documentación del si si parcial parcial
método (a-d solo) (a-d solo)
5.2.2 – Guía para la si si si si
identificación del propósito y
objetivos de la evaluación
5.2.3 – Guía para el modelo de si si si si
alcance de CMMI
5.2.4 – Guía para la si si si si
identificación de la unidad
organizativa

Requisitos estructurados por clases (III)

 Alineación requisitos ARC-ISO15504 (fragmento)
Requisito 15504 -2 Comentarios
Requisito (s)
ARC

4.2.1 5.2.1, 5.2.2

4.2.2a 5.3.5

4.2.2a.1 5.3.5a

4.2.2a.2 5.3.5b

4.2.2a.3 5.3.5c

4.2.2a.4 5.3.5a, 5.3.3h-k

4.2.2a.5 - Si la verificación de requisitos de ISO/IEC 15504 son
requeridos, esto será necesario incluirlo en el plan de
evaluación.

Contenido
¿Qué es ARC v1.2?
Requisitos
 Responsabilidades
 Evaluación de los métodos de documentación
 Preparación y planificación para la evaluación
 Recolección de datos de evaluación
 Consolidación y validación de los datos
 Clasificación
 Informe de resultado
Conclusiones
Referencias

Requisitos - Responsabilidades
 Del patrocinador:
 Verificar que el líder del equipo de validación tiene
la experiencia, conocimientos y habilidades
apropiados.
 Asegurar que las unidades o subunidades
organizacionales apropiadas participan en la
evaluación.
 Aportar provisiones del método de evaluación para
garantizar la no atribución de los participantes .
 Asegurar que se disponga de recursos para llevarla
a cabo.
 Revisar y aprobar la entrada de la evaluación
antes del comienzo de la recopilación de datos.

Requisitos - Responsabilidades
 Del líder del equipo:
 Asegurar que la evaluación se lleve a cabo de acuerdo con
el proceso documentado del método.
 Confirmar el compromiso del promotor.
 Asegurar que los miembros del equipo de evaluación
están informados del propósito, alcance y enfoque.
 Asegurar que los miembros del equipo de evaluación
tienen la experiencia, conocimientos y habilidades
apropiados; la competencia necesaria para usar los
instrumentos y herramientas elegidas; y acceso a la guía
documentada.
 Verificar y documentar que los requisitos del método de
evaluación se han cumplido.
 Confirmar la entrega de los resultados al patrocinador.

Requisitos - Documentación
 Identificación de los modelos CMMI (versión,
disciplina y representación [gradual o continua]).
 Identificación de la versión de ARC en la que el
método de evaluación se basa.
 Identificación de cuales requisitos de evaluación
de CMMI están satisfechos por qué método, junto
con los miembros de la clase del método de
evaluación de CMMI (si es aplicable).
 Descripciones de las actividades, artefactos y
guía que implementa cada uno de los requisitos de
evaluación.
 (A) Declaración en cuanto a si el método soporta o
no la evaluación conforme a 15504.

Requisitos – Preparación y planificación

 Se permitirá la preparación de los participantes en la evaluación
señalando, como mínimo:

 El propósito de la evaluación
 El alcance de la evaluación
 La propuesta de evaluación
 Los roles y responsabilidades de los participantes
en la evaluación
 La planificación temporal de las actividades de
evaluación

Requisitos – Recolección de datos
Tipos de evidencias objetivas reconocidas por los métodos de
evaluación de CMMI:

 El método obtendrá datos a través de entrevistas
(por ejemplo, con los jefes del proyecto, los
gestores y los profesionales)
 El método obtendrá datos revisando la
documentación (por ejemplo con las políticas de
la organización, los instrumentos utilizados, los
procedimientos que siguen los proyectos y los
productos de trabajo a nivel de implementación)

Los dos tipos son indispensables para los métodos de evaluación de clase A y
B, mientras que sólo un tipo de es necesario en los métodos de clase C.

Requisitos –Consolidación y validación
El método requiere para que se dé una consolidación y validación:
 El consenso dentro del equipo de evaluación cuando se tomen
decisiones relativas a determinar la validez de las conclusiones y
establecer clasificaciones
 Un mecanismo para consolidar los datos recogidos durante la
evaluación en conclusiones concretas
 (AB) Un mecanismo para verificar las conclusiones
 (AB) El cumplimiento de un conjunto mínimo de criterios para que las
evidencias objetivas puedan ser consideradas comprobables
 (A) Un mecanismo para determinar que se han recogido datos
suficientes para cubrir el alcance de la evaluación
 (A) Un mecanismo para consolidar las evidencias objetivas en
conclusiones preliminares de fortalezas y debilidades
 (A) El método requiere que a los participantes en la evaluación se les
presenten las conclusiones preliminares para que respondan y validen
su claridad y concreción

Requisitos -Clasificación
 El método debe exigir que las clasificaciones se basen en definiciones de
los modelos CMMI
 Si hay pruebas que demuestran que se cumplen los requisitos definidos
 Se puede clasificar un objetivo
 Si se han evaluado todos los objetivos generales y específicos
 Se puede clasificar un área de proceso
 Si se han evaluado todas las áreas de proceso
 Se puede determinar un nivel de madurez
 Si se han evaluado todos los objetivos genéricos
 Se puede determinar el nivel de capacidad de un área de
proceso

Requisitos –Clasificación,Objetivos
 El método deberá clasificar cada objetivo específico o genérico
siguiendo las siguientes normas:
 Satisfecho: Cuando las prácticas se consideran aplicadas y la
suma de puntos débiles no tiene impacto negativo significativo
 No evaluado: Cuando los objetivos no pueden ser valorados
deacuerdo con el criterio asociado al método definido para la
suficiencia de datos
 Insatisfecho: En cualquier otro ámbito

Requisitos –Clasificación,Área Proceso
 El método deberá clasificar cada área de proceso siguiendo las
siguientes normas:
 No aplicable: Está fuera de la unidad organizativa del ámbito de
trabajo. No es clasificado
 Fuera de alcance: Está fuera del ámbito de aplicación del
modelo usado para la evaluación. No es clasificado
 No clasificado: Hay objetivos que no pueden ser valorados
según los criterios del método
 Representación gradual:
 Satisfecho: Todos los objetivos están clasificados como
quot;Satisfechosquot;
 Representación continua
 Satisfecho: El nivel de clasificación se basa en el del objetivo
con nivel más alto

Requisitos –Clasificación, Nivel Madurez
 El método deberá clasificar un nivel de madurez siguiendo las
siguientes normas:
 Representación gradual:
 Alcanzado: Todas las áreas de proceso están quot;Satisfechasquot; o
quot;No aplicablesquot;
 Representación continua
 Alcanzado: El perfil de madurez definido está en el mismo
nivel o por encima del perfil definido como meta para todas
las áreas de proceso del nivel de madurez (a excepción de
aquellos “No aplicables”)

Requisitos – Informe de resultado
 El método deberá exigir documentación y presentación de informes de
evaluación de resultados
 El método deberá exigir la presentación de la evaluación a la comunidad
constituyente
 El método deberá exigir que el acta de evaluación pueda ser
presentada para su evaluación

Contenido
¿Qué es ARC v1.2?
Requisitos
 Requisitos ARC en SCAMPI A
Conclusiones
Referencias

ARC
El método requerirá el desarrollo de un plan de evaluación que, como mínimo, especifique:
• la entrada de la evaluación
• las actividades a realizar para conducir la evaluación
• recursos y planificación temporal asignados a las actividades de la evaluación
• organización logística
• pasos a seguir para reducir el impacto de los riesgos asociados a la ejecución de la evaluación

SCAMPI
Process: Develop Appraisal Plan

Purpose: Document the results of appraisal planning including the requirements, agreements, estimates,
risks, method tailoring, and practical considerations (e.g., schedules, logistics, and contextual information
about the organization) associated with the appraisal. Obtain and record the sponsor’s approval of the
appraisal plan.

ARC
Los dos tipos de evidencias que se enumeran a continuación son indispensables para los métodos de
evaluación de clase A :
• El método obtendrá datos a través de entrevistas
• El método obtendrá datos revisando la documentación

SCAMPI
The SCAMPI A method provides for the collection and analysis of data from the following types of
objective evidence:

• documents – written information relative to the implementation of one or more model practices […]

• interviews – oral interaction with those implementing or using the processes within the organizational
unit […]

ARC
• El método deberá exigir la presentación de la evaluación de los datos requeridos por el CMMI Steward
con el propósito de presentar informes de evaluación a la comunidad constituyente

• El método deberá exigir que el acta de evaluación se prestará para la evaluación del patrocinador

SCAMPI
• Appraisal data required by the CMMI Steward is collected and reported. This data includes a subset of
the contents of the appraisal record, as well other data used by the Steward to aggregate and analyze
appraisal performance data for reporting to the community and monitoring the quality of performed
appraisals

• Upon completion of the Generate Appraisal Results process, the ratings and findings generated are
used to prepare and deliver the final appraisal results to the appraisal sponsor and organizational unit

Conclusiones
 ARC propone un conjunto de requisitos separados por clases y adaptable según los requerimientos del
método de evaluación y su aplicación en concreto para aquellos que quieren implementar un método de
evaluación de sistemas basados en niveles de madurez.
 Se puede aplicar con diferentes fines y en diferentes disciplinas, pero sobre todo para las evaluaciones y la
mejora del proceso interno y la capacidad de las organizaciones implicadas en el desarrollo de los métodos
de evaluación.
 ARC define los requisitos de esos métodos, pero no necesariamente las condiciones o limitaciones con las
que podrían aplicarse.
 Un método de evaluación pueden ser declaradas como método de evaluación ARC clase A, B, C o el. Esta
designación supone un conjunto de requisitos ARC que los desarrolladores del método se ha ocupado de
diseñar cuando se diseña un método de evaluación.
 El realizar una distinción por clases de los requisitos hace de estos requisitos muy versátiles ya que pueden
adaptarse a los métodos según las necesidades de la evaluación en concreto. En algunos casos no será
necesario realizar un método de evaluación con todos los requisitos, luego acudir a un método de Clase B o C
puede ser suficiente.
 La potencia de ARC ya que se han alineado con la ISO 15504, que es un marco normativo internacional y
proporciona un modelo para la mejora y evaluación de los procesos de desarrollo y mantenimiento de
sistemas y productos de software.
 Queremos hacer notar que la búsqueda de información relativa a ARC ha sido un poco tediosa ya que todo lo
relacionado con ARC básicamente es SCAMPI A y a veces era complicado saber si se hacía referencia a ARC o
a SCAMPI en sí. Aunque están totalmente ligados ya que SCAMPI se basa en ARC, pero no hay que
confundirlos.

Contenido
¿Qué es ARC v1.2?
Requisitos
Conclusiones
Referencias
 Bibliografía (revistas, artículos, libros, etc.)
 Grupos de trabajo
 Congresos
 Workshops
 Webs

Referencias
 Appraisal Requirements for CMMI, Version 1.2, SCAMPI Upgrade Team, CMU/SEI-2006-TR-011, 2006
 International Organization for Standardization & International Electrotechnical Commission.
Information Technology: Software Engineering -- Process Assessment. Part 2, Performing an Assessment
(ISO/IEC 15504-2: 2003). Geneva, Switzerland, 2003.
 STSC CrossTalk, <http://www.stsc.hill.af.mil/index.html>
 Systems Engineering, John Wiley & Sons Inc, ISSN: 1098-1241
 Appraisal Requirements for CMMI, Books On Line:
<http://my.safaribooksonline.com/9780321564276/ch09?portal=informit>
 Practical Support for CMMI-SW Software Project Documentation Using IEEE Software Engineering
Standards. Susan K. Land, John W. Walz. Wiley-IEEE Computer Society 978-0471738497
 Handbook for Conducting Standard CMMI Appraisal Method for Process Improvement (SCAMPI) B and C
Appraisals, version 1.1. Carnegie-Mellon Univ. 2005
 Appraisal Method for Process Improvement (SCAMPISM ) A, Version 1.2: Method Definition Document

 Software Engineering Institute, <http://www.sei.cmu.edu/>, 2008
 ISO Spice, <http://www.isospice.com/pages/About.html>, 2008
 CMMI User Group, http://www.capability-users.com/

Referencias
 4th World Congress for Software Quality, Hyatt Regency, Bethesda, Maryland, September 15-18, 2008,
<http://www.asq.org/conferences/wcsq/index.html>
 The 8th International Conference on Quality Software, Oxford, UK, 12–13 August 2008 ,
<http://cms.brookes.ac.uk/staff/HongZhu/QSIC2008/>
 The Third International Workshop on Integration of Software Engineering and Agent Technology, 2008,
<http://iseat2008.amss.ac.cn/>
 CMMI Practical Conference, 2008 <http://www.cmminews.co.uk/2008/conference.asp>
 SEPG Europe: Performance Improvement through Process and Workforce Capability, Prague 9-12 June
<http://www.sei.cmu.edu/sepgeurope/2009/>
 Software Engineering and Advanced Applications, 2006. SEAA '06. 32nd EUROMICRO Conference on

 6th Annual CMMI Workshop, Vancouver, WA on October 27-29 2008,
<http://www.sei.cmu.edu/appraisal-program/workshop/index.html >

Referencias
 Classes of Appraisal, <http://www.sei.cmu.edu/appraisal-program/appraisal-
classes.html#characteristics>, 2008
 CMMI, <http://es.wikipedia.org/wiki/CMMI>, 2008
 CMMI 1.2 Un Nuevo enfoque <http://pfsanchez.blogspot.com/2006/08/cmmi-12-y-su-nuevo-
enfoque.html>
 Evaluaciones de los modelos CMMI
<http://www.monografias.com/trabajos57/modelo-calidad-cmmi/modelo-calidad-cmmi2.shtml#xeval>

GRACIAS

Appraisal Requirements for CMMI,
Version 1.2 [ARC v1.2] 2008

Autores:
Enrique María Arjonilla Cobreros
Jorge Calvillo Arbizu
Manuel Jesús Domínguez Morales
Ramiro Romero Arjona
Ángel Jesús Varela Vaca

Appraisal Requirements For CMMI

Recomendados

Recomendados

Más contenido relacionado

La actualidad más candente

La actualidad más candente (20)

Destacado

Destacado (15)

Similar a Appraisal Requirements For CMMI

Similar a Appraisal Requirements For CMMI (20)

Último

Último (20)

Appraisal Requirements For CMMI