ISO/IEC 33001:2015는 프로세스 평가(process assessment)를 조직 단위의 프로세스를 프로세스 평가 모델에 견주어 규율 있게 평가하는 일로 정의한다.[1] ASPICE 4.1은 같은 꼴로, 조직 단위의 제품 개발 프로세스를 프로세스 평가 모델에 견주어 규율 있게 평가하는 일로 정의한다.[2]
평가의 요소
ISO/IEC 33001:2015는 평가에 관여하는 역할을 다음처럼 정의한다.[1]
- 평가 의뢰자(assessment sponsor): 평가를 요구하고 그 비용이나 다른 자원을 대는 개인이나 주체. 평가받는 조직 단위의 안에 있을 수도 밖에 있을 수도 있다.
- 평가 팀(assessment team): 프로세스 평가를 함께 수행하는 한 명 이상의 사람.
- 평가자(assessor): 프로세스 속성의 평정에 참여하는 사람.
- 선임 평가자(lead assessor): 평가를 수행하고, 프로세스 평가가 요구에 맞는지 감시하고 검증할 역량을 보인 평가자.
- 평가 기관(assessment body): 평가를 수행하는 기관. 조직 전체일 수도 조직의 일부일 수도 있다.[1]
평가의 대상과 범위, 입력과 출력은 다음처럼 정의한다.[1]
- 조직 단위(organizational unit): 일관된 사업 목표 아래 하나 이상의 프로세스를 배치하는, 조직의 식별된 일부. 평가 범위의 바탕이 되고, 작은 조직에서는 조직 전체가 조직 단위일 수 있다.
- 평가 범위(assessment scope): 평가의 경계. 조직 단위의 경계, 포함할 프로세스, 프로세스마다 평가할 품질 수준, 프로세스가 운용되는 맥락을 아우르고, 평가 입력의 일부로 주어진다.
- 평가 입력(assessment input): 프로세스 평가를 시작하기 전에 필요한 정보. 평가 중에 바뀔 수 있다.
- 평가 출력(assessment output): 평가가 낸 유형의 결과 전부.
- 평가 기록(assessment record): 평가에 관련되고, 평가가 낸 process profile을 이해하고 검증하는 데 보탬이 되는 정보를 정리해 문서화한 모음.
- 프로세스 인스턴스(process instance): 프로세스를 한 번 구체적으로, 식별할 수 있게 실행한 것.
- 프로세스 맥락(process context): 평가 입력에 문서화되어, 프로세스 속성 평정의 판단, 이해, 비교 가능성에 영향을 주는 요인의 집합.[1]
평가가 판단의 근거로 삼는 것과 평가 결과의 꼴은 다음처럼 정의한다.[1]
- 객관적 증거(objective evidence): 무엇이 있다는 것이나 참이라는 것을 뒷받침하는 데이터. 관찰, 측정, 시험 같은 수단으로 얻는다.
- process profile: 평가한 프로세스 하나의 프로세스 속성 평정 집합.
- target process profile: 요구되는 프로세스에 어떤 프로세스 속성이 필요하고, 속성마다 어떤 평정이 필요한지 정한 process profile.[1]
프로세스 모델
이 표준은 평가가 쓰는 프로세스 모델과 그 구성 요소를 다음처럼 정의한다.[1]
- 프로세스 참조 모델(process reference model): 한 적용 도메인의 프로세스를 프로세스 목적과 결과로 정의하고, 프로세스 사이의 관계를 기술하는 아키텍처를 함께 담은 모델.
- 프로세스 평가 모델(process assessment model): 하나 이상의 프로세스 참조 모델을 바탕으로, 정한 프로세스 품질 특성을 평가하는 목적에 맞춘 모델. 프로세스 능력을 다루는 프로세스 평가 모델은 process capability assessment model이라 부를 수 있다.
- 프로세스 차원(process dimension): 프로세스 평가 모델 안에서, 관련 프로세스 참조 모델이 정의한 프로세스에 명시적으로 연결된 프로세스 요소의 집합.
- 평가 지표(assessment indicator): 평가자가 프로세스 속성을 평정할 때 판단을 받치는 객관적 증거의 원천. 예: 프랙티스, 정보 항목, 자원.
- base practice: 꾸준히 수행하면 특정 프로세스 목적을 이루는 데 기여하는 활동.
- generic practice: 꾸준히 수행하면 지정된 프로세스 속성을 이루는 데 기여하는 활동.[1]
ASPICE의 두 모델은 ASPICE 프로세스 참조 모델과 ASPICE 프로세스 평가 모델에서 다룬다.
평가 수행의 요구
ISO/IEC 33002:2015는 평가 결과가 객관적이고, 일관되고, 반복 가능하고, 평가한 프로세스를 대표하도록 보장하는 평가 수행의 최소 요구를 정한다. 이 표준은 모든 적용 도메인과 모든 규모의 조직에 적용된다.[3]
이 표준은 프로세스 평가를 적용하는 상황으로 셋을 든다. 조직이 프로세스 개선을 위해 자기 프로세스의 상태를 이해하려는 경우, 특정 요구에 자기 프로세스가 알맞은지 판단하려는 경우, 특정 목적이나 계약에 다른 조직의 프로세스가 알맞은지 판단하려는 경우다. 평가는 그 조직이 하거나 조직을 대신해 할 수 있다.[3]
이 표준의 요구는 자기 평가를 돕고, 프로세스 수행 개선과 프로세스 관련 리스크 완화의 바탕을 주며, 해당 프로세스 품질 특성의 달성 평정을 내고, 조직 사이의 객관적 벤치마크를 주는 데 쓸 수 있다.[3]
ISO/IEC 33001:2015는 평가 결과를 프로세스 수행 개선, 벤치마킹, 프로세스 적용에 따르는 리스크의 식별과 대응에 쓸 수 있다고 둔다.[1]
ISO/IEC 330xx 계열
ISO/IEC 33001부터 ISO/IEC 33099까지의 표준은 ISO/IEC 330xx 계열을 이루고, 이 계열은 프로세스 평가에 필요한 요구와 자원을 정한다. 이 계열은 구현된 프로세스에서 나온 객관적 증거를 바탕으로 어떤 종류의 프로세스 품질 특성이든 평가하는 틀이다. 정보 기술 분야에서 시스템의 개발, 유지보수, 사용에 쓰는 프로세스와, 서비스의 설계, 전환, 인도, 개선에 쓰는 프로세스를 다룬다.[1]
계열의 앞 번호 표준이 다루는 것은 다음과 같다.
| 표준 | 다루는 것 |
|---|---|
| ISO/IEC 33001:2015 | 프로세스 평가의 개념과 용어. 계열의 구성과 표준마다의 쓰임을 소개한다.[1] |
| ISO/IEC 33002:2015 | 프로세스 평가 수행의 요구.[4] |
| ISO/IEC 33003:2015 | 프로세스 평가에 쓰는 프로세스 측정 프레임워크의 요구. 측정 프레임워크의 요구와 그 검증의 요구, 도메인을 가로지르는 복합 척도를 짓는 측정 프레임워크에 두루 걸리는 요구를 정한다.[5] |
| ISO/IEC 33004:2015 | 프로세스 참조 모델, 프로세스 평가 모델, 성숙도 모델의 요구.[6] |
| ISO/IEC 33020:2019 | 프로세스 능력을 평가하는 프로세스 측정 프레임워크. 이 프레임워크로 프로세스 능력 수준을 끌어낸다.[7] |
| ISO/IEC TR 33014:2013 | 프로세스 개선 지침.[8] |
ISO/IEC 33004:2015의 요구는 평가에 관련된 프로세스 모델 부류 사이의 관계, 프로세스 참조 모델과 ISO/IEC 12207·ISO/IEC 15288의 활동·태스크 같은 규범적 프로세스 모델 사이의 관계를 정한다. 프로세스 참조 모델과 측정 프레임워크를 합쳐 프로세스 평가 모델을 세우는 일, 프로세스 평가 모델이 쓰는 공통 평가 지표, 성숙도 모델과 프로세스 평가 모델의 관계와 여러 프로세스 평가 모델의 요소로 성숙도 모델을 지을 수 있는 정도도 다룬다.[6]
ISO/IEC 15504와의 관계
ISO/IEC 33001:2015는 330xx 계열의 여러 표준이 ISO/IEC 15504 시리즈의 여러 부를 대체하고 넓히도록 만들어졌다고 두고, 두 계열의 관계를 Annex A에 둔다.[1] ISO 카탈로그는 이렇게 이어진 판을 다음처럼 보인다.
- ISO/IEC 33001:2015는 ISO/IEC 15504-1:2004와 ISO/IEC TR 15504-7:2008을 이었다.[9]
- ISO/IEC 33002:2015, ISO/IEC 33003:2015, ISO/IEC 33004:2015는 ISO/IEC 15504-2:2003과 그 Cor 1:2004, ISO/IEC TR 15504-7:2008을 이었다.[4][5][6]
- ISO/IEC TR 33014:2013은 ISO/IEC TR 15504-7:2008을 이었다.[8]
ISO/IEC 33001:2015는 ISO/IEC 15504-1:2004를 기술적으로 고쳐 대체했다.[1] ISO/IEC 33002:2015는 ISO/IEC 15504-2:2003과 ISO/IEC TR 15504-7:2008의 몇 절을 기술적으로 고쳐 대체했다.[3] ISO/IEC 33020:2019는 ISO/IEC 15504-2:2003의 5절을 대체하도록 만들어졌다.[7]
ISO/IEC 15504-5:2012의 소프트웨어 생명주기 프로세스 평가 모델 예시는 ISO/IEC TS 33061:2021로 이어졌다.[10] 두 문서의 관계는 ISO/IEC/IEEE 12207의 TS 33061과의 관계 절에서 다룬다.
ASPICE 평가
이 절은 ASPICE로 하는 평가의 평정 방법, 지침서, 평가자 인증, 결과 등록을 다룬다.
평정 방법
ASPICE 4.1은 ISO/IEC 33020:2019가 정한 평정 방법 셋을 가져온다.[2]
- R1: 평가 범위 안 프로세스마다, 프로세스 성과와 프로세스 속성 성과를 프로세스 인스턴스마다 검증된 데이터로 특성화한다. 모든 인스턴스의 프로세스 성과 특성화를 모아 프로세스 수행 속성의 달성 평정을, 프로세스 속성 성과 특성화를 모아 프로세스 속성의 달성 평정을 낸다.
- R2: 프로세스 속성을 프로세스 인스턴스마다 검증된 데이터로 특성화하고, 모든 인스턴스의 특성화를 모아 프로세스 속성의 달성 평정을 낸다.
- R3: 평가한 프로세스 인스턴스들을 모으지 않고 프로세스 속성을 평정한다.[2]
어느 평정 방법을 쓸지는 평가의 class, 범위, 맥락에 따라 선임 평가자가 정하고, 고른 방법을 평가 입력에 적고 평가 보고서에서 가리킨다. 평정을 모으는 방법은 한 프로세스 안에서 모으는 수직 집계(1차원), 여러 프로세스 인스턴스에 걸쳐 모으는 수평 집계(1차원), 둘을 함께 하는 행렬 집계(2차원)로 나뉘고, 평가의 class, 범위, 맥락에 따라 고른다.[2]
이 프로세스 평가 모델은 프로세스 속성과 그 평정이 측정 프레임워크의 것과 같아서, 평가 결과는 다른 꼴로 바꾸지 않고 평가 범위 안 프로세스마다의 프로세스 속성 평정 집합으로 바로 나타난다.[2] 평정 척도와 능력 수준을 끌어내는 규칙은 프로세스 능력 수준의 등급 척도와 수준 달성 판정 절에서 다룬다.
ASPICE Guidelines
VDA QMC는 ASPICE 4.1의 프로세스 평가 모델로 하는 평가의 지침으로 ASPICE Guidelines 3판(2026년 7월)을 인쇄본으로 펴낸다.[11] 이 판은 “Blue-Gold Book”이라 불린 ASPICE Guidelines 2판을 대체한다. 1부는 해석과 평정의 규칙을, 2부는 평가 수행의 요구와 평가자 자격의 요구를 담는다.[12]
평가자 인증
VDA QMC는 인증 사무국(Certification Office)을 두고 ASPICE 평가자를 인증하는 유일한 인원 인증 기관으로, 평가자 시험과 그 뒤의 인증 과정을 맡는다. 인증은 intacs의 체계를 따른다.[13]
인증의 첫 단계는 Provisional Assessor다. intacs에 등록된 교육 기관의 교육을 받고 VDA QMC의 시험에 붙어야 하며, 자동차 분야의 소프트웨어 기반 시스템 개발 경력이 24개월 이상이어야 한다. Competent, Principal, Instructor 같은 상위 단계는 선임 평가자(lead assessor)라 불리고, 경험 증명을 계속 갱신해야 한다. 인증은 3년 동안 유효한 평가자 라이선스로 증명하고, 만료되면 갱신해야 한다.[13]
intacs는 인증 단계를 Process Expert, Provisional Assessor, Competent Assessor, Principal Assessor, Instructor(provisional level, competent level)로 두고, 평가를 이끄는 것은 Competent Assessor부터 할 수 있게 한다. 자동차 분야에서 평가자를 인증하고 교육 기관을 인정하는 기관은 VDA QMC다.[14]
평가 등록
VDA QMC는 2026년 1월부터 평가 등록 절차를 두어, 등록한 평가 기관이 ASPICE 상표와 로고를 써서 평가 결과의 Certificate of Achievement를 발급할 수 있게 한다. 인증서에는 선임 평가자와 평가 기관 대표가 서명한다.[15]
등록할 수 있는 평가는 다음 조건을 채워야 한다.[15]
- 평가 팀에 선임 평가자 한 명과 공동 평가자(co-assessor) 한 명 이상이 있다.
- 선임 평가자는 intacs ASPICE Competent Assessor 이상이고, 공동 평가자는 Provisional Assessor 이상이며, 팀원의 intacs 라이선스는 평가 기간 내내 유효하다.
- 평가는 ASPICE 4.0 이상의 프로세스 평가 모델에 바탕을 둔다.
- 자기 평가가 아니다. 평가 기관은 평가받는 조직과 독립된 법인이어야 한다.[15]
인증서에는 평가받은 조직과 평가한 프로젝트의 약칭, 평가 범위가 들어가고, 적는 능력 수준은 평가 범위 안 모든 프로세스의 능력 수준 가운데 가장 낮은 값이다. 예를 들어 거의 모든 프로세스가 수준 3이고 몇 개만 수준 2면 수준 2의 인증서가 된다. 좋은 평가 결과도 그 유효성은 평가한 프로젝트로 한정된다.[15]