C03 · Design Verification

하나의 Requirement에서 정상 동작뿐 아니라 Error, Boundary, Reset, Concurrent Access 같은 Test Scenario 후보를 어떻게 넓혀볼 수 있을까요?

직접 답변

Quick Reference

Requirement와 Interface/Error/Reset 조건에 실제로 적힌 동작을 기준으로 Scenario 후보 확장. AI는 조합을 제안할 수 있지만 문서에 없는 Expected Result를 만들지 않고 Clarification으로 남겨야 함.

Engineering Context와 확인 절차

첫 Prompt

“REQ와 관련 Interface/Error/Reset spec에서 명시된 condition과 expected behavior를 추출한 뒤 normal/error/boundary/reset/concurrency Scenario 후보를 만들어 주세요. 각 후보에 근거 Source를 붙이고 expected result가 없으면 미확인으로 남겨 주세요.”
Detailed Guide

1. 명시된 Condition을 먼저 추출.
Prompt 1
“Requirement와 관련 Spec에서 trigger, precondition, input range, error behavior, reset/power condition을 정리해 주세요.”
Validity Gate
Expected Behavior가 정의되지 않은 조합은 Test Intent로 확정하지 않음.
2. 기존 Testplan과 Gap을 비교.
Prompt 2
“확인된 condition을 기존 Testplan과 비교해 이미 cover된 Scenario와 추가 검토할 Gap 후보를 구분해 주세요.”
Expected Output / Branch
- 근거가 있는 Gap이면: Scenario 후보로 제시.
- 동작 정의가 없으면: Clarification 질문으로 유지.

Deep Dive

Flow Overview

  1. Requirement에서 Source로 확인된 Test 조건과 Expected Behavior를 고정.
  2. Scenario 후보와 기존 Coverage Gap 구성.
  3. 승인된 Scenario와 실행 후보 분리.
  4. 승인된 Scenario를 기존 Test 경로로 실제 실행하고 Result 검증.
Workflow Unit 1 — Requirement에서 Source로 확인된 Test 조건과 Expected Behavior를 고정.
Input

Requirement, Interface/Error/Reset/Power Spec의 trigger, precondition, range, error/reset/concurrency condition임.

Prompt / Action
“각 조건에 Source에 명시된 Expected Behavior와 적용 revision을 연결하고 누락 / 충돌을 표시해 주세요.”
Expected Output

확인된 조건-동작 조합과 추가 확인 후보.

Validation

동작 정의가 없거나 Source가 충돌하는 조합은 Test Intent로 확정하지 않음.

Established State

확인된 조건-동작 조합만 Scenario 후보 구성의 Input.

Workflow Unit 2 — Scenario 후보와 기존 Coverage Gap 구성.
Prompt / Action
“확인된 조건-동작 조합을 normal/error/boundary/reset/concurrency 축으로 조합하고 Testplan/Test/Assertion과 Trace해 검증됨 / 일부 검증 / 미검증 후보로 나눠 주세요.”
Expected Output

Source로 근거가 확인된 Scenario 후보와 Coverage Gap.

Validation

AI가 문서에 없는 Expected Result를 생성하지 않고 Test 이름 유사성만으로 coverage를 인정하지 않음.

Established State

의미가 확인된 미검증 후보만 Verification Review의 Input.

Workflow Unit 3 — 승인된 Scenario와 실행 후보 분리.
Input

Verification Owner가 승인한 Test Intent/Scenario와 existing generator/template/regression path임.

Prompt / Action
“승인된 Scenario를 현재 Baseline에서 실행할 기존 Test/Generator 경로, 정확한 Config, 예상 Evidence와 실행 승인을 확인해 주세요.”
Expected Output

`Scenario 승인 + 실행 준비 완료` 또는 절차 적용 가능성 확인 / 승인 필요.

Validation / Stop

Candidate를 승인된 Test Intent로, 준비 상태를 실행 완료로 승격하지 않음. 필요한 Gate가 없으면 Stop.

Established State

승인된 Scenario + 정확한 Baseline + 적용 가능성과 실행 승인이 확인된 기존 Test 경로만 실행 Input.

Workflow Unit 4 — 승인된 Scenario를 기존 Test 경로로 실제 실행하고 Result 검증.
Prompt / Action
“승인된 Scenario를 기존 Test/Regression 경로로 실행하고 Run ID/Command, Config/Seed/Tool, 원본 Log/Checker/Result를 실행 조건과 결과 기록으로 남겨 주세요.”
Expected Output

실제 관찰 Test Result + 실행 조건·결과 기록.

Validation

관찰 Result를 Expected Behavior Source와 정확한 조건에 대조한 뒤에만 Scenario 검증 완료 Result로 사용. 실패 발생 시 Scenario 정의 / Environment / Design Branch로 분기.

Established State

검증 완료 Scenario Result만 Requirement/Testplan Evidence의 Input.

Human Decision / History

Verification Owner가 최종 Test Intent/Scope와 Result validity를 승인하고 trace/evidence를 갱신.

Engineer / Owner 판단 경계

Human Decision / History

Verification Owner가 최종 Test Intent/Scope와 Result validity를 승인하고 trace/evidence를 갱신.

AI Review ≠ Engineer Verification. Verification ≠ Qualification ≠ Sign-off. 최종 Decision authority는 Human / Owner에게 있습니다.

관련 Technical과 Evidence

DMA / SAR ADC Requirement·Test Plan Review Evidence에서 독립 Demo의 입력·결과·한계를 확인할 수 있습니다. 이 질문의 Workflow가 Demo에서 모두 실행·검증되었다는 뜻은 아닙니다.

같은 질문을 Questions에서 보기 · SoC 개발 AI 활용 Guide