C03 · Design Verification
Verification Closure 전에 PASS 수나 Coverage 숫자뿐 아니라 Requirement, Baseline, Evidence, Open Issue와 Waiver가 충분한지 어떻게 확인하면 좋을까요?
직접 답변
Quick Reference
Closure는 숫자가 아니라 필요한 Evidence가 준비됐는지 보는 일임. Requirement Trace, Regression/Coverage Result, Baseline, Open Issue, Waiver와 해당 Waiver의 적용 조건을 확인하고, Change가 있었다면 적용 가능성을 우선 재확인.
Engineering Context와 확인 절차
첫 Prompt
“DV Closure Criteria에서 필요한 Evidence를 추출하고 Requirement Trace, Regression/Coverage Result, Baseline, Open Issue/Waiver를 연결해 확인 / 누락 / 충돌 / Review 필요로 정리해 주세요.”
Detailed Guide
1. Required Evidence를 먼저 확인.
Prompt 1
“각 Closure 항목에 실제 Source와 revision을 붙이고 PASS 수나 Coverage 수치만으로 완료를 판정하지 마세요.”
Validity Gate
Waiver나 Result의 적용 조건이 현재 Baseline과 연결되지 않으면 Closure 준비 완료로 처리하지 않음.
2. Change가 있는 항목의 적용 가능성 확인.
Prompt 2
“변경된 Design/Requirement/Config가 기존 Waiver/Evidence의 의미에 영향을 주는지 확인하고 자동으로 유효하지 않다고 처리하지 마세요.”
Expected Output / Branch
- 적용 가능성이 확인되면: 기존 Evidence로 유지 가능.
- 영향/불명확성이 있으면: Review 대상으로 유지.
Deep Dive
Flow Overview
- DV Closure Criteria와 기존 Evidence를 항목별로 정리.
- 기존 Evidence 재사용과 필요한 범위의 re-check 필요성을 분리.
- Re-check가 필요한 Branch에서만 실제 실행으로 새 Evidence 생성.
- 기술 Evidence와 Closure/Waiver/Risk Decision 분리.
Workflow Unit 1 — DV Closure Criteria와 기존 Evidence를 항목별로 정리.
Input
Closure Criteria, Requirement Trace, Regression/Coverage Result, Baseline, Open Issue/Waiver와 적용 조건.
Prompt / Action
“각 Closure 항목의 정확한 Source/revision과 현재 Evidence를 연결해 확인 / 누락 / 충돌 / 적용 가능성 Review 필요로 정리해 주세요.”
Expected Output
확인된 Closure Evidence 정리.
Validation
PASS count/coverage percentage와 AI Output을 required evidence 자체로 사용하지 않음.
Established State
확인된 Evidence 정리만 Change/적용 가능성 Review의 Input.
Workflow Unit 2 — 기존 Evidence 재사용과 필요한 범위의 re-check 필요성을 분리.
Prompt / Action
“변경된 Design/Requirement/Config와 각 Evidence/Waiver의 직접 연결을 확인해 기존 유효 후보 / 필요한 범위의 re-check 후보 / 연결 확인 필요로 나눠 주세요.”
Expected Output
근거 기록이 유지된 재사용/re-check 분류.
Validation
Change만으로 Evidence를 유효하지 않다고 처리하지 않고, Regression/Checker 절차 적용 가능성과 실행 승인을 별도 확인.
Established State / Branch
re-check 불필요 Branch와 re-check 필요 Branch를 분리. 연결 확인 필요는 Owner/Source 확인에서 Stop.
Workflow Unit 3 — Re-check가 필요한 Branch에서만 실제 실행으로 새 Evidence 생성.
Branch A — 기존 Evidence 유지: 정확한 Baseline/조건을 다시 검증해 적용 가능성이 확인되면 `기존 유효 Evidence`로 정리에 유지하고 새 Result를 만들지 않음.
Branch B — Re-check 필요: Verification Owner가 필요한 범위를 결정한 뒤 정확한 Baseline/Config + 적용 가능성이 확인된 절차 + 실행 승인을 확인. 불명확하면 `실행 후보 / 승인 필요`에서 Stop.
Prompt / Action
“승인된 범위에서 기존 Regression/Checker를 실행하고 Run ID/Command, RTL/TB/Config/Tool/Seed, 원본 Log/Report/Result 위치를 실행 조건과 결과 기록으로 남겨 주세요.”
Expected Output
원본 re-check Result + 실행 조건·결과 기록.
Validation
원본 Result를 예상 Criteria와 정확한 Baseline에 대조한 뒤에만 `새 검증 완료 Evidence`로 사용. 실행 완료와 검증 완료를 구분.
Established State
Closure Evidence 정리에는 기존 유효 Evidence와 새 검증 완료 Evidence가 서로 다른 근거 기록으로 반영.
Workflow Unit 4 — 기술 Evidence와 Closure/Waiver/Risk Decision 분리.
Re-entry
새 Result가 conflict를 만들면 해당 evidence condition/relation 단계로 복귀.
Human Decision / History
Verification Owner가 기술 Evidence/Result 유효성을 검토하고 실제 Closure, Waiver 승인, Risk Acceptance의 각 결정 주체가 각각 Decision. 정확한 Baseline, 기존/새 Evidence, 예외, 남은 Risk, Decision을 Closure Snapshot으로 보존.
Engineer / Owner 판단 경계
Human Decision / History
Verification Owner가 기술 Evidence/Result 유효성을 검토하고 실제 Closure, Waiver 승인, Risk Acceptance의 각 결정 주체가 각각 Decision. 정확한 Baseline, 기존/새 Evidence, 예외, 남은 Risk, Decision을 Closure Snapshot으로 보존.
AI Review ≠ Engineer Verification. Verification ≠ Qualification ≠ Sign-off. 최종 Decision authority는 Human / Owner에게 있습니다.
관련 Technical과 Evidence
DMA / SAR ADC Requirement·Test Plan Review Evidence에서 독립 Demo의 입력·결과·한계를 확인할 수 있습니다. 이 질문의 Workflow가 Demo에서 모두 실행·검증되었다는 뜻은 아닙니다.
