소매 회사의 GenAI 제품 추천 애플리케이션(Amazon Bedrock 사용)이 인구통계 그룹 간 편향을 측정해야 합니다. 15% 이상의 불공정 메트릭 차이가 발생하면 알림을 받고, 매주 두 프롬프트 접근법의 성능을 비교하는 보고서를 받아야 합니다. 커스텀 개발 노력이 최소화되는 솔루션은 무엇입니까?
- A. CloudWatch 대시보드 구성, 커스텀 메트릭 생성, EventBridge/Lambda로 포스트프로세싱 분석
- B. Bedrock Prompt Management로 프롬프트 변형 생성, Bedrock Guardrails로 인구통계 공정성 모니터링
- C. SageMaker Clarify로 모델 출력 분석, CloudWatch에 공정성 메트릭 발행, CloudWatch 합성 알람으로 종합 평가 대시보드 생성✓ 정답
- D. Bedrock 모델 평가 작업으로 공정성 비교, CloudWatch 알람으로 InvocationsIntervened 메트릭 모니터링
해설
【핵심 용어】 ▸ SageMaker Clarify — 편향 감지와 공정성 메트릭 분석 전문 서비스 ▸ CloudWatch 합성 알람 — 여러 메트릭을 결합하여 종합 평가 가능 【정답 포인트】 ▸ 공정성 평가 → SageMaker Clarify 필수 ▸ 메트릭 모니터링 → CloudWatch 메트릭과 알람 ▸ Bedrock Latency와 Clarify 편향 메트릭을 합성 알람으로 결합하면 종합적 공정성 평가 대시보드 구성 【오답 체크】 (A) 커스텀 Lambda 포스트프로세싱은 개발 오버헤드 증가 (B) Guardrails는 콘텐츠 필터링용이지 공정성 평가 서비스 아님 (D) 모델 평가 작업은 일회성이며 실시간 모니터링 미지원 【시험 포인트】 공정성 메트릭 = SageMaker Clarify + CloudWatch 패턴 인식