AI Process Console

TEST

근거: DEMO
최근 관찰: 2026-08-20 00:00

단계별 처리 결과

08-18 · 초안 생성 · 차단 3/5건 (60%)

통과: 2
차단: 3

강조된 문제 지점을 선택해 문제 상세를 확인하세요.

분석 가능한 근거

완료 구간 표본: 35
추세 비교: 0 / 30
가드레일 평가: 100%
데이터 품질 알림: 0

조건을 바꿔 결과 비교하기

차단된 사례의 근거를 확인하고, JSON을 수정해 결과를 비교해 보세요. 데모 데이터로 실행됩니다.

우선 확인할 문제 3건

문제를 선택해 발생일과 영향 범위를 확인한 뒤, 조사 화면에서 원인을 살펴보세요.

이벤트 선택 후 확인

프로젝트

프로젝트: presstuner-demo
근거 출처: DEMO
환경: demo

프로세스

분석 대상 프로세스: press-creation@3.3.0
실행 모드: TEST
정의 해시: 6d4d4113…5adc

분석 기간

기간: 7D
구간: 2026-08-13 00:00 — 2026-08-20 00:00
최근 도메인 관찰: 2026-08-20 00:00
최근 출처 수집: 사용 불가
생성 시각: 2026-08-20 00:00

보조 출처

LANGSMITH사용 불가
POSTHOG사용 불가

분석 준비 상태: 6 / 6

공개된 여섯 가지 검사이며 불투명한 상태 점수가 아닙니다.

SCOPE_REGISTEREDREADY · 준비됨
DOMAIN_METADATA_COMPLETEREADY · 준비됨
OPERATION_JOIN_READYREADY · 준비됨
AUTHORED_TOPOLOGY_READYREADY · 준비됨
GUARDRAIL_DECLARATIONS_READYREADY · 준비됨
ISOLATED_FIXTURE_READYREADY · 준비됨

기존 누적 전체 시도 품질은 요청 흐름에서 보조 정보로 계속 제공됩니다.

초안 평가 실험

같은 초안, 두 가지 평가

합성 예시 · 실제 품질 측정 아님

근거 충실도와 작성 요구 충족도를 함께 확인합니다. 이 보고서는 선택한 프로세스 실행의 성공률과 별개입니다.

사례와 반복 실행

사람 검토 대기
검토 항목 0/20 · 생성 결과 4/4

품질 분석과 개선 제안

관측된 문제에서 제안을 만들고 별도 사례로 효과를 확인합니다. 제안은 검증할 가설이며 자동 적용하지 않습니다.

평가기 신뢰도 점검

사람과 일치 / 비교 가능: —

사람이 지적한 결함 탐지: —

검토한 표본의 진단입니다. 우선 검토한 사례의 결과를 전체 정확도로 일반화하지 않습니다.

변경 효과의 불확실성

개발 사례 · 비교 원문 2/2 · 제외 0

Ragas 평균 차이: 0.000

독립 원문 10개 미만 · 구간 추정 보류

같은 원문의 반복을 묶어 계산합니다. 합성 입력의 조건부 통계입니다.

자동 판정 · 확인 전

필수 정보 누락 줄이기

관측 수: 2 초안

필수 사실 목록을 작성 전후에 대조하도록 생성 지침을 추가하세요.

검증 방법: 누락·동의 표현·수치 변경 사례에서 충족률과 오탐을 비교하세요.

측정 진단

독립 사례 확보

관측 수: 2 원문

다양한 사용 맥락의 입력을 추가하고 개발/별도 평가 사례를 미리 나누세요.

검증 방법: 비교 원문 수, 제외 수와 구간 폭을 함께 확인하세요.

오류 유형별 빈도와 95% 구간

원문에서 한 번이라도 자동 위반 판정이 나온 비율입니다. 모든 반복을 판정한 원문만 분모에 포함합니다. 판단 불가 원문은 별도로 표시하며 구간은 평가기의 정확도를 의미하지 않습니다.

분할 / 설정	항목	위반 / 평가 원문	95% 구간
DEVELOPMENT / BASELINE	사실 근거	0/2	0.0% ~ 65.8%
DEVELOPMENT / BASELINE	필수 정보	0/2	0.0% ~ 65.8%
DEVELOPMENT / BASELINE	예시 오염	0/2	0.0% ~ 65.8%
DEVELOPMENT / BASELINE	근거 없는 과장	0/2	0.0% ~ 65.8%
DEVELOPMENT / BASELINE	문체	0/2	0.0% ~ 65.8%
DEVELOPMENT / CANDIDATE	사실 근거	0/2	0.0% ~ 65.8%
DEVELOPMENT / CANDIDATE	필수 정보	2/2	34.2% ~ 100.0%
DEVELOPMENT / CANDIDATE	예시 오염	0/2	0.0% ~ 65.8%
DEVELOPMENT / CANDIDATE	근거 없는 과장	0/2	0.0% ~ 65.8%
DEVELOPMENT / CANDIDATE	문체	0/2	0.0% ~ 65.8%

기성 평가

Ragas Faithfulness

작성된 주장에 제공된 사실 근거가 있는가

근거가 있는 주장 / 전체 주장 · 0–1

작성된 정상 사례1.000평가 완료

작성된 비교 사례1.000평가 완료

높은 점수가 필수 정보의 완전성이나 문체 충족을 보장하지 않습니다.

도메인 평가

PressTuner 요구사항

핵심 사실과 작성 요구를 함께 지켰는가

내용 오류 BLOCK · 문체 위반 WARN · 판단 불가 별도 표시

작성된 정상 사례PASS평가 완료

작성된 비교 사례BLOCK평가 완료

항목별 판정
평가 항목	작성된 정상 사례	작성된 비교 사례
사실 근거	PASS	PASS
필수 정보 보존	PASS	FAIL
예시 사실 오염 방지	PASS	PASS
근거 없는 과장 방지	PASS	PASS
요청 문체	PASS	PASS

두 결과는 서로 다른 기준이며 합산하지 않습니다. 원문·근거 인용·상세 판정 이유는 프로젝트의 평가 보고서에서 확인합니다.

측정 범위와 버전

초안 출처: AUTHORED
데이터 파티션: DEVELOPMENT
기록 시각: 2026-10-06T07:52:01.232Z
Ragas / 요구사항: 0.4.3 / press-requirements/v1
평가 모델: synthetic-fixture
판정 상태: NOT_EVALUABLE
사람과의 일치율: —

분모가 없으면 —로 표시합니다. 소수의 합성 사례로 전체 제품 품질을 일반화하지 않습니다.