# 로컬 AI 실습 비교 기록 — 빈 양식

이 양식은 직접 작성한 합성 입력의 실행 결과를 남기는 용도입니다. 빈 칸은 미측정입니다. 측정하지 않은 값을 추정해서 채우지 않습니다. 정답 기준과 실제 모델 출력을 구분하고, 실패한 실행도 남깁니다.

## 환경과 정확한 배포본

| 항목 | 실행 A | 실행 B |
|---|---|---|
| 실행일·시각·시간대 | | |
| 실습 또는 평가 문항 ID | | |
| 입력 파일·SHA-256 | | |
| 프롬프트 파일·SHA-256·수정 사항 | | |
| 원본 모델 ID | | |
| 변환·배포 제공자와 저장소 URL | | |
| 로컬 파일명 또는 태그 | | |
| revision·digest 또는 파일 SHA-256 | | |
| 양자화·파일 형식·파일 용량 | | |
| 모델·배포본 라이선스 URL과 확인일 | | |
| 런타임·버전·백엔드 | | |
| OS·버전 | | |
| CPU·GPU와 드라이버 | | |
| RAM·VRAM·통합 메모리 구분 | | |
| 실습 전 가용 메모리·다른 앱 사용 상태 | | |

원격 저장소 현재판과 로컬 캐시가 같은지 확인한 범위를 적습니다. `latest` 같은 별칭만으로 재현성을 주장하지 않습니다.

## 실행 조건

| 항목 | 실행 A | 실행 B |
|---|---|---|
| 문맥 길이·입력 토큰·출력 토큰 | | |
| 출력 한도·실제 종료 이유 | | |
| temperature·seed와 지원 여부 | | |
| 추론 모드·생각 토큰·노출 여부 | | |
| 동시 요청 수 | | |
| 스트리밍 사용 여부 | | |
| 첫 로딩 포함 또는 이미 적재된 상태 | | |
| 캐시 사용 여부·반복 번호 | | |
| API 스키마 사용 여부·스키마 파일 | | |
| 문서 처리·검색·임베딩·생성 실행 위치 | | |
| 네트워크 연결 상태·오프라인 시험 범위 | | |

같은 입력에서 한 조건만 바꾸면 차이의 원인을 확인하기 쉽습니다. 런타임이 제공하지 않는 토큰 수·TTFT·메모리는 미확인으로 둡니다. 스트리밍을 끈 응답의 완료 시간을 첫 출력 대기로 기록하지 않습니다.

## 결과와 원문 대조

| 항목 | 실행 A | 실행 B |
|---|---|---|
| 실제 원시 응답 파일·최종 답변 파일 | | |
| 날짜·수량·담당 내용의 일치 | | |
| 필수 업무 누락·추가 항목 | | |
| JSON 구문·필드·자료형 일치 | | |
| null 처리·없는 연도 추가 여부 | | |
| 원문 인용·문단 ID 일치 | | |
| 자료에 없는 질문의 처리 | | |
| 입력 속 지시문 실행 여부 | | |
| 최초 로딩·첫 출력·전체 완료 시간 | | |
| 생성 속도와 측정 방법 | | |
| 실행 중 최대 메모리와 측정 방법 | | |
| 오류·출력 한도 도달·빈 최종 답변 | | |

| 문항 ID | 실제 출력의 해당 구절 | 기대 기준·원문 근거 | 내용 판정 | 형식 판정 | 근거 판정 | 범위 판정 |
|---|---|---|---|---|---|---|
| | | | | | | |
| | | | | | | |
| | | | | | | |

판정은 통과·실패·미확인·해당 없음으로 기록합니다. 뜻은 맞지만 원문 인용의 띄어쓰기가 바뀐 경우 내용과 근거 복사 판정을 나눕니다. 합산 점수로 소방 업무 적합 등급을 만들지 않습니다.

## 검색 실습 추가 기록

| 항목 | 실행 A | 실행 B |
|---|---|---|
| 키워드 또는 임베딩 검색 방식 | | |
| 문서 목록·문단 분할·ID | | |
| 질문과 실제 검색어 | | |
| 검색된 문단 ID·순서·점수 의미 | | |
| 답을 담은 문단의 검색 성공 여부 | | |
| 모델에 전달한 검색 문단 전문 | | |
| 관련 없는 문단이 포함된 여부 | | |
| 임베딩 모델·revision·색인 조건 | | |

키워드 실습의 임베딩 항목은 해당 없음으로 표시합니다. 정답 문단이 검색되지 않았으면 검색 실패로, 정답 문단이 있는데 답이 틀렸으면 생성 실패로 구분합니다.

## 다음 행동

- 계속 사용할 조건:
- 실패한 문항과 원인 가설:
- 다음에 바꿀 한 가지:
- 같은 조건으로 재시험할 입력:
- 시험하지 않은 OS·장비·기능:
- 대화·첨부·색인·로그 보관 위치와 정리 결과:

한 환경의 성공을 다른 OS·모델·양자화·기관 환경의 검증으로 확대하지 않습니다. 이 기록은 실습 관측이며 기관 도입 승인이나 현장 운영 지시가 아닙니다.
