{
  "cells": [
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "# 📋 [TRN06] AAR 관찰·평가 루브릭과 피드백 가이드\n",
        "### 실습 워크북 & SOP 가이드 (Google Colab / Jupyter)\n",
        "\n",
        "[![Open In Colab](https://colab.research.google.com/assets/colab-badge.svg)](https://colab.research.google.com/github/edunlab/milicontent2/blob/main/uploads/TRN06/TRN06_workbook.ipynb)\n",
        "\n",
        "---\n",
        "\n",
        "## 📌 1. 프로젝트 개요 및 배경\n",
        "\n",
        "| 항목 | 내용 |\n",
        "| :--- | :--- |\n",
        "| **과정 분류** | 교육·훈련 (Level 2) |\n",
        "| **학습 소요 시간** | 10개 미션 (5일 / 총 27.0시간) |\n",
        "| **실습 유형** | 작전절차(SOP), 체크리스트, 모의훈련, AAR 사후검토 실습 |\n",
        "\n",
        "### 📖 프로젝트 목표\n",
        "러시아-우크라이나 전쟁과 미국-이란 간 긴장 국면에서는 소부대가 짧은 시간에 전술을 익히고 실전에서 얻은 교훈을 곧바로 훈련에 되먹임해야 했고, 그 중심에 AAR(사후검토)이 있었다. 그러나 관찰관마다 평가 기준이 다르고 인상에 따라 점수가 갈리며 피드백이 '잘했다, 부족하다'에 그치면 훈련 효과는 흩어진다. 본 프로젝트에서는 교육용 가상 소부대 훈련과 가상 훈련 로그를 사용해 관찰관(O/C)의 평가 체계 분석, 전술 행동·의사결정·팀워크·보고 절차를 포괄하는 4단계 평가 루브릭과 관찰 근거 6단계 설계, 편향을 줄이는 관찰 가이드라인, 로그 기반 1차 평가지 작성, 사실에 기반한 피드백 대화 스크립트와 코칭 가이드, 평가자 간 점수 편차 스트레스 테스트, 관찰관 주관 개입 사례 분석과 척도 보정, 모의 AAR 재실행과 코칭 효과 검증을 차례로 수행한다. 최종 목표는 근거·책임 직책·기록 요건이 분명한 AAR 관찰·평가 루브릭 및 피드백 표준 가이드북을 문서로 완성하는 것이다.\n",
        "\n",
        "> **⚠️ [교육용 가상 자료 원칙]**\n",
        "> - 본 워크북의 모든 자료는 안전 규정에 따라 **교육용 가상 자료**로 구성되어 있습니다.\n",
        "> - 실제 군사 기밀이나 부대 세부 인적·작전 정보는 포함되지 않습니다.\n",
        "\n",
        "---\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 01. 소부대 전술 훈련 AAR 관찰관(Observer Controller)의 평가 체계 분석\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "소부대 전술 훈련 AAR 관찰관의 평가 체계 및 목표를 분석한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **소부대 전술 훈련에서 AAR 관찰관이 무엇을 어떤 목표로 평가하는지 평가 체계를 분석하고, 가이드북 전체 문서 골격을 정의한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **실습자료의 가상 AAR 평가 사례 5건을 읽고 각 사례에서 관찰관이 무엇을 평가했는지, 평가 근거가 기록되었는지, 피드백이 어떤 형태로 전달되었는지를 비교표로 정리하고 규격화하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `docs/trn06_doc_framework.md 및 분석 개요서` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "소부대 전술 훈련 AAR 관찰관(Observer Controller)의 평가 체계 분석**\n",
        "\n",
        "가. 제공 자료 - 가상 AAR 평가 사례 5건 [교육용가상자료]\n",
        "\n",
        "| **사례** | **관찰관 평가 요약** | **평가 근거 기록** | **피드백 방식** | **눈에 띄는 문제** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **C1** | '1소대 지휘 양호, 4점/5점' | 없음 | 구두 한 줄 | 기준 불명, 4점의 근거 없음 |\n",
        "| **C2** | '2소대 보고 지연, 팀워크 부족' | 시각 1건 | 구두, 소대장 앞에서 질책 | '부족'의 기준 없음, 공개 질책 |\n",
        "| **C3** | '3소대 분위기 좋음' | 인상 | 서면 평가지만 전달 | 행동 근거 없음, 피드백 대화 없음 |\n",
        "| **C4** | 같은 훈련을 본 O/C 1은 '우수', O/C 2는 '보통' | 각자 메모 | 각자 따로 피드백 | 관찰 위치와 기준이 달라 일관성 없음 |\n",
        "| **C5** | '지난번에도 늦더니 이번에도 늦음' | 과거 인상 | 구두 | 최근·과거 인상이 평가에 개입 |\n",
        "\n",
        "나. 작성 서식 1 - 관찰관 평가 체계 비교표\n",
        "\n",
        "| **평가 요소** | **사례에서 확인된 방식** | **문제점** | **보완 방법** |\n",
        "| --- | --- | --- | --- |\n",
        "| **평가 대상(무엇을 보는가)** |  |  |  |\n",
        "| **평가 기준(척도)** |  |  |  |\n",
        "| **근거 기록** |  |  |  |\n",
        "| **피드백 전달 방식** |  |  |  |\n",
        "| **기록 보관·후속 조치** |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 가이드북 목차 골격(지휘관 결심 의제 순으로 배열)\n",
        "\n",
        "| **순서** | **장 제목** | **담을 핵심 내용** | **지휘관이 이 장에서 얻는 판단 정보** |\n",
        "| --- | --- | --- | --- |\n",
        "| **제1장** |  |  |  |\n",
        "| **제2장** |  |  |  |\n",
        "| **제3장** |  |  |  |\n",
        "| **제4장** |  |  |  |\n",
        "| **제5장** |  |  |  |\n",
        "| **제6장** |  |  |  |\n",
        "| **제7장** |  |  |  |\n",
        "| **제8장** |  |  |  |\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 가상 평가 사례 5건을 모두 검토하고 문제점을 표시했다 | ( ) |\n",
        "| 평가 체계 5개 요소 모두에 문제점과 보완 방법을 적었다 | ( ) |\n",
        "| C5처럼 과거 인상이 개입한 사례를 찾아 표시했다 | ( ) |\n",
        "| 가이드북 목차 8개 장의 제목과 핵심 내용을 정의했다 | ( ) |\n",
        "| 목차를 지휘관이 먼저 알아야 할 의제 순으로 배열하고 이유를 한 줄로 적었다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 02. 전술 행동, 의사결정, 팀워크, 보고 절차를 포괄하는 4단계 평가 루브릭 설계\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "전술 행동, 의사결정, 팀워크, 보고 절차를 포괄하는 4단계 평가 루브릭을 설계한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **전술 행동, 의사결정, 팀워크, 보고 절차를 포괄하는 4단계 평가 루브릭을 설계하고, 관찰 근거의 확인 정도를 6단계로 구분한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **평가 영역 4개(전술 행동, 의사결정, 팀워크, 보고 절차)마다 미흡·보통·우수·탁월 4단계의 판정 기준을 관찰 가능한 행동으로 쓴다 과정을 진행하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `framework/trn06_source_reliability_matrix.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "전술 행동, 의사결정, 팀워크, 보고 절차를 포괄하는 4단계 평가 루브릭 설계**\n",
        "\n",
        "가. 제공 자료 1 - 가상 관찰 기록 5종 [교육용가상자료]\n",
        "\n",
        "| **기록** | **관찰 내용** | **근거** | **비고** |\n",
        "| --- | --- | --- | --- |\n",
        "| **R1** | '10:12 2소대장이 접촉 발생 후 40초 만에 분대장 3명에게 지시를 전달했다' | 관찰관 직접 관찰 + 훈련 로그 시각 대조 | 시각·행동 명시 |\n",
        "| **R2** | '10:20 3소대 통신 보고가 1분 늦었다고 한다' | 다른 관찰관 전언 | 전달 |\n",
        "| **R3** | '1소대는 협동이 잘 되었다' | 관찰관 인상 | 행동 없음 |\n",
        "| **R4** | '11:05 부상자 모의 처리 시 분대원 2명이 역할을 서로 확인하고 이동했다' | 관찰관 직접 관찰, 동영상 기록 대조 | 행동 명시 |\n",
        "| **R5** | '보고 절차 미흡' | 근거 없음 | 결론만 기재 |\n",
        "\n",
        "가. 제공 자료 2 - 관찰 근거 6단계 틀. 단계 이름은 고정하고 판정 기준을 조별로 작성한다.\n",
        "\n",
        "| **단계** | **이름** | **판정 기준(조별 작성)** |\n",
        "| --- | --- | --- |\n",
        "| **E1** | 직접 관찰·기록 대조 |  |\n",
        "| **E2** | 직접 관찰 |  |\n",
        "| **E3** | 복수 관찰관 일치 |  |\n",
        "| **E4** | 단일 전언 |  |\n",
        "| **E5** | 추정·해석 |  |\n",
        "| **E6** | 근거 없는 인상 |  |\n",
        "\n",
        "나. 작성 서식 1 - 4영역 x 4단계 평가 루브릭(관찰 가능한 행동으로 작성)\n",
        "\n",
        "| **평가 영역** | **미흡** | **보통** | **우수** | **탁월** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **전술 행동** |  |  |  |  |\n",
        "| **의사결정** |  |  |  |  |\n",
        "| **팀워크** |  |  |  |  |\n",
        "| **보고 절차** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 평가 지표(10개 이상, 예시 2개 포함)\n",
        "\n",
        "| **번호** | **평가 지표** | **측정 방법(관찰 가능한 기준)** | **기록 책임자(가상 직책)** |\n",
        "| --- | --- | --- | --- |\n",
        "| **1** | 접촉 발생부터 지시 전달까지 걸린 시간 | 훈련 로그 시각과 관찰관 시각 기록 대조(초 단위) | 관찰관 |\n",
        "| **2** | 보고 항목 완비율 | 보고 서식 항목 수 대비 빠짐없이 말한 항목 수 | 기록자 |\n",
        "| **3** |  |  |  |\n",
        "| **4** |  |  |  |\n",
        "| **5** |  |  |  |\n",
        "| **6** |  |  |  |\n",
        "| **7** |  |  |  |\n",
        "| **8** |  |  |  |\n",
        "| **9** |  |  |  |\n",
        "| **10** |  |  |  |\n",
        "| **11** |  |  |  |\n",
        "| **12** |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 등급 부여 일관성 시험(조원이 각자 근거 단계 E1~E6을 매기고 비교)\n",
        "\n",
        "| **기록** | **조원 1** | **조원 2** | **조원 3** | **조원 4** | **일치 여부** | **불일치 원인** |\n",
        "| --- | --- | --- | --- | --- | --- | --- |\n",
        "| **R1** |  |  |  |  |  |  |\n",
        "| **R2** |  |  |  |  |  |  |\n",
        "| **R3** |  |  |  |  |  |  |\n",
        "| **R4** |  |  |  |  |  |  |\n",
        "| **R5** |  |  |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 4 - 교차 확인 규칙: 전언만 있는 기록은 E (   ) 이하로 보고 점수 확정은 서로 다른 관찰관 (   )명 이상의 일치 또는 (   ) 대조가 있을 때만 검토한다. 근거 단계가 E5 이하인 기록은 점수에 (   ).\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 4영역 x 4단계 루브릭을 모두 관찰 가능한 행동으로 작성했다 | ( ) |\n",
        "| E1~E6 판정 기준을 모두 작성했다 | ( ) |\n",
        "| 평가 지표를 10개 이상 정의했다 | ( ) |\n",
        "| 가상 관찰 기록 5종에 대한 조원 등급이 4건 이상 일치했다(불일치 건은 원인과 수정 내용을 적었다) | ( ) |\n",
        "| 단일 관찰관 의존 경고와 교차 확인 규칙을 명시했고 편향 방지 문구를 넣었다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 03. 주관적 편향을 배제하고 사실 기반 피드백을 유도하는 관찰 가이드라인 작성\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "주관적 편향을 배제하고 사실 기반 피드백을 유도하는 관찰 가이드라인을 작성한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **주관적 편향을 줄이고 사실에 기반한 피드백이 나오도록 관찰관이 따를 관찰 가이드라인을 작성하고, 관찰 공백과 불확실성을 정리한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **관찰 전 준비, 관찰 중 기록 요령(시각, 행동, 말, 결과), 관찰 후 정리 순서를 담은 관찰 가이드라인 설계하고 작성하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `analysis/trn06_uncertainty_assessment.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "주관적 편향을 배제하고 사실 기반 피드백을 유도하는 관찰 가이드라인 작성**\n",
        "\n",
        "가. 제공 자료 1 - 어긋난 가상 관찰 기록 쌍 4건 [교육용가상자료]\n",
        "\n",
        "| **쌍** | **관찰관 A 기록** | **관찰관 B 기록** | **어긋난 지점** |\n",
        "| --- | --- | --- | --- |\n",
        "| **K1** | 10:12 지시 전달 40초 | 10:12 접촉, 10:14 지시 전달(약 2분) | 시각 기준(접촉 선언 vs 인지) |\n",
        "| **K2** | 2소대 의사결정 '우수' | 2소대 의사결정 '보통' | 척도 해석 |\n",
        "| **K3** | 3소대 보고 '완비' | 3소대 보고 '2개 항목 누락'(측면에서 관찰) | 관찰 위치(시야) |\n",
        "| **K4** | 1소대장 '침착' | 1소대장 '지시가 불분명' | 행동 해석(인상 vs 행동) |\n",
        "\n",
        "가. 제공 자료 2 - 관찰 공백·편향 요인 예시 3개(나머지 5개 이상은 조별로 찾는다)\n",
        "\n",
        "| **요인** | **발생 상황** | **보완 방법(예)** |\n",
        "| --- | --- | --- |\n",
        "| **관찰 위치 시야 제한** | 관찰관이 측면에 있어 일부 분대 행동을 못 봄 | 관찰 위치 교대, 기록에 못 본 구간을 표시 |\n",
        "| **후광 효과** | 한 영역이 우수하면 다른 영역도 높게 평가 | 영역별로 따로 근거를 적고 영역 순서를 바꿔 채점 |\n",
        "| **최근 효과** | 훈련 후반 행동만 기억에 남음 | 시각별 메모를 훈련 중 작성 |\n",
        "\n",
        "나. 작성 서식 1 - 관찰 가이드라인(빈칸 작성)\n",
        "\n",
        "| **단계** | **해야 할 일** | **기록 방식** | **금지 사항** |\n",
        "| --- | --- | --- | --- |\n",
        "| **관찰 전** |  |  |  |\n",
        "| **관찰 중** |  |  |  |\n",
        "| **관찰 후** |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 어긋난 기록 분류와 원인 후보\n",
        "\n",
        "| **쌍** | **어긋난 유형(시각·척도·시야·해석)** | **원인 후보(기준 차이, 관찰 위치, 인상 개입)** | **확인 방법** | **결론(점수 확정·보류·추가 관찰)** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **K1** |  |  |  |  |\n",
        "| **K2** |  |  |  |  |\n",
        "| **K3** |  |  |  |  |\n",
        "| **K4** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 관찰 공백·편향 영향도 매트릭스(8개 이상)\n",
        "\n",
        "| **번호** | **공백·편향 요인** | **영향도(높음·중간·낮음)** | **보완 방법** | **판단의 한계** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **1** | 관찰 위치 시야 제한 |  |  |  |\n",
        "| **2** | 후광 효과 |  |  |  |\n",
        "| **3** | 최근 효과 |  |  |  |\n",
        "| **4** |  |  |  |  |\n",
        "| **5** |  |  |  |  |\n",
        "| **6** |  |  |  |  |\n",
        "| **7** |  |  |  |  |\n",
        "| **8** |  |  |  |  |\n",
        "| **9** |  |  |  |  |\n",
        "| **10** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 4 - 표현 규칙: 허용 표현 '(시각) (대상)이 (행동)했다', 금지 표현 '(   )', 판단의 한계 문장 '이 평가는 (   )를 관찰하지 못했다'\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 관찰 가이드라인에 관찰 전·중·후 단계가 모두 있다 | ( ) |\n",
        "| 어긋난 기록 4건의 유형과 원인 후보를 2개 이상 적었다 | ( ) |\n",
        "| 공백·편향 요인을 8개 이상 찾고 영향도를 매겼다 | ( ) |\n",
        "| 요인마다 보완 방법을 적었다 | ( ) |\n",
        "| 인상이 아닌 행동으로 쓰는 표현 규칙과 판단의 한계를 명시했다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 04. 가상 훈련 영상/로그 기반 AAR 루브릭 적용 및 1차 평가지 작성 실습\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "가상 훈련 영상/로그 기반 AAR 루브릭 적용 및 1차 평가지 작성을 실습한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **가상 훈련 영상 기록과 로그를 바탕으로 AAR 루브릭을 적용해 1차 평가지를 작성하고, 점수를 확정해도 되는 근거 기준을 만든다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **실습자료의 가상 훈련 로그 14줄을 읽고 평가 영역별로 관찰 행동을 찾아 루브릭 등급을 매기는 1차 평가지 설계하고 작성하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `matrix/trn06_attribution_matrix.xlsx(md)` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "가상 훈련 영상/로그 기반 AAR 루브릭 적용 및 1차 평가지 작성 실습**\n",
        "\n",
        "가. 제공 자료 1 - 가상 훈련 로그 14줄 [교육용가상자료] (2소대 중심, 가상 훈련 D일)\n",
        "\n",
        "| **번호** | **시각** | **로그 내용** |\n",
        "| --- | --- | --- |\n",
        "| **1** | 09:05 | 2소대 집결지 도착, 인원 점검 완료(소대장 구두 확인) |\n",
        "| **2** | 09:20 | 이동 중 분대 간격이 벌어졌다는 관찰관 메모(시각 없음) |\n",
        "| **3** | 09:40 | 방어 진지 점령 완료, 구역 분담 지시를 분대장 3명에게 전달(관찰·로그 일치) |\n",
        "| **4** | 10:12 | 모의 접촉 발생(통제관 신호) |\n",
        "| **5** | 10:12:40 | 소대장이 분대장에게 사격 구역 지시 전달(관찰·로그 일치) |\n",
        "| **6** | 10:15 | 통신병 보고 1분 지연(다른 관찰관 전언) |\n",
        "| **7** | 10:18 | 분대 1이 측면 이동, 분대 2는 제자리 대기(소대장 의도 불분명이라는 메모) |\n",
        "| **8** | 10:30 | 모의 접촉 종료 선언 |\n",
        "| **9** | 10:45 | 모의 부상자 1명 발생, 분대원 2명이 역할 확인 후 이동(관찰·영상 일치) |\n",
        "| **10** | 10:50 | 부상자 보고서의 위치 항목 누락(보고 서식 대조) |\n",
        "| **11** | 11:10 | 소대장이 보고 후 분대장 의견을 묻고 지시 수정(관찰 일치) |\n",
        "| **12** | 11:20 | 분대장 1명이 안전 수칙 위반 의심 행동(관찰관 1명만 목격) |\n",
        "| **13** | 11:35 | 교전수칙 시나리오 카드에 따라 '민간인 접근' 모의 대응: 사격 중지 선언(관찰·로그 일치) |\n",
        "| **14** | 11:50 | 철수 후 인원·장비 점검 완료(소대장 구두 확인) |\n",
        "\n",
        "가. 제공 자료 2 - 근거 항목 예시 4개(나머지는 조별로 12개 이상으로 늘린다)\n",
        "\n",
        "| **근거 항목** | **방향(지지·반박)** | **가중치 예시** |\n",
        "| --- | --- | --- |\n",
        "| **관찰관이 직접 관찰하고 시각을 적었음** | 지지 | +3 |\n",
        "| **훈련 로그 또는 영상으로 대조됨** | 지지 | +3 |\n",
        "| **전언이며 시각이 없음** | 반박 | -3 |\n",
        "| **관찰관 1명만 목격했고 반대 기록이 있음** | 반박 | -4 |\n",
        "\n",
        "나. 작성 서식 1 - 1차 평가지(2소대)\n",
        "\n",
        "| **평가 영역** | **관찰된 행동(로그 번호)** | **루브릭 등급** | **근거 단계(E1~E6)** | **점수 확정 가능 여부** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **전술 행동** |  |  |  |  |\n",
        "| **의사결정** |  |  |  |  |\n",
        "| **팀워크** |  |  |  |  |\n",
        "| **보고 절차** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 점수 확정 근거 항목 목록(12개 이상)\n",
        "\n",
        "| **번호** | **근거 항목** | **방향(지지·반박·확인 불가)** | **가중치** | **확인 방법** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **1** |  |  |  |  |\n",
        "| **2** |  |  |  |  |\n",
        "| **3** |  |  |  |  |\n",
        "| **4** |  |  |  |  |\n",
        "| **5** |  |  |  |  |\n",
        "| **6** |  |  |  |  |\n",
        "| **7** |  |  |  |  |\n",
        "| **8** |  |  |  |  |\n",
        "| **9** |  |  |  |  |\n",
        "| **10** |  |  |  |  |\n",
        "| **11** |  |  |  |  |\n",
        "| **12** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 산식과 규칙: 종합 점수 = (지지 근거 가중치 합) - (반박 근거 가중치 합 절댓값) 이다. 규칙 1 점수 (   )점 이상이면 점수 확정 검토, 규칙 2 반박 근거가 하나라도 있으면 (   ), 규칙 3 확인 불가 항목이 (   )개 이상이면 (   ), 규칙 4 교전수칙·안전 수칙 위반 의심은 점수와 관계없이 (   ).\n",
        "\n",
        "나. 작성 서식 4 - 가상 사례 3종 적용(S1 로그 5번 지시 전달, S2 로그 6번 통신 지연, S3 로그 12번 안전 수칙 위반 의심)과 레드팀 반박\n",
        "\n",
        "| **사례** | **지지 근거 합** | **반박 근거 합** | **종합 점수** | **판단(점수 확정·보류·추가 관찰)** | **레드팀 반박과 대응** |\n",
        "| --- | --- | --- | --- | --- | --- |\n",
        "| **S1** |  |  |  |  |  |\n",
        "| **S2** |  |  |  |  |  |\n",
        "| **S3** |  |  |  |  |  |\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 평가 영역 4개 모두에 관찰 행동과 로그 번호를 적었다 | ( ) |\n",
        "| 근거를 12개 이상 항목화하고 방향과 가중치를 적었다 | ( ) |\n",
        "| 산식과 규칙 1~4의 빈칸을 모두 채웠다 | ( ) |\n",
        "| 사례 S1~S3의 점수와 판단을 계산해 기록했다 | ( ) |\n",
        "| 전언·시각 없는 메모를 근거 단계가 낮은 것으로 처리했고 안전 수칙 위반 의심을 지휘계통 보고로 연결했다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 05. 훈련 부대원 대상 강점/약점 피드백 대화 스크립트 및 코칭 가이드 개발\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "훈련 부대원 대상 강점/약점 피드백 코칭 가이드를 개발한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **훈련 부대원에게 강점과 약점을 전달하는 피드백 대화 스크립트와 코칭 가이드를 개발하고, 점수 확정과 피드백 전달의 분기점·책임 직책을 정한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **상황(관찰한 행동), 영향(그 결과), 질문(본인의 생각), 다음 행동(구체적 개선) 순의 피드백 대화 스크립트를 만들고 강점 피드백과 약점 피드백 예시를 각각 3개 이상 쓴다 과정을 진행하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `sop/trn06_approval_thresholds_sop.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "훈련 부대원 대상 강점/약점 피드백 대화 스크립트 및 코칭 가이드 개발**\n",
        "\n",
        "가. 제공 자료 1 - 피드백 대화 스크립트 틀과 약점 피드백 예시 1개\n",
        "\n",
        "| **순서** | **구성** | **예시 문장(약점 피드백)** | **작성할 문장(조별)** |\n",
        "| --- | --- | --- | --- |\n",
        "| **1** | 상황(관찰한 행동) | '10시 12분 접촉 직후 사격 구역 지시가 40초 걸렸습니다.' |  |\n",
        "| **2** | 영향(결과) | '그 사이 분대 2는 제자리에서 대기했습니다.' |  |\n",
        "| **3** | 질문(본인의 생각) | '그때 어떤 점이 지시를 어렵게 했다고 생각합니까?' |  |\n",
        "| **4** | 다음 행동 | '다음에는 구역 분담을 접촉 전에 정해 두는 방법을 시도해 봅시다.' |  |\n",
        "\n",
        "가. 제공 자료 2 - 경계선 사례 5종 [교육용가상자료]\n",
        "\n",
        "| **묶음** | **내용** | **애매한 이유** |\n",
        "| --- | --- | --- |\n",
        "| **B1** | 지시 지연 관찰, 근거 E2, 로그 대조 없음 | 근거는 있으나 대조 부족 |\n",
        "| **B2** | O/C 1 '우수', O/C 2 '보통', 같은 행동을 다르게 해석 | 관찰관 간 불일치 |\n",
        "| **B3** | 분대장 안전 수칙 위반 의심, 1명만 목격 | 교전수칙·안전 쟁점, 지휘계통 보고 필요 |\n",
        "| **B4** | 훈련 부대원이 피드백 중 매우 낙담한 모습을 보임 | 심리 신호, 상담관 연계 검토 |\n",
        "| **B5** | 지휘관이 오늘 안에 점수를 확정하라고 요청 | 확인 생략 압박 |\n",
        "\n",
        "가. 제공 자료 3 - 책임 직책 예시(가상): 관찰관(O/C), 선임 관찰관, 중대장, 법무 검토 담당, 의무대·상담관(연계)\n",
        "\n",
        "나. 작성 서식 1 - 피드백 대화 스크립트(강점 3개, 약점 3개 이상)\n",
        "\n",
        "| **번호** | **구분(강점·약점)** | **상황** | **영향** | **질문** | **다음 행동** |\n",
        "| --- | --- | --- | --- | --- | --- |\n",
        "| **1** |  |  |  |  |  |\n",
        "| **2** |  |  |  |  |  |\n",
        "| **3** |  |  |  |  |  |\n",
        "| **4** |  |  |  |  |  |\n",
        "| **5** |  |  |  |  |  |\n",
        "| **6** |  |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 금지 표현과 대안 표현\n",
        "\n",
        "| **번호** | **금지 표현(인격 비하·비교·감정)** | **왜 문제인가** | **대안 표현** |\n",
        "| --- | --- | --- | --- |\n",
        "| **1** |  |  |  |\n",
        "| **2** |  |  |  |\n",
        "| **3** |  |  |  |\n",
        "| **4** |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 의사결정 트리와 분기점·책임 직책 매핑표\n",
        "\n",
        "| **분기점** | **조건(관찰 가능한 문장)** | **예일 때** | **아니오일 때** | **책임 직책(가상)** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **T1** | 근거 단계가 E3 이상인가 |  |  |  |\n",
        "| **T2** | 관찰관 간 불일치가 해소되었는가 |  |  |  |\n",
        "| **T3** | 교전수칙·안전 위반 의심이 있는가 |  |  |  |\n",
        "| **T4** | 부상·심리적 어려움 신호가 있는가 |  |  |  |\n",
        "\n",
        "나. 작성 서식 4 - 모의 결심 기록지(B1~B5)\n",
        "\n",
        "| **묶음** | **판단(피드백 전달·보류 유지·추가 관찰 요청)** | **근거** | **책임 직책** | **조원 합의(예·아니오)** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **B1** |  |  |  |  |\n",
        "| **B2** |  |  |  |  |\n",
        "| **B3** |  |  |  |  |\n",
        "| **B4** |  |  |  |  |\n",
        "| **B5** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 5 - 긴급 요청 규칙: 지휘관의 당일 확정 요청에도 줄이지 않는 확인 단계는 (   ), 임시 피드백으로 전달할 내용은 (   ), 최종 확정 기한은 (   )이다. 안전·교전수칙 쟁점과 심리 신호는 일정과 관계없이 (   ).\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 피드백 스크립트에 상황·영향·질문·다음 행동이 모두 있고 강점과 약점 예시가 각각 3개 이상이다 | ( ) |\n",
        "| 금지 표현 4개와 대안 표현을 적었다 | ( ) |\n",
        "| 분기점 4개의 조건과 책임 직책(가상)을 적었다 | ( ) |\n",
        "| 경계선 묶음 5종 모두에 판단과 근거를 기록했다 | ( ) |\n",
        "| 교전수칙·안전 쟁점은 지휘계통과 법무 검토로, 심리 신호는 의무대·상담관 연계로 넘기며 진단하지 않는다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 06. 지휘관 보고용 부대 훈련 성과 종합 분석표 및 개선 과제 카드 설계\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "지휘관 보고용 부대 훈련 성과 종합 분석표를 설계한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **지휘관 보고용 부대 훈련 성과 종합 분석표와 개선 과제 카드를 설계한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **영역별 등급, 근거 단계, 강점, 개선 과제, 다음 훈련 목표를 한 쪽에 담는 성과 종합 분석표 설계하고 워크플로우를 구성하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `templates/trn06_aar_fact_action_template.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "지휘관 보고용 부대 훈련 성과 종합 분석표 및 개선 과제 카드 설계**\n",
        "\n",
        "가. 제공 자료 1 - 혼동 유발 표현 예시(나머지는 조별로 6개 이상으로 늘린다)\n",
        "\n",
        "| **혼동 유발 표현** | **왜 혼동되는가** | **대체 표현 예** |\n",
        "| --- | --- | --- |\n",
        "| **잘함** | 무엇을 어떻게 잘했는지 알 수 없음 | '10시 12분 접촉 후 40초 안에 구역 지시를 전달했다(E1)' |\n",
        "| **열심히 함** | 태도 평가이며 행동 근거 없음 | '휴식 없이 3회 반복해 진지를 보강했다(E2)' |\n",
        "| **분위기가 좋음** | 관찰 가능한 기준 없음 | '분대원이 서로 역할을 확인했다(E2)' |\n",
        "\n",
        "가. 제공 자료 2 - 가상 평가 메모 3종(관찰 사실·해석·조치·미확인을 구분해 표시한다)\n",
        "\n",
        "| **메모** | **내용** |\n",
        "| --- | --- |\n",
        "| **M-1** | 2소대장은 접촉 후 40초 만에 구역 지시를 전달했다. 침착한 지휘관으로 보인다. 다음 훈련에서 사전 분담을 시도하게 한다. 통신 지연 1분은 확인되지 않았다. |\n",
        "| **M-2** | 3소대 보고에서 2개 항목이 빠졌다. 훈련이 부족해서일 것이다. 보고 서식을 암기하게 하겠다. 어느 항목인지는 다른 관찰관 확인이 필요하다. |\n",
        "| **M-3** | 1소대는 분위기가 좋았다. 소대장이 훌륭하다. 칭찬하고 넘어간다. 분대 간 소통 기록은 없다. |\n",
        "\n",
        "나. 작성 서식 1 - 부대 훈련 성과 종합 분석표(1쪽)\n",
        "\n",
        "| **평가 영역** | **등급** | **근거 단계** | **강점(행동 근거)** | **개선 과제** | **다음 훈련 목표** |\n",
        "| --- | --- | --- | --- | --- | --- |\n",
        "| **전술 행동** |  |  |  |  |  |\n",
        "| **의사결정** |  |  |  |  |  |\n",
        "| **팀워크** |  |  |  |  |  |\n",
        "| **보고 절차** |  |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 개선 과제 카드(3장)\n",
        "\n",
        "| **카드** | **과제** | **근거 행동** | **책임 직책(가상)** | **기한** | **확인 방법** |\n",
        "| --- | --- | --- | --- | --- | --- |\n",
        "| **K-1** |  |  |  |  |  |\n",
        "| **K-2** |  |  |  |  |  |\n",
        "| **K-3** |  |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 기록 분류 규칙(빈칸을 채운다): 관찰 사실은 (   ), 해석은 (   ), 조치는 (   ), 미확인은 (   ) 표시로 구분한다. 문장 하나에는 한 가지 분류만 담는다.\n",
        "\n",
        "나. 작성 서식 4 - 혼동 유발 표현 금지 목록(6개 이상)과 메모 옮겨 적기(M-1~M-3)\n",
        "\n",
        "| **번호** | **금지 표현** | **대체 표현** |\n",
        "| --- | --- | --- |\n",
        "| **1** |  |  |\n",
        "| **2** |  |  |\n",
        "| **3** |  |  |\n",
        "| **4** |  |  |\n",
        "| **5** |  |  |\n",
        "| **6** |  |  |\n",
        "\n",
        "| **메모** | **관찰 사실** | **해석** | **조치** | **미확인** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **M-1** |  |  |  |  |\n",
        "| **M-2** |  |  |  |  |\n",
        "| **M-3** |  |  |  |  |\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 성과 종합 분석표에 등급, 근거 단계, 강점, 개선 과제가 모두 있다 | ( ) |\n",
        "| 개선 과제 카드마다 책임 직책, 기한, 확인 방법이 있다 | ( ) |\n",
        "| 혼동 유발 표현 금지 목록을 6개 이상 만들고 대체 표현을 적었다 | ( ) |\n",
        "| 메모 3종에서 관찰 사실과 해석을 혼동한 문장이 0건이다 | ( ) |\n",
        "| 분류 규칙 4개 빈칸을 모두 채웠다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 07. 평가자 간 점수 편차 발생 상황 모의 신뢰도 스트레스 테스트\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "평가자 간 점수 편차 발생 상황 모의 신뢰도 스트레스 테스트를 실시한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **평가자마다 점수가 달라지는 상황을 모의로 만들어 루브릭의 신뢰도를 스트레스 테스트하고, 5개 영역 4등급 최종 평가 루브릭을 정의한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **같은 가상 훈련 기록을 평가자 4명이 상의 없이 채점하게 하고, 관대화 경향, 엄격화 경향, 후광 효과, 최근 효과, 중심화 경향을 일으키는 모의 카드 주입하여 처리 지연 및 복원력을 시험하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `rubric/trn06_evaluation_rubric.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "평가자 간 점수 편차 발생 상황 모의 신뢰도 스트레스 테스트**\n",
        "\n",
        "가. 제공 자료 1 - 가상 훈련 기록 요약 3종(평가자 4명이 상의 없이 채점) [교육용가상자료]\n",
        "\n",
        "| **기록** | **내용 요약** |\n",
        "| --- | --- |\n",
        "| **X1** | 2소대: 지시 40초, 보고 서식 항목 1개 누락, 부상자 처리 역할 확인 양호 |\n",
        "| **X2** | 3소대: 지시 2분, 보고 완비, 분대 간 소통 일부 끊김 |\n",
        "| **X3** | 1소대: 지시 50초, 보고 항목 2개 누락, 안전 수칙 확인 철저 |\n",
        "\n",
        "가. 제공 자료 2 - 편향 모의 카드 T1~T5(통제관이 주입)\n",
        "\n",
        "| **카드** | **주입 내용** | **기대되는 편향** |\n",
        "| --- | --- | --- |\n",
        "| **T1** | '이 소대장은 지난 훈련에서 매우 우수했다'는 정보를 평가자에게 미리 알림 | 후광 효과 |\n",
        "| **T2** | 훈련 후반 1분 영상만 다시 보여 줌 | 최근 효과 |\n",
        "| **T3** | '가능하면 좋은 점수를 주면 좋겠다'는 분위기 카드 | 관대화 경향 |\n",
        "| **T4** | '이번 평가는 엄격하게 하라'는 지시 카드 | 엄격화 경향 |\n",
        "| **T5** | 근거가 애매한 기록에 보통만 주도록 유도 | 중심화 경향 |\n",
        "\n",
        "가. 제공 자료 3 - 5영역 x 4등급 최종 루브릭 틀(전술 행동, 의사결정, 팀워크, 보고 절차, 안전·규정 준수)\n",
        "\n",
        "| **평가 영역** | **탁월** | **우수** | **보통** | **미흡** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **전술 행동** |  |  |  |  |\n",
        "| **의사결정** |  |  |  |  |\n",
        "| **팀워크** |  |  |  |  |\n",
        "| **보고 절차** |  |  |  |  |\n",
        "| **안전·규정 준수** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 1 - 평가자 4명 채점표(기록 X1~X3, 등급은 탁월·우수·보통·미흡)\n",
        "\n",
        "| **기록·영역** | **평가자 1** | **평가자 2** | **평가자 3** | **평가자 4** | **편차(최대 등급 차)** |\n",
        "| --- | --- | --- | --- | --- | --- |\n",
        "| **X1 전술 행동** |  |  |  |  |  |\n",
        "| **X1 보고 절차** |  |  |  |  |  |\n",
        "| **X2 전술 행동** |  |  |  |  |  |\n",
        "| **X2 보고 절차** |  |  |  |  |  |\n",
        "| **X3 전술 행동** |  |  |  |  |  |\n",
        "| **X3 보고 절차** |  |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 편향 카드별 영향 기록\n",
        "\n",
        "| **카드** | **채점 변화** | **편향 유형** | **대응(루브릭 문구 수정 또는 절차 보완)** |\n",
        "| --- | --- | --- | --- |\n",
        "| **T1** |  |  |  |\n",
        "| **T2** |  |  |  |\n",
        "| **T3** |  |  |  |\n",
        "| **T4** |  |  |  |\n",
        "| **T5** |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 일치율과 보정: 일치한 칸 (   ) / 전체 (   ) = (   )%, 편차가 가장 큰 영역은 (   ), 보정한 문구는 '(   )'이다.\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 5개 영역 x 4단계 기준을 모두 관찰 가능한 행동으로 정의했다 | ( ) |\n",
        "| 평가자 4명이 상의 없이 채점하고 편차를 계산했다 | ( ) |\n",
        "| 편향 카드 5종의 영향과 대응을 기록했다 | ( ) |\n",
        "| 일치율 80% 이상을 확인했거나 미달 원인과 보정 계획을 적었다 | ( ) |\n",
        "| 안전·규정 준수 영역에 교전수칙 준수 행동이 포함되어 있다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 08. AAR 회의를 통한 관찰관 주관 개입 사례 분석 및 루브릭 척도 보정\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "AAR 회의를 통해 관찰관 주관 개입 사례를 분석하고 루브릭 척도를 보정한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **AAR 회의에서 관찰관의 주관이 개입된 사례를 분석해 원인을 규명하고 루브릭 척도를 보정하며, 레드팀 비판으로 가이드의 취약한 전제를 찾는다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **가상 AAR 회의 기록 2건을 읽고 관찰관의 인상이나 친분이 점수나 피드백에 개입된 지점을 표시 수행하고 검증하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `reports/trn06_redteam_critique_report.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "AAR 회의를 통한 관찰관 주관 개입 사례 분석 및 루브릭 척도 보정**\n",
        "\n",
        "가. 제공 자료 - 가상 AAR 회의 기록 A·B [교육용가상자료]\n",
        "\n",
        "| **순서** | **AAR 회의 기록 A** | **AAR 회의 기록 B** |\n",
        "| --- | --- | --- |\n",
        "| **1** | 관찰관 O/C 1: '이 소대장은 믿음직해서 4점' | 관찰관 O/C 2: '그 분대장은 늘 지각했으니 이번에도 좋지 않다' |\n",
        "| **2** | 근거 질문: '구체적 행동은?' -> '그냥 전체적으로' | 근거 질문: '이번 훈련에서의 행동은?' -> '기록 없음' |\n",
        "| **3** | 다른 소대 같은 행동은 3점 부여 | 피드백 자리에서 분대원 앞에서 지적 |\n",
        "| **4** | AAR 토의: 척도에 '믿음직함'이 들어 있음 | AAR 토의: 서식에 '과거 행동' 칸이 따로 없고 관행으로 반영됨 |\n",
        "\n",
        "나. 작성 서식 1 - 주관 개입 지점과 원인 분류(사람·절차·정보·척도, 개인 비난 표현 금지)\n",
        "\n",
        "| **번호** | **주관이 개입한 문장·단계** | **원인 분류** | **원인 설명(사실 중심)** | **개선안** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **1** |  |  |  |  |\n",
        "| **2** |  |  |  |  |\n",
        "| **3** |  |  |  |  |\n",
        "| **4** |  |  |  |  |\n",
        "| **5** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 레드팀 쟁점·대응(5건 이상)\n",
        "\n",
        "| **번호** | **가이드의 취약한 전제** | **레드팀 비판** | **작성 팀 반박 또는 수정안** | **경고 문구** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **1** |  |  |  |  |\n",
        "| **2** |  |  |  |  |\n",
        "| **3** |  |  |  |  |\n",
        "| **4** |  |  |  |  |\n",
        "| **5** |  |  |  |  |\n",
        "| **6** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 척도 보정(문구 수정 전후)\n",
        "\n",
        "| **영역** | **수정 전 문구(인상 표현 포함)** | **수정 후 문구(관찰 가능한 행동)** | **수정 이유** |\n",
        "| --- | --- | --- | --- |\n",
        "| **의사결정** |  |  |  |\n",
        "| **팀워크** |  |  |  |\n",
        "| **보고 절차** |  |  |  |\n",
        "\n",
        "나. 작성 서식 4 - 반대 방향 위험 점검\n",
        "\n",
        "| **위험** | **설명** | **대응** |\n",
        "| --- | --- | --- |\n",
        "| **지나친 표준화로 현장 판단 위축** |  |  |\n",
        "| **기록 부담 증가** |  |  |\n",
        "| **평가가 점수 맞추기로 변질** |  |  |\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 기록 A·B에서 주관이 개입한 지점을 5건 이상 찾았다 | ( ) |\n",
        "| 원인을 사람·절차·정보·척도로 분류하고 개인 비난 표현이 없다 | ( ) |\n",
        "| 레드팀 쟁점 5건 이상에 반박 또는 수정안을 100% 적었다 | ( ) |\n",
        "| 인상 표현이 들어간 척도 문구를 행동 문구로 고쳤다 | ( ) |\n",
        "| 반대 방향 위험 3가지를 점검했다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 09. 피드백을 반영한 모의 AAR 세션 재실행 및 코칭 효과 검증\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "피드백을 반영한 모의 AAR 세션을 재실행하고 코칭 효과를 검증한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **피드백을 반영해 모의 AAR 세션을 다시 실행하고 코칭이 실제로 수행 개선으로 이어졌는지 검증한 뒤 결과를 1페이지 브리핑으로 요약한다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **1차 훈련 기록과 피드백 후 재훈련 기록을 같은 루브릭으로 비교해 영역별 등급 변화와 개선 과제 이행 여부를 가상 재검증 사례 7건으로 정리하고 규격화하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `briefing/trn06_commander_1page_brief.md(pdf)` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "피드백을 반영한 모의 AAR 세션 재실행 및 코칭 효과 검증**\n",
        "\n",
        "가. 제공 자료 - 1차 훈련과 재실행(D+3일) 가상 비교 자료 [교육용가상자료]\n",
        "\n",
        "| **사례** | **내용** | **1차 등급** | **재실행 등급(조별 작성)** |\n",
        "| --- | --- | --- | --- |\n",
        "| **V1** | 2소대 지시 전달 시간(1차 40초, 재실행 25초) | 보통 |  |\n",
        "| **V2** | 3소대 보고 항목 누락(1차 2개, 재실행 0개) | 미흡 |  |\n",
        "| **V3** | 1소대 분대 간 소통(1차 일부 끊김) | 보통 |  |\n",
        "| **V4** | 개선 과제 이행 여부(카드 K-1) | - |  |\n",
        "| **V5** | 코칭을 받지 않은 분대의 변화 | 보통 |  |\n",
        "| **V6** | 안전 수칙 준수 | 우수 |  |\n",
        "| **V7** | 피드백 후 낙담했던 대상의 참여도 | - |  |\n",
        "\n",
        "나. 작성 서식 1 - 1차·재실행 비교표\n",
        "\n",
        "| **평가 영역** | **1차 등급** | **재실행 등급** | **변화(향상·유지·하락)** | **코칭과의 관련성(근거)** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **전술 행동** |  |  |  |  |\n",
        "| **의사결정** |  |  |  |  |\n",
        "| **팀워크** |  |  |  |  |\n",
        "| **보고 절차** |  |  |  |  |\n",
        "| **안전·규정 준수** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 코칭 효과 검증표(재검증 7건)\n",
        "\n",
        "| **사례** | **코칭 내용** | **재실행 결과** | **효과(있음·불확실·없음)** | **다른 요인 가능성** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **V1** |  |  |  |  |\n",
        "| **V2** |  |  |  |  |\n",
        "| **V3** |  |  |  |  |\n",
        "| **V4** |  |  |  |  |\n",
        "| **V5** |  |  |  |  |\n",
        "| **V6** |  |  |  |  |\n",
        "| **V7** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 1페이지 브리핑 BLUF 틀\n",
        "\n",
        "| **결론(첫 문장)** |  |\n",
        "| --- | --- |\n",
        "\n",
        "| **핵심 결심 사항** |  |\n",
        "| --- | --- |\n",
        "\n",
        "| **위험 요소(신호등 표시: 녹·황·적)** |  |\n",
        "| --- | --- |\n",
        "\n",
        "| **대안 3종(장단점 한 줄)** |  |\n",
        "| --- | --- |\n",
        "\n",
        "| **근거** |  |\n",
        "| --- | --- |\n",
        "\n",
        "나. 작성 서식 4 - 브리핑 리허설 기록\n",
        "\n",
        "| **항목** | **목표** | **결과** |\n",
        "| --- | --- | --- |\n",
        "| 발표 시간 | 3분 이내 |  |\n",
        "| 분량 | A4 1페이지 |  |\n",
        "| 질의 응답 | 3건 이상 답변 |  |\n",
        "| 결론 먼저 제시 | 첫 문장 |  |\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 5개 영역의 1차·재실행 변화를 비교했다 | ( ) |\n",
        "| 재검증 7건 모두 코칭 효과와 다른 요인 가능성을 적었다 | ( ) |\n",
        "| 코칭을 받지 않은 분대와 비교해 효과를 단정하지 않았다 | ( ) |\n",
        "| 브리핑이 결론부터 시작하고 A4 1페이지에 들어간다 | ( ) |\n",
        "| 핵심 결심 사항, 위험 요소, 대안 3종이 있고 3분 안에 발표했다 | ( ) |\n",
        "\n",
        "**\n",
        "\n"
      ]
    },
    {
      "cell_type": "markdown",
      "metadata": {},
      "source": [
        "---\n",
        "\n",
        "## 🎯 미션 10. AAR 관찰·평가 루브릭 및 피드백 표준 가이드북 최종 완성\n",
        "\n",
        "### 📋 미션 배경 및 지침\n",
        "#### 미션 배경 및 당위성\n",
        "\n",
        "AAR 관찰·평가 루브릭과 피드백 표준 가이드북을 완성한다. 실제 전술 현장에서는 단순 탐지에 그치지 않고 신속한 위협 판단과 신뢰도 높은 의사결정이 필수적이므로, **미션 1~9의 산출물을 통합해 AAR 관찰·평가 루브릭 및 피드백 표준 가이드북을 완성하고 모의 심의를 거친다.** 과업을 완수하여 오판을 방지하고 작전 대응력을 극대화해야 합니다.\n",
        "\n",
        "이 문제를 해결하기 위해 본 미션에서는 **산출물을 가이드북 8개 장(목적과 적용 범위, 용어, 관찰 가이드라인, 평가 루브릭, 점수 확정과 피드백, 기록·보고, 훈련·평가, 개정 관리)과 부록에 배치하고 빠진 내용을 보완 수행하고 검증하는** 실습을 체계적으로 수행합니다.\n",
        "\n",
        "학습자는 실습가이드에 제시된 총 5개 세부 활동(기본 기능 구현 ➔ 결과 지표 검증 ➔ 파라미터 튜닝 및 도전과제)을 순차적으로 진행하며 핵심 판정 기준을 달성합니다.\n",
        "\n",
        "**이번 결과물:** `manual/trn06_standard_operational_manual.md` 형태의 결과물을 완성한다.\n",
        "\n",
        "### 📑 실습자료 및 작성 양식\n",
        "AAR 관찰·평가 루브릭 및 피드백 표준 가이드북 최종 완성**\n",
        "\n",
        "가. 제공 자료 1 - 가이드북 8개 장 구성과 가져올 결과물\n",
        "\n",
        "| **장** | **제목** | **포함 내용** | **가져올 결과물** |\n",
        "| --- | --- | --- | --- |\n",
        "| **1** | 목적과 적용 범위 | 목적, 적용 상황, 적용하지 않는 상황, 교전수칙과의 관계 | M1 |\n",
        "| **2** | 용어 정의 | 관찰관, 루브릭, 근거 단계, 후광 효과, 최근 효과, 보류 | M1~M3 |\n",
        "| **3** | 관찰 가이드라인 | 관찰 전·중·후 절차, 기록 요령, 편향 방지 | M3 |\n",
        "| **4** | 평가 루브릭 | 5영역 4단계, 근거 단계 E1~E6, 평가 지표 | M2·M7 |\n",
        "| **5** | 점수 확정과 피드백 | 근거 점수 산식, 의사결정 트리, 피드백 스크립트, 코칭 가이드, 책임 직책 | M4·M5 |\n",
        "| **6** | 기록·보고 | 1차 평가지, 성과 종합 분석표, 개선 과제 카드, 표현 규칙, 브리핑 | M4·M6·M9 |\n",
        "| **7** | 훈련·평가 | 평가자 편차 시험, 주관 개입 AAR, 재실행 검증, 레드팀 검토 | M7·M8·M9 |\n",
        "| **8** | 개정 관리 | 개정 주기, 의견 수렴, 책임 직책, 이력 | M8·M9 |\n",
        "\n",
        "가. 제공 자료 2 - 모의 심의 역할 카드\n",
        "\n",
        "| **역할** | **검토 질문** |\n",
        "| --- | --- |\n",
        "| **교리 역할** | 루브릭과 근거 단계가 일관되는가? 훈련 방법이 기준과 연결되는가? |\n",
        "| **법무 역할** | '최종 판단은 사람이, 교전수칙·지휘계통에 따라'가 드러나는가? 교전수칙·인도주의 원칙 평가 항목과 보고 경로가 분명한가? |\n",
        "| **작전 역할** | 현장 관찰관이 훈련 중 기록할 수 있는 분량인가? 의무대·상담관 연계가 분명한가? |\n",
        "\n",
        "나. 작성 서식 1 - 근거 표기 점검표(가이드북 조항마다 작성)\n",
        "\n",
        "| **조항** | **기준 내용 요약** | **근거(미션·가상 자료)** | **표기 여부** |\n",
        "| --- | --- | --- | --- |\n",
        "| **1-1** |  |  |  |\n",
        "| **2-1** |  |  |  |\n",
        "| **3-1** |  |  |  |\n",
        "| **4-1** |  |  |  |\n",
        "| **5-1** |  |  |  |\n",
        "| **6-1** |  |  |  |\n",
        "| **7-1** |  |  |  |\n",
        "| **8-1** |  |  |  |\n",
        "\n",
        "나. 작성 서식 2 - 모의 심의 지적 사항 반영표\n",
        "\n",
        "| **번호** | **역할** | **지적 사항** | **반영 내용** | **반영 위치(장·조)** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **1** |  |  |  |  |\n",
        "| **2** |  |  |  |  |\n",
        "| **3** |  |  |  |  |\n",
        "| **4** |  |  |  |  |\n",
        "| **5** |  |  |  |  |\n",
        "| **6** |  |  |  |  |\n",
        "\n",
        "나. 작성 서식 3 - 개정 관리: 개정 주기 (   ), 의견 수렴 방법 (   ), 개정 책임 직책(가상) (   ), 개정 이력 기록 위치 (   )\n",
        "\n",
        "다. 점검표\n",
        "\n",
        "| **점검 항목** | **확인** |\n",
        "| --- | --- |\n",
        "| 8개 장과 부록을 모두 완성했다 | ( ) |\n",
        "| 모든 기준 조항에 근거(미션·가상 자료)를 표기했다 | ( ) |\n",
        "| 교리·법무·작전 역할의 지적 사항을 반영하고 반영 위치를 적었다 | ( ) |\n",
        "| '최종 판단은 사람이 하며 실제 교전·작전 판단은 교전수칙·지휘계통에 따른다'는 문구가 1장과 5장에 있다 | ( ) |\n",
        "| 피드백은 행동에 한정하고 부상·심리 신호는 의무대·상담관 연계(진단 아님)라는 문구가 5장에 있다 | ( ) |\n",
        "| 실제 부대·개인 평가 결과·교리 원문을 쓰지 않았다 | ( ) |\n",
        "\n",
        "**4. 평가 채점표**\n",
        "\n",
        "미션별 평가 기준은 시나리오의 평가 항목과 같다. 평가자는 기준 충족 여부를 PASS/FAIL로 표시하고 FAIL이면 사유를 비고에 적는다.\n",
        "\n",
        "| **미션** | **구분** | **채점 기준** | **판정** | **비고** |\n",
        "| --- | --- | --- | --- | --- |\n",
        "| **M1** | 필수 | 평가 체계 분석·문서 골격: 가상 평가 사례 5건 이상을 검토해 평가 대상·근거·피드백 방식을 비교했는가, 가이드북 목차(8개 장) 골격을 100% 정의하고 지휘관 결심 의제 순으로 배열했는가. | PASS / FAIL |  |\n",
        "| **M2** | 필수 | 4단계 루브릭·근거 6단계·평가 지표: 관찰 근거 기준 6단계를 완비하고 평가 지표 10개 이상을 정의했는가, 가상 관찰 기록 5종에 대한 조원 간 등급 일치가 4건 이상이고 편향 방지 주의와 교차 확인 규칙을 명시했는가. | PASS / FAIL |  |\n",
        "| **M3** | 필수 | 관찰 가이드라인·편향 평가: 관찰 공백·편향 요인 8개 이상과 영향도 매트릭스를 도출했는가, 어긋난 기록 4건에 원인 후보와 확인 방법을 적고 판단의 한계와 보완 방법을 명시했는가. | PASS / FAIL |  |\n",
        "| **M4** | 선택 | 근거 항목·1차 평가지: 점수 확정 근거 12개 이상 항목화와 가중치 산식을 100% 정립했는가, 로그 14줄에 대한 1차 평가지와 사례 3종 적용 결과를 기록하고 레드팀 반박에 대응해 최소 증거 요건을 설정했는가. | PASS / FAIL |  |\n",
        "| **M5** | 필수 | 피드백 스크립트·분기점·책임 매핑: 분기점 조건 100% 명시와 책임 직책 매핑을 완료했는가, 경계선 사례 5종 모두에 판단과 근거가 기록되고 교전수칙·인도주의 원칙 준수, 의무대·상담관 연계, 사람의 최종 판단을 지켰는가. | PASS / FAIL |  |\n",
        "| **M6** | 선택 | 기록 분류·성과 분석표: 기록 분류 규칙 100% 표준화, 혼동 유발 표현 금지 가이드 6개 이상을 포함하고 가상 평가 메모 3종에서 사실과 해석의 혼동이 0건인가. | PASS / FAIL |  |\n",
        "| **M7** | 필수 | 평가자 편차 스트레스·루브릭: 평가 영역 5개와 등급 4단계(탁월·우수·보통·미흡) 기준 정의율 100%인가, 평가자 2명 이상 채점 일치율 80% 이상이고 편차가 큰 영역의 보정 내용을 기록했는가. | PASS / FAIL |  |\n",
        "| **M8** | 선택 | 주관 개입 원인·척도 보정: 도출된 비판적 쟁점 5건 이상에 대해 반박 및 수정 대안을 100% 수립했는가, 취약한 전제에 경고 문구를 명시하고 척도를 보정했으며 반대 방향 위험을 점검했는가. | PASS / FAIL |  |\n",
        "| **M9** | 필수 | 재실행 비교·1페이지 브리핑: 핵심 결심 사항, 위험 요소, 대안 3종이 1페이지(A4) 안에 완결되는가, 재검증 7건의 전후 비교와 BLUF 준수(결론 먼저, 3분 이내 발표)를 확인했는가. | PASS / FAIL |  |\n",
        "| **M10** | 필수 | 표준 가이드북 통합 완성: 가이드북 8개 장과 부록을 100% 완성하고 모든 기준 조항에 근거(미션·가상 자료)를 표기했는가, 모의 심의 지적 사항을 반영하고 '최종 판단은 사람이 하며 실제 교전·작전 판단은 교전수칙·지휘계통에 따른다'는 문구를 명시했는가. | PASS / FAIL |  |\n",
        "\n",
        "| **판정 기준** | 필수 7개 미션(M1·M2·M3·M5·M7·M9·M10)이 모두 PASS여야 최종 PASS로 인정한다. 선택 미션(M4·M6·M8)은 가점·보완 의견에 반영한다. |\n",
        "| --- | --- |\n",
        "\n",
        "| **공통 감점** | 실제 부대명·훈련장·개인 평가 결과·교리 원문·실존 인물 정보를 사용한 경우, 부대 자료를 외부 AI 서비스에 입력한 경우 해당 미션은 FAIL로 처리한다. |\n",
        "| --- | --- |\n",
        "\n",
        "| **주제 안전 기준** | 근거 없는 인상으로 점수를 확정하는 판단이 있거나 피드백에 인격 비하 표현이 있거나 가이드북에 사람의 최종 판단·교전수칙 우선 문구가 없으면 M5·M10은 FAIL로 처리한다. |\n",
        "| --- | --- |\n",
        "\n",
        "| **최종 판정 결과** | ( PASS / FAIL ) 평가자 서명: ( ) |\n",
        "| --- | --- |\n",
        "\n",
        "| 안전 원칙: 본 자료의 루브릭, 근거 단계, 권한 구분은 학습용 가상 기준이다. 최종 판단은 사람이 내리며 실제 교전·작전 판단은 교전수칙과 지휘계통에 따른다. 실제 부대 자료를 입력하거나 부대 내에서 촬영하지 않는다. |\n",
        "| --- |\n",
        "\n"
      ]
    }
  ],
  "metadata": {
    "colab": {
      "provenance": []
    },
    "kernelspec": {
      "display_name": "Python 3",
      "name": "python3"
    },
    "language_info": {
      "name": "python"
    }
  },
  "nbformat": 4,
  "nbformat_minor": 0
}