280 lines
16 KiB
Markdown
280 lines
16 KiB
Markdown
**ISR06 실습가이드 - 다출처 ISR 보고서 신뢰도 등급·교차검증 절차**
|
|
|
|
구 분 **실습가이드 [교육용가상자료]**
|
|
|
|
**1. 실습 개요**
|
|
|
|
본 실습은 교육용 가상 지역의 다출처 첩보 보고를 읽고 출처 신뢰성(A~F)과 정보 정확성(1~6)을 따로 평가하며, 상충을 식별하고 교차검증해 승인·보류를 판단하는 절차를 문서로 설계하고 모의 훈련으로 시험·개선하는 과정이다. 정보 수집 방법은 다루지 않으며 이미 접수된 가상 보고의 분석 절차만 연습한다. 조별(4~6명)로 분석 책임·기록자·평가자·레드팀 역할을 돌려 맡고, 미션마다 실습자료(ISR06_실습자료_[교육용가상자료].docx)의 제공 자료와 작성 서식을 사용한다. 최종 판단은 사람이 내리며 실제 작전·교전 판단은 교전수칙과 지휘계통에 따른다. 매트릭스와 권한 구분은 학습용 가상 기준이다.
|
|
|
|
| **과제** | ISR06 다출처 ISR 보고서 신뢰도 등급·교차검증 절차 |
|
|
| --- | --- |
|
|
|
|
| **난이도·유형** | 중급 / 문서·분석형 |
|
|
| --- | --- |
|
|
|
|
| **예상 소요시간** | 미션 10개, 총 27시간 |
|
|
| --- | --- |
|
|
|
|
| **준비물** | ISR06_실습자료_[교육용가상자료].docx(인쇄본 또는 편집 파일), 초시계, 역할 명찰, 보고 카드(통제관용), 필기구, 조별 산출물 폴더 |
|
|
| --- | --- |
|
|
|
|
**2. 진행 방법**
|
|
|
|
- 조는 4~6명으로 편성하고 분석 책임(조장), 기록자, 평가자 2명, 레드팀을 정한다. 미션마다 역할을 바꿔 모든 조원이 레드팀을 경험한다.
|
|
|
|
- 실습자료의 빈칸 '( )'과 빈 셀은 조별로 채운다. 앞 미션 산출물(등급 매트릭스, 근거 매트릭스, 의사결정 트리 등)은 뒤 미션의 입력이므로 보관한다.
|
|
|
|
- 스트레스 테스트(M7)에서 평가자 2명은 서로 상의하지 않고 채점하며 통제관 메모는 학습자에게 공개하지 않는다.
|
|
|
|
- 판단은 '승인·보류 유지·추가 수집 요청' 중 하나로 기록한다. 점수나 등급이 승인을 자동으로 결정하는 칸이나 문장은 만들지 않는다.
|
|
|
|
- 실제 부대·위치·수집 수단·첩보 내용은 쓰지 않으며 부대 자료를 외부 AI 서비스에 입력하지 않는다. 직책은 가상 직책으로만 적는다.
|
|
|
|
**3. 미션 진행 요약**
|
|
|
|
| **미션** | **난이도·시간** | **핵심 확인 결과** |
|
|
| --- | --- | --- |
|
|
| **M1. 다출처(HUMINT, SIGINT, OSINT, IMINT) ISR 첩보 보고서 구조 및 수집 체계 분석** | 초급
|
|
1.5시간 | 사례 5건 검토, 출처 유형 4가지 구조·약점 비교 |
|
|
| **M2. 다출처 첩보 신뢰도(출처 신뢰성·정보 정확성) 6단계 등급 매트릭스 설계** | 초급~중급
|
|
2시간 | 등급 6단계(두 축)와 평가 지표 10개 이상 정의 |
|
|
| **M3. 정보 출처별 상충 정보 식별 및 교차검증(Cross-validation) 세부 평가 기준 수립** | 중급
|
|
2.5시간 | 정보 공백 요인 8개 이상, 상충 4건 원인·확인 방법 작성 |
|
|
| **M4. 단일 출처 단정 방지를 위한 다출처 승인/보류(Hold) 판단 지침서 초안 작성** | 중급
|
|
3시간 | 근거 12개 이상, 산식 규칙 완성 |
|
|
| **M5. 가상 전장 복합 시나리오 기반 다출처 ISR 보고서 교차검증 모의 작성 실습** | 중급~고급
|
|
3시간 | 분기점 4개 조건 명시, 책임 직책 100% 매핑 |
|
|
| **M6. 지휘관 브리핑용 ISR 신뢰도 등급화 요약 차트 및 출처 추적 템플릿 제작** | 중급
|
|
2.5시간 | 사실·판단 혼동 0건, 금지 표현 6개 이상 |
|
|
| **M7. 기만 첩보 주입 상황 모의 교차검증 스트레스 테스트 및 블라인드 검증** | 고급
|
|
3시간 | 기만 보고를 높은 등급으로 승인한 판단 0건 |
|
|
| **M8. AAR을 통한 첩보 불일치 해결 실패 원인 분석 및 교차검증 루브릭 개선** | 고급
|
|
3.5시간 | 레드팀 쟁점 5건 이상, 쟁점별 반박·수정안 100% |
|
|
| **M9. 피드백 반영 다출처 보고서 최종 보정 및 정보 판단 신뢰성 검증** | 고급
|
|
3시간 | 재검증 7건 개선 전후 비교, 브리핑 A4 1페이지 |
|
|
| **M10. 다출처 ISR 신뢰도 등급화 및 교차검증 실무 표준운용절차(SOP) 완성** | 최고급
|
|
3시간 | 8개 장과 부록 100% 완비, 모든 기준에 근거 표기 |
|
|
|
|
**미션 1. 다출처(HUMINT, SIGINT, OSINT, IMINT) ISR 첩보 보고서 구조 및 수집 체계 분석**
|
|
|
|
| **난이도·시간** | 초급 · 1.5시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 실습자료 '가상 첩보 보고 사례 5건'을 읽고 출처 유형과 보고서 항목에 표시한다(20분).
|
|
2) 작성 서식 1 비교표에 출처 유형별 필수 항목, 약점, 보완 방법을 적는다(35분).
|
|
3) 작성 서식 2에 SOP 8개 장의 제목과 핵심 내용을 적고 지휘관 결심 의제 순으로 배열한다(25분).
|
|
4) 점검표로 빠진 출처 유형이 없는지 확인한다(10분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 사례 5건 검토, 출처 유형 4가지 구조·약점 비교
|
|
SOP 8개 장 목차를 결심 의제 순으로 배열 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 사례 5건 중 독립 출처가 아닌 보고(C5)를 골라 왜 근거 수에 포함하면 안 되는지 두 문장으로 적는다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 출처별 구조·약점 비교표, SOP 목차 골격 |
|
|
| --- | --- |
|
|
|
|
**미션 2. 다출처 첩보 신뢰도(출처 신뢰성·정보 정확성) 6단계 등급 매트릭스 설계**
|
|
|
|
| **난이도·시간** | 초급~중급 · 2시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 가상 보고 5종을 읽고 6x6 등급 틀의 판정 기준을 조별로 작성한다(35분).
|
|
2) 작성 서식 1에 평가 지표를 10개 이상 쓰고 어느 축에 쓰는지 표시한다(30분).
|
|
3) 작성 서식 2에서 조원이 각자 R1~R5의 등급을 매기고 일치 여부를 비교한다. 불일치 이유를 기준 문구 수정에 반영한다(25분).
|
|
4) 작성 서식 3 교차검증 필수 규칙의 빈칸을 채우고 점검표로 확인한다(10분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 등급 6단계(두 축)와 평가 지표 10개 이상 정의
|
|
보고 5종 중 4건 이상 조원 등급 일치 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 독립 확인 요건을 2개에서 3개로 바꾸면 R1~R5의 판단이 어떻게 달라지는지 비교한다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 6x6 신뢰도 매트릭스, 평가 지표표, 일관성 시험 결과 |
|
|
| --- | --- |
|
|
|
|
**미션 3. 정보 출처별 상충 정보 식별 및 교차검증(Cross-validation) 세부 평가 기준 수립**
|
|
|
|
| **난이도·시간** | 중급 · 2.5시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 상충 보고 쌍 K1~K4를 읽고 상충 유형을 분류한다(20분).
|
|
2) 작성 서식 1에 원인 후보를 2개 이상 쓰고 확인 방법과 잠정 결론을 적는다(40분).
|
|
3) 작성 서식 2 정보 공백을 8개 이상 쓰고 영향도와 대체 수집 수단을 적는다(35분).
|
|
4) 작성 서식 3에서 확신 표현 규칙과 판단의 한계 3가지를 적고 점검표로 확인한다(15분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 정보 공백 요인 8개 이상, 상충 4건 원인·확인 방법 작성
|
|
판단 한계 3가지와 확신 표현 규칙 명시 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 영향도가 '높음'인 정보 공백 하나를 골라 대체 수집 수단이 실패할 때의 차선책을 적는다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 상충 분류표, 정보 공백·영향도 매트릭스, 판단 한계 문서 |
|
|
| --- | --- |
|
|
|
|
**미션 4. 단일 출처 단정 방지를 위한 다출처 승인/보류(Hold) 판단 지침서 초안 작성**
|
|
|
|
| **난이도·시간** | 중급 · 3시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 근거 항목 예시 4개를 참고해 12개 이상으로 늘리고 지지 방향과 가중치를 서식 1에 적는다(40분).
|
|
2) 서식 2 점수 산식과 규칙 1~4의 빈칸을 채운다(20분).
|
|
3) 가상 사례 S1~S3에 근거를 적용해 점수를 계산하고 서식 3 판단 절차 초안을 쓴다(40분).
|
|
4) 레드팀이 서식 4에 반박을 쓰고 작성 팀이 대응해 최소 증거 요건을 보완한다(20분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 근거 12개 이상, 산식 규칙 완성
|
|
사례 3종 점수·판단 기록, 레드팀 반박 3건 대응 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 가중치를 바꾸어 S1~S3의 판단이 달라지는지 확인하고, 판단이 쉽게 뒤집히는 사례는 기준이 취약하다는 의미임을 적는다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 근거 매트릭스, 산식, 승인·보류 판단 지침서 초안, 레드팀 반박 기록 |
|
|
| --- | --- |
|
|
|
|
**미션 5. 가상 전장 복합 시나리오 기반 다출처 ISR 보고서 교차검증 모의 작성 실습**
|
|
|
|
| **난이도·시간** | 중급~고급 · 3시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 조별로 시나리오 전개와 경계선 묶음 B1~B5를 읽는다(15분).
|
|
2) 서식 1 의사결정 트리와 서식 2 분기점·책임 직책 매핑표를 완성한다(40분).
|
|
3) 서식 3 모의 결심 기록지에 B1~B5의 판단과 근거를 적고 조원 합의 여부를 표시한다(35분).
|
|
4) 서식 4 긴급 신속 승인과 사후 감사 항목을 정하고 점검표로 확인한다(20분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 분기점 4개 조건 명시, 책임 직책 100% 매핑
|
|
경계선 5종 판단·근거 기록, 사람의 승인 없이 승인되는 경로 0건 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 분기점 순서를 바꾸면 B1~B5 판단이 달라지는지 확인하고 순서를 정한 이유를 적는다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 의사결정 트리, 분기점 매핑표, 모의 결심 기록지 |
|
|
| --- | --- |
|
|
|
|
**미션 6. 지휘관 브리핑용 ISR 신뢰도 등급화 요약 차트 및 출처 추적 템플릿 제작**
|
|
|
|
| **난이도·시간** | 중급 · 2.5시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 가상 분석 보고 3종에서 사실·판단·조치·미확인 부분에 서로 다른 표시를 한다(20분).
|
|
2) 혼동 유발 표현 목록을 6개 이상으로 완성하고 대체 표현을 적는다(20분).
|
|
3) 서식 1 요약 차트와 서식 2 출처 추적 템플릿을 만든다(30분).
|
|
4) 서식 3 요약형과 서식 4 상세형으로 보고 3종을 옮겨 적고 점검표로 확인한다(40분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 사실·판단 혼동 0건, 금지 표현 6개 이상
|
|
요약형·상세형·요약 차트·출처 추적 서식 완비 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 다른 조의 서식을 받아 보고 1종을 옮겨 적어 보고 칸 구분이 불명확한 부분을 지적한다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 요약 차트, 출처 추적 템플릿, 요약형·상세형 기록 서식 |
|
|
| --- | --- |
|
|
|
|
**미션 7. 기만 첩보 주입 상황 모의 교차검증 스트레스 테스트 및 블라인드 검증**
|
|
|
|
| **난이도·시간** | 고급 · 3시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 역할을 배정한다(분석 책임, 기록자, 평가자 2명, 통제관). 평가자는 루브릭을 먼저 읽는다(15분).
|
|
2) 통제관이 보고 카드를 시간순으로 투입한다. 분석 책임은 M2~M6 산출물로 등급을 매기고 기록자는 판단과 보류 사유를 기록한다(50분).
|
|
3) 평가자가 상의 없이 서식 2에 채점하고 일치율을 계산한다(20분).
|
|
4) 서식 3에서 기만 보고 처리 결과를 집계하고 통제관 메모와 대조한 뒤 점검표로 확인한다(15분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 기만 보고를 높은 등급으로 승인한 판단 0건
|
|
평가자 2명 채점 일치율 80% 이상 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 일치율이 낮은 영역의 루브릭 문구를 관찰 가능한 행동으로 고쳐 같은 기록으로 재채점한다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 루브릭, 평가자 채점 일치표, 기만 보고 처리 기록 |
|
|
| --- | --- |
|
|
|
|
**미션 8. AAR을 통한 첩보 불일치 해결 실패 원인 분석 및 교차검증 루브릭 개선**
|
|
|
|
| **난이도·시간** | 고급 · 3.5시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) AAR 일지 A·B를 시간순으로 읽고 서식 1에 계획과 실제의 차이를 적는다(25분).
|
|
2) 원인을 사람·절차·정보·통신으로 분류하고 개선안을 쓴다. 개인 비난 표현은 쓰지 않는다(25분).
|
|
3) 레드팀이 서식 2에 취약한 전제 5건 이상을 비판하고 작성 팀이 반박 또는 수정안과 경고 문구를 적는다(40분).
|
|
4) 서식 3 반대 방향 위험과 서식 4 수정 반영 계획을 작성한다(20분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 레드팀 쟁점 5건 이상, 쟁점별 반박·수정안 100%
|
|
취약한 전제에 경고 문구 명시 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 작성 팀이 반박한 쟁점 중 설득력이 가장 약한 것을 골라 다시 반박해 보고 근거를 보강한다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | AAR 원인 분석표, 레드팀 쟁점·대응표, 수정 반영 계획표 |
|
|
| --- | --- |
|
|
|
|
**미션 9. 피드백 반영 다출처 보고서 최종 보정 및 정보 판단 신뢰성 검증**
|
|
|
|
| **난이도·시간** | 고급 · 3시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 개선 전후 기준을 서식 1 비교표에 나란히 적고 바뀐 이유를 근거 미션과 함께 쓴다(25분).
|
|
2) 재검증 7건에 개선 전·후 기준을 각각 적용하고 서식 2에 판단, 일치, 시간을 적는다(40분).
|
|
3) 서식 3 BLUF 틀로 A4 1페이지 브리핑을 작성한다(30분).
|
|
4) 서식 4에 따라 3분 발표와 질의 응답을 리허설하고 기록한다(25분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 재검증 7건 개선 전후 비교, 브리핑 A4 1페이지
|
|
3분 이내 발표, 질의 3건 이상 응답 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | 브리핑에서 신호등 색을 바꾸면 지휘관의 결심이 어떻게 달라지는지 가정해 보고 색 기준을 한 줄로 적는다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 개선 전후 비교표, 재검증 결과표, 1페이지 브리핑 |
|
|
| --- | --- |
|
|
|
|
**미션 10. 다출처 ISR 신뢰도 등급화 및 교차검증 실무 표준운용절차(SOP) 완성**
|
|
|
|
| **난이도·시간** | 최고급 · 3시간 |
|
|
| --- | --- |
|
|
|
|
| **진행 순서** | 1) 미션 1~9 산출물을 SOP 8개 장과 부록에 배치하고 빠진 내용을 보완한다(60분).
|
|
2) 서식 1 근거 표기 점검표로 모든 조항에 근거 미션·가상 자료가 있는지 확인한다(20분).
|
|
3) 교리·법무·작전 역할로 나누어 다른 조의 SOP를 심의하고 서식 2에 지적 사항을 적는다(30분).
|
|
4) 지적 사항을 반영하고 서식 3 개정 관리를 정한 뒤 최종본을 마무리한다(30분). |
|
|
| --- | --- |
|
|
|
|
| **확인할 결과** | 8개 장과 부록 100% 완비, 모든 기준에 근거 표기
|
|
모의 심의 지적 사항 반영, 사람의 최종 판단·교전수칙 우선 문구 명시 |
|
|
| --- | --- |
|
|
|
|
| **도전 과제** | SOP를 다른 가상 지역으로 바꿔 쓰려면 무엇만 교체하면 되는지(출처 풀, 보고 카드, 직책) 교체 목록을 만든다. |
|
|
| --- | --- |
|
|
|
|
| **제출물** | 다출처 ISR 신뢰도 등급화·교차검증 SOP 최종본, 근거 표기 점검표, 심의 반영표 |
|
|
| --- | --- |
|
|
|
|
**4. 최종 점검표**
|
|
|
|
| **점검 항목** | **확인** |
|
|
| --- | --- |
|
|
| 미션 1~10 산출물을 모두 작성했다 | ( ) |
|
|
| 출처 신뢰성과 정보 정확성을 따로 평가하고 결합 코드로 표기했다 | ( ) |
|
|
| 재전달·재인용을 독립 근거로 세지 않았고 단일 출처만으로 승인하지 않았다 | ( ) |
|
|
| 점수나 등급이 사람의 승인을 대신하는 칸이나 문장이 없다 | ( ) |
|
|
| AAR에서 개인 비난 없이 사실과 근거로 원인을 적었다 | ( ) |
|
|
| 보류 과다의 반대 방향 위험(정보 지원 지연)도 점검했다 | ( ) |
|
|
| 실제 부대·위치·수집 수단·첩보 내용을 쓰지 않았고 실제 교전은 교전수칙·지휘계통에 따른다고 명시했다 | ( ) |
|
|
| 평가 채점표의 필수 기준(M1·2·3·5·7·9·10)을 모두 확인했다 | ( ) |
|