계획서에는 무엇이 끝나야 쓸 수 있는지 적습니다
예측 파일이 있어도 준비물 주문이 끝난 뒤 전달되면 업무에 쓰기 어렵습니다. 분석 계획서는 모델 개발 일정뿐 아니라 어떤 문제를 풀고, 어떤 자료로 비교하며, 누가 언제 결과를 사용할지 합의하는 문서입니다.
가상의 공방에서 다음 주 수업 참석 인원을 예측해 준비물 수량을 정한다고 합시다. IBM의 CRISP-DM 계획서 안내의 목표, 자원, 위험, 일정과 검토 지점을 참고하면 다음처럼 적을 수 있습니다. 실제 기업의 양식이나 성과가 아닌 학습 예입니다.
| 항목 | 계획에 적을 내용 |
|---|---|
| 목적과 범위 | 다음 주 정규 수업별 참석 인원 예측, 특별 행사 제외 |
| 데이터와 시점 | 신청, 취소, 참석 기록과 수업 일정, 준비 수량 결정 전날까지의 정보 |
| 비교 기준 | 현재 준비 방식과 같은 기간의 예측 오차 비교 |
| 자원과 역할 | 자료 정의 확인자, 분석 담당자, 준비물 결정 담당자 |
| 검토와 적용 | 원자료 점검 뒤 착수 여부 결정, 결과 검토 뒤 일부 수업부터 적용 |
참석 기록이 실제로 남아 있는지 모르면 데이터 확보 미확정으로 적습니다. 가정을 확인된 사실처럼 채우지 않아야 확인할 담당자와 시점을 정할 수 있습니다. 결과 변수와 예측 시점부터 불명확하다면 분석 질문 작성법을 먼저 적용합니다.
범위를 늘리면 데이터와 평가도 바뀝니다
정규 수업과 특별 행사는 신청 방식과 참석 패턴이 다를 수 있습니다. 어떤 대상, 기간, 단위까지 다루고 무엇을 제외하는지 적어야 합니다. 정규 수업만 평가한 모델이 특별 행사에도 맞는다고 주장할 수는 없습니다.
수업별 총참석 인원을 시간대별 참석 인원으로 바꾸면 필요한 기록과 정답의 집계 단위가 달라집니다. 특별 행사를 추가했다면 신청, 취소, 참석의 정의와 자료 확보 시점, 비교 기간, 담당자도 다시 확인합니다. 제목이나 할 일 목록만 바꾸는 변경은 아닙니다.
한 수업에서 오차가 줄었다는 결과의 범위
수업 A의 실제 참석이 12명, 현재 방식의 예측이 16명, 새 모델이 13명이라고 가정합니다. 절대 오차는 각각 4명과 1명입니다. 이 수업에서는 새 모델이 더 가깝지만 전체 성능까지 확인한 것은 아닙니다. 여러 수업과 기간을 같은 규칙으로 비교해야 합니다.
다른 수업에서 실제 15명, 기존 예측 18명, 새 예측 11명이면 오차는 3명과 4명입니다. 이번에는 새 모델의 오차가 더 큽니다. 유리한 사례 하나만 고르면 이런 차이를 놓칩니다.
준비물이 부족한 상황과 남는 상황의 영향이 같지 않을 수 있습니다. 평균 오차와 함께 부족했던 수업 비율도 볼지, 허용 기준을 어떻게 정할지 결과를 보기 전에 합의합니다. 근거 없이 정확도 95%를 붙이기보다 무엇을 어떻게 계산한 지표인지부터 정의해야 합니다.
모델 학습 완료는 구현 결과이고 준비물 부족 감소는 업무 목표입니다. 둘 사이에는 비교 검증과 실제 활용이 있습니다. 이 차이는 CRISP-DM의 평가와 전개와도 연결됩니다.
자료를 못 받거나 예측이 없을 때의 대응
신청 기록만 있고 참석 여부가 없으면 예측의 정답을 만들 수 없습니다. 추측한 참석값으로 진행하기보다 기록을 확보하거나 질문을 바꿔야 합니다. 자료 제공 담당자와 받을 시점을 계획에 넣습니다.
이름과 연락처가 필요 없다면 분석 자료에서 제외할 수 있습니다. 개인별 연결이 필요해도 허용된 방식으로 최소 식별 값을 쓰고 접근 범위를 정합니다. 집계 결과만으로 목적을 달성할 수 있는지도 확인합니다.
운영 중 자료가 늦거나 예측이 생성되지 않는 날에는 기존 기준을 쓸지 제공을 보류할지 정합니다. 담당자와 대응이 없으면 모델을 만들었어도 업무가 멈출 수 있습니다.
날짜 옆에 다음 단계로 넘어갈 조건을 붙입니다
원자료를 확인한 뒤 분석 가능 여부를 결정하고, 비교 결과를 검토한 뒤 적용 범위를 정하는 식으로 검토 지점을 둡니다. 일정은 자료 접근성과 작업량을 확인해 잡습니다.
최종 결과에는 자료 범위, 처리 규칙, 비교 결과, 적용할 수 없는 조건과 확인 담당자를 함께 남깁니다. 혼자 하는 프로젝트도 자료 확인, 분석, 결과 검토 역할을 구분하면 빠진 일을 찾기 쉽습니다. 파일 전달과 업무에서 사용할 준비가 끝난 상태는 다릅니다.
핵심 정리와 실수 점검
핵심 정리
- 계획서는 목표, 범위, 데이터, 판단 기준, 역할과 운영 방법을 연결합니다.
- 성공 기준은 결과를 확인하기 전에 비교 대상과 함께 정합니다.
- 확인하지 않은 자료와 조건은 미확정으로 남기고 확인할 담당자와 시점을 적습니다.
놓치기 쉬운 지점
- 한 사례의 오차 감소를 전체 성능이나 실제 업무 성과로 확대하지 마세요.
- 예측 모델을 만들었다는 사실만으로 결과가 제때 전달되고 활용된다고 가정하지 않습니다.
확인할 내용
- 포함할 대상과 제외할 대상을 한 문장씩 적는다.
- 기준 방법과 같은 자료에서 비교할 지표를 정한다.
- 자료 누락이나 결과 생성 실패 때 사용할 대응을 정한다.
이해한 내용 확인하기
직접 작성한 학습용 문항입니다. 공식 기출문제가 아닙니다.
Q1. 실제 참석 12명, 기준 예측 16명, 새 예측 13명인 한 수업의 절대 오차를 각각 구하세요. 전체 성능까지 결론 낼 수 있나요?
생각한 뒤 해설 보기
기준 오차는 4명, 새 예측 오차는 1명입니다. 한 수업의 결과만으로 전체 성능을 판단할 수 없으며 같은 기준으로 여러 수업과 기간을 평가해야 합니다.
Q2. 정규 수업만으로 검증한 모델을 특별 행사에 바로 적용해도 될까요?
생각한 뒤 해설 보기
바로 적합하다고 판단할 수 없습니다. 신청 방식과 참석 패턴, 필요한 입력이 같은지 별도로 검토해야 합니다.
Q3. 모델 학습 완료를 준비물 부족 감소와 같은 성공 기준으로 적어도 되나요?
생각한 뒤 해설 보기
아닙니다. 앞은 구현 산출물이고 뒤는 업무 목표입니다. 비교 평가와 실제 활용을 확인하는 기준을 각각 연결해야 합니다.
Q4. 한 수업의 실제 참석이 15명, 기존 예측이 18명, 새 예측이 11명입니다. 절대 오차는 각각 얼마이며 새 모델이 개선됐다고 할 수 있나요?
생각한 뒤 해설 보기
기존 오차는 3명, 새 오차는 4명입니다. 이 수업의 절대 오차는 새 모델이 더 큽니다. 어느 쪽의 전체 성능이 좋은지는 같은 규칙으로 여러 수업과 기간을 비교해야 합니다.
Q5. 정규 수업 계획에 특별 행사를 포함하도록 범위를 늘렸습니다. 예측 파일의 제목만 바꾸면 될까요?
생각한 뒤 해설 보기
아닙니다. 행사별 신청, 취소, 참석의 정의와 입력 확보 시점, 필요한 자료, 비교 기준과 운영 담당자를 재검토해야 합니다. 범위 변경이 데이터와 평가와 운영 계획에 미치는 영향을 확인합니다.
더 궁금한 점
작은 개인 학습 프로젝트에도 역할을 적어야 하나요?
혼자 수행하더라도 자료의 의미를 확인하는 일, 분석하는 일, 결과를 검토하는 일을 구분해 적으면 누락을 찾기 쉽습니다. 실제로 존재하지 않는 팀원을 만들 필요는 없습니다.
데이터를 아직 받지 못했는데 계획서를 쓸 수 있나요?
가능하지만 확보 여부와 품질을 확인하기 전의 가정임을 표시해야 합니다. 자료 확인을 첫 검토 단계로 두고 그 결과에 따라 범위와 일정을 수정하세요.
참고 자료와 확인 범위
- IBM CRISP-DM 프로젝트 계획 안내 ↗
업무 목표, 자원, 위험, 일정과 검토 지점을 계획에 포함하는 원칙을 참고했습니다. 양식, 공방 사례와 오차 수치는 자체 제작입니다.
- IBM 데이터 이해와 준비 ↗
분석 전 자료의 의미, 품질, 저장 및 사용 조건을 확인하는 원칙을 참고했습니다.