AI 도구를 선택하기 전에 실제로 통제할 수 있는 업무를 적으세요. 답을 쉽게 검사할 수 있는 작업도 비공개 데이터, 되돌릴 수 없는 조치 또는 사람이 내려야 할 판단을 포함할 수 있습니다. 이 가이드는 자신의 업무 전반에 걸친 날짜가 있는 의사결정 지도를 만드는 데 도움을 줍니다. 완성된 결과는 첫 시험 제안 하나 또는 아직 준비된 후보가 없다는 기록된 결정입니다. 이를 완성하려고 AI를 실행할 필요는 없습니다.

출발점은 Andrej Karpathy가 2025년 11월에 쓴 검증 가능성에 관한 글입니다. 그는 시도를 초기화하고 효율적으로 반복하며 신뢰할 만한 보상 신호를 줄 수 있는 환경일수록 AI 최적화에 열려 있다고 주장합니다. 이는 조사할 질문이지 직장 내 승인 규칙이 아닙니다. 아래 작업 기록은 자체 제작한 양식입니다. 실제 절차에서 책임자가 확인해야 하는 사람, 허가와 결과를 추가했습니다. NIST의 자발적 AI 위험 관리 프레임워크 역시 조직이 AI 시스템을 검토할 때 맥락, 감독과 측정을 요구하지만, 이 양식을 보증하거나 작업을 인증하지는 않습니다.

준비할 것

본인이 담당하거나 평가할 권한이 있는 실제 업무 기록에 접근할 수 있어야 합니다. 작업 일지, 일정표, 절차, 접수 대기열 또는 업무 담당자가 이에 해당합니다. 지도와 근거 링크를 보관할 비공개 장소, 이름을 명시한 절차 책임자, 결정에 이의를 제기할 권한이 있는 다른 사람도 필요합니다. 어떤 팀이나 절차 및 날짜를 조사하는지 밝히세요. 지도를 만들려고 기밀 원자료를 AI 서비스에 넣지 마세요.

기록을 찾고 검토할 시간을 고려하세요. 지도 자체에는 AI 계정, 유료 API 또는 소프트웨어 구매가 필요하지 않습니다. 나중에 시험하려면 별도 허가, 도구 요금, 직원의 검토 시간과 오류 예산이 필요할 수 있습니다.

1. 실제 수행되는 업무를 목록으로 만들기

작업을 나열하기 전에 조사 기간과 범위를 정하세요. 다른 사람이 찾을 수 있도록 각 행의 출처를 기록하세요. 반복 작업마다 계기, 실제 입력, 현재 수행자, 필요한 산출물, 수신자와 기존 승인을 적으세요. 기록이 빠뜨린 내용을 담당자에게 확인받으세요. 검증되지 않은 세부 사항은 알 수 없음으로 표시하세요.

산출물, 허가나 결과가 달라지면 업무 흐름을 나누세요. 포괄적인 이름은 다른 권한이 필요한 인계를 숨길 수 있습니다. 목표 개수 없이 실제 업무에 맞춰 행을 만드세요. 제외한 팀이나 기간을 적어 검토자가 빠진 작업을 부적절한 후보로 오해하지 않도록 하세요.

확인: 검토자가 근거 링크를 따라가 책임자를 찾고 무엇을 누구에게 전달해야 하는지 말할 수 있나요? 목록이 부실하다면 순위를 정하기 전에 책임자의 기록으로 돌아가세요.

2. 도구보다 검사 방법을 먼저 설명하기

산출물마다 작성자가 아닌 사람이 무엇을 살필지 물으세요. 권위 있는 출처, 정확한 통과 기준과 필요한 판단을 명시하세요. 검토자는 누락이나 그럴듯하지만 틀린 답을 어떻게 찾나요? 검사에 작업 자체만큼의 노력이 들지 않나요? 누가 검사할 수 있는지, 검토 노력에 관해 알려진 것과 아직 모르는 것을 기록하세요.

검사 체계를 기존, 제안 또는 알 수 없음으로 구분하세요. “기존”은 현재 절차에 검사가 있고 그 사용 방식의 근거도 있다는 뜻입니다. “제안”은 가능한 기준을 썼지만 관련 오류를 잡는다는 증거는 없다는 뜻입니다. 어느 표시도 AI 산출물이 통과함을 입증하지 않습니다. 진실의 기준이 되는 출처나 실행 가능한 통과 규칙이 없는 작업은 첫 시험 후보가 되기 전에 준비가 필요합니다.

이제 Karpathy의 글을 바탕으로 세 가지 질문을 따로 하세요. 실패한 시도를 지속적인 피해 없이 초기화할 수 있나요? 합리적인 시간과 비용 안에 충분한 횟수의 허가받은 시도를 할 수 있나요? 각 시도에 믿을 만한 검사를 적용할 수 있나요? 각각 예, 아니요 또는 알 수 없음을 현장의 근거와 함께 적으세요. Karpathy는 AI 최적화를 논할 때 이 특성을 사용합니다. 답변으로 직장에서의 사용 허용 여부가 결정되지는 않습니다.

3. 권한과 실패 비용 기록하기

검사 가능성은 결정의 일부일 뿐입니다. 누가 입력 데이터를 통제하는지, 제안한 AI 사용과 정보 공개가 허용되는지, 누가 영향을 받을 수 있는지 기록하세요. 미래의 도구가 읽거나 쓸 수 있는 내용과 조치를 승인할 유일한 주체를 정하세요. 쉽게 되돌릴 수 없는 후속 단계를 적으세요. 잘못 통과시켰을 때의 예상 비용을 사람의 검사 및 재작업 비용과 나란히 적고, 추정을 뒷받침할 수 없으면 알 수 없음을 사용하세요.

산출물 검사가 놓칠 수 있는 맥락도 적으세요. 불문율, 예외, 변하는 원자료 또는 책임 있는 사람의 판단이 필요한 결정 등입니다. 도구에 허가를 요청하라는 프롬프트 자체는 허가나 접근 제어가 아닙니다. NIST의 MAP 지침은 사용 맥락, 영향을 받는 사람, 데이터와 감독을 살피도록 요구하며, MEASURE 지침은 시험 방법과 한계를 다룹니다. 둘 다 자발적 지침이며 각 행에 대한 승인 도장이 아닙니다.

확인: 권리, 공개, 조치를 승인할 사람 또는 믿을 만한 복구 방법이 불분명하면 그 불확실성을 기록에 남기세요. 잘 정리된 검사로 해결할 수 있는 문제가 아닙니다.

4. 각 행을 분류하고 첫 후보를 최대 하나 고르기

다음 자체 편집 양식의 분류를 사용하고 행마다 이유와 근거 링크를 적으세요.

  • 범위가 제한된 시험 후보: 산출물, 검사, 초기화 경로와 별도로 승인받을 시험의 권한을 정할 수 있습니다. 조사 후보이지 자동화 허가가 아닙니다.
  • 검사 준비: 작업은 설명됐지만 통과 기준, 권위 있는 출처 또는 검사 주체를 더 정의하거나 검증해야 합니다.
  • 사람을 위한 보조만 허용: 제한적인 초안이나 분석은 도움이 될 수 있지만, 이름을 명시한 사람이 중요한 판단과 승인을 유지합니다. 실제 사용에는 여전히 허가가 필요합니다.
  • 보류: 권리, 맥락, 실패 결과, 복구 또는 다른 필수 근거가 해결되지 않았습니다.

모르는 것을 억지로 점수로 바꾸지 마세요. 제한된 시험의 조건을 충족할 수 있는 행만 비교하세요. 검토 부담과 잘못된 통과의 피해를 포함해 하나를 먼저 선택하는 이유를 적으세요. 모든 행에 미해결 전제가 있다면 아직 없음 역시 완전한 결정입니다. 재검토에 필요한 사람과 근거를 적으세요.

5. 수용 계획을 제안하고 지도 검토받기

첫 후보의 미래 시험을 실행하지 않고 정의하세요. 허용 표본과 입력 범위, 참조할 현재 업무 경로, 원하는 산출물, 정확한 통과·실패 기준, 검사 주체와 사람 검토자를 정하세요. 시도 횟수, 시간, 도구 요금과 검토 노력의 상한을 제안하세요. 언제 멈출지, 현재 절차로 어떻게 돌아갈지, 누가 나중에 시험을 승인할 수 있는지, 무엇을 기록할지 정하세요. 통과, 놓친 부분, 실패, 재시도, 검토 시간과 전체 비용을 포함하세요. 승인과 실제 관찰 결과는 존재할 때까지 비워 두세요. 산출물이 외부 조치를 일으킬 수 있다면 그 조치는 지정된 사람의 승인 아래 두세요.

절차 책임자와 두 번째 권한 있는 검토자에게 전체 목록을 살펴보게 하세요. 빠진 업무, 출처 정확성, 검사 실행 가능성, 권리와 후보 또는 후보 없음의 이유를 따져야 합니다. 각 사람의 실제 결정과 날짜, 의견 차이와 이를 해결할 근거를 기록하세요. 지도를 받아들였다고 제품 시험이 허가되는 것은 아닙니다. 작업, 데이터, 권리, 검사나 결과가 바뀌면 새 행 결정에 날짜를 붙이고 이전 기록을 보존하세요.

나중에 도구 시험이 승인되면 소규모 기업의 한 작업을 위한 AI 도구를 선택하거나 거절하는 별도 가이드가 선택한 작업에서 시작합니다. 이 지도는 제품 선택과 시험 전에 끝납니다.

빈 의사결정 지도 양식

항목을 비공개 문서나 표에 복사하세요. 실제 작업마다 한 행을 더하고 모르는 사실은 그대로 드러내세요. 빈칸을 상상한 업무로 채우지 마세요.

목록 머리말

  • 절차 및 범위: ____
  • 포함 날짜 / 제외 업무: ____
  • 절차 책임자 / 지도 결정 책임자: ____
  • 근거 위치와 접근 규칙: ____
  • 지도 날짜 및 버전: ____

작업 행마다 반복

  • 작업 ID / 책임자 / 근거 링크 및 날짜: ____
  • 실제 계기, 입력과 권위 있는 출처: ____
  • 현재 수행자, 방법과 승인: ____
  • 필요한 산출물과 수신자: ____
  • 통과 기준, 예외와 검사 출처: ____
  • 독립 검사 주체 및 상태(기존 / 제안 / 알 수 없음): ____
  • 검사가 놓칠 수 있는 것 / 검사 시간: ____
  • 실패 시도 초기화 또는 취소 / 허가된 반복 시도와 비용: ____
  • 잘못된 통과의 결과 / 후속 조치 / 사람만의 판단: ____
  • 데이터 권리, 개인정보와 공개 허가: ____
  • 허용 읽기·쓰기 / 사람 승인자와 중단 권한: ____
  • 분류, 이유, 부족한 근거와 다음 책임자·조치: ____
  • 결정 날짜 / 재검토가 필요한 사건: ____

첫 후보 결정과 시험 제안

  • 후보 작업 ID 또는 “아직 없음”과 이유: ____
  • 다음 적격 행보다 이 행을 우선하는 이유: ____
  • 허가된 표본·입력 및 제안하는 도구·조치 범위: ____
  • 현재 경로 참조, 산출물과 정확한 통과·실패 기준: ____
  • 검사 주체, 검토자, 예외와 잘못된 통과 검사: ____
  • 제안하는 시도, 시간, 요금과 검토 상한: ____
  • 중단, 초기화 및 현재 절차 복귀 규칙: ____
  • 후속 시험 승인자 / 승인 결정과 날짜: ____
  • 실제 시도, 결과와 비용(관찰 전까지 빈칸): ____
  • 절차 책임자 결정·날짜: ____
  • 두 번째 검토자 결정·날짜, 이의와 해결: ____

핵심 변화

검사 가능한 산출물은 작업 평가를 쉽게 하지만 주변 업무를 감독 없는 AI에 적합하게 만들지는 않습니다. 첫 번째로 유용한 결정은 통제하는 업무를 추적 가능한 지도로 만드는 것입니다. 무엇을 전달해야 하고, 오류를 어떻게 찾고, 실패한 시도를 억제할 수 있으며, 누가 시험을 승인할 권리가 있는지 적습니다. 답은 제한된 후보 하나 또는 아직 없음일 수 있습니다. 이 절차가 제안하는 것은 그 결정 기록입니다. BIG CHANGE는 조직에서 이를 시험하거나 시간, 품질, 비용 이익을 측정하지 않았습니다.

출처 및 추가 자료