회의가 또 미뤄졌다.
임원이 물었다. 우리 AI, 지금 어느 수준입니까. 팀장 셋의 대답이 전부 달랐다. 한 명은 팀원 절반이 챗GPT를 쓰니 잘하는 편이라 했고, 다른 한 명은 사내 데이터 연동도 안 됐으니 시작도 못 했다고 했다. 둘 다 틀린 말은 아니었다. 판단 기준이 없었을 뿐이다. 그래서 결론은 늘 같다. 더 검토해보자, 그리고 다음 분기 예산은 또 넘어간다.
다 읽지 않으셔도 됩니다. 감으로 매긴 성숙도의 문제나 6개 영역 설계 배경은 건너뛰고 문항부터 봐도 되고, 30문항을 돌릴 시간조차 없다면 17문항 5분 정밀 진단이 그 자리를 대신합니다.
핵심 요약
- 6개 영역 × 5문항 × 0~3점 = 90점 만점의 AI 성숙도 자가진단
- 총점이 아니라 영역별 최저점, 즉 병목이 결정하는 실제 레벨
- 거버넌스 소계 5점 미만이면 총점과 무관하게 레벨 1단계 하향
- 병목 영역 하나 → 다음 90일 과제, 재측정은 분기 1회
감으로 매긴 성숙도는 회의실에서 3초 만에 소비된다
도구도 있고 교육도 돌렸는데 판단 기준이 없다. 그 상태에서 나오는 말이 “우리 팀은 AI 꽤 쓰는 편이에요”다. 이 문장은 임원 회의에서 3초 만에 소비되고 끝납니다. 반면 “90점 중 41점, 전략은 12점인데 거버넌스는 3점”은 예산 항목으로 번역됩니다.
결재하는 쪽에 앉아 교육 품의서를 승인하고 반려해봤습니다. 반려한 문서의 공통점은 문장력이 아니었다. 필요성은 말하는데 현재 수준을 숫자로 대지 못하는 것이었다.
AI 성숙도 평가 체크리스트의 쓸모는 셋입니다. 현재 위치 확인, 부서 간 편차 노출, 다음 분기 우선순위 도출. 레벨은 우열이 아니라 다음 단계로 가는 좌표죠.
그래서 이 글은 30문항 채점에서 시작한다.
6개 영역 30문항 체크리스트와 0~3점 채점 규칙
가장 흔한 실수는 ‘도구를 얼마나 쓰는가’ 하나로 묻는 것이다. 그러면 계정 수만 남고 왜 확산이 멈췄는지는 설명되지 않는다.
문항은 특정 벤더 프레임을 그대로 옮긴 게 아닙니다. AWS 생성형 AI 성숙도 모델의 4단계, Microsoft의 주체적 AI 성숙도 모델, Databricks 거버넌스 매트릭스, GitLab DevSecOps 자가진단의 문항 형식을 교차해 국내 조직이 실제로 답할 수 있는 문장으로 다시 썼습니다.
6개 영역과 배점
각 영역 15점씩이다. ①전략·리더십(사업 목표·KPI 연결과 예산·책임자), ②데이터 기반(데이터 위치와 관리 주체), ③기술·도구(승인 도구·사내 연동(RAG)·모델 변경 관리), ④인력·리터러시(직무별 정의와 교육·측정), ⑤업무 프로세스(개인 재주가 아닌 표준 절차(SOP) 편입), ⑥거버넌스·리스크(검수 책임·유출 방지·규제 대응 문서화).
채점 규칙과 3인 중앙값
기준은 ‘있다/없다’가 아니라 어디까지 정착했는가입니다.
- 0점 — 전혀 아니거나 해당 없음. ‘모르겠다’도 0점입니다
- 1점 — 일부 개인이 알아서 함(문서·공유 없음)
- 2점 — 일부 팀에 절차로 정착(문서 있음, 전사 아님)
- 3점 — 전사 표준이고 준수 여부나 효과를 측정 중
팀장 단독 채점은 피하는 게 좋습니다. 결정권자는 자기 조직을 후하게 본다. 최소 3인이 따로 매긴 뒤 문항별 중앙값을 쓰면 한 사람의 극단값이 결과를 흔들지 않습니다. 1인 응답에 15~20분이면 충분하다.
영역별 30문항 전체
① 전략·리더십
- AI 활용 목표가 부서 KPI나 사업 목표와 문서로 연결돼 있다
- AI 도입을 총괄하는 책임자(또는 TF)가 이름으로 지정돼 있다
- 올해 AI 관련 예산이 별도 항목으로 편성돼 있다
- 경영진이 AI 활용 현황을 정기적으로 보고받는 자리가 있다
- AI로 대체·재배치할 업무의 우선순위 목록이 있다
② 데이터 기반
- AI에 투입 가능한 사내 데이터 목록(문서·DB·이력)이 정리돼 있다
- 데이터별 소유 부서와 관리 담당자가 지정돼 있다
- 데이터의 출처와 변경 이력을 추적할 수 있다(데이터 리니지)
- 개인정보·기밀 등급에 따라 AI 투입 가능 여부가 분류돼 있다
- 주요 업무 문서가 검색 가능한 형태로 보관된다
③ 기술·도구
- 회사가 승인한 AI 도구 목록과 계정 발급 절차가 있다
- 사내 문서를 연결한 RAG 검색 환경이 있거나 구축 중이다
- 업무 프롬프트 라이브러리가 팀 단위로 공유·버전관리된다
- 사용 모델·버전과 용도를 기록한 모델 레지스트리(대장)가 있다
- 에이전틱 AI 도입 시 승인 절차가 정의돼 있다
④ 인력·리터러시
- 직무별로 필요한 AI 리터러시 수준이 정의돼 있다
- 신규 입사자 온보딩에 AI 도구 사용법이 포함돼 있다
- 지난 12개월 내 AI 교육을 받은 인원 비율을 숫자로 말할 수 있다
- 교육 후 산출물(업무 지시서, 자동화 사례)이 남아 공유된다
- 부서별로 질문을 받아주는 내부 AI 사수(챔피언)가 있다
⑤ 업무 프로세스 내재화
- AI를 쓰는 업무의 표준 절차서(SOP)가 문서로 있다
- 담당자가 바뀌어도 같은 품질이 나오도록 프롬프트가 표준화돼 있다
- AI 적용 전후의 소요 시간이나 처리량을 측정한 기록이 있다
- 월 1회 이상 정기 업무에 AI가 고정 단계로 들어가 있다
- 실패한 시도를 기록하고 공유하는 채널이 있다
⑥ 거버넌스·리스크
- AI 산출물 검수 책임자가 RACI 매트릭스로 지정돼 있다
- 외부 공개물에 AI 사용 사실을 표기하는 기준이 있다
- 기밀·개인정보 입력 금지 범위가 구체적 예시와 함께 안내된다
- NIST AI RMF, ISO/IEC 42001을 참조해 내부 지침을 점검한 적이 있다
- EU AI Act 등 시장 규제의 영향을 검토한 문서가 있다
40곳 넘는 기업과 기관에서 이 AI 역량 진단 문항을 돌려봤습니다. 가장 흔한 조합은 ③기술·도구 8~10점에 ⑤프로세스 2~4점이었다. 도구는 샀는데 그게 어느 결재 라인 어느 단계에 들어가는지는 아무도 정하지 않은 상태다.
총점으로 레벨을 정하고, 최저 영역으로 처방을 정한다
총점만 보면 절반은 오독한다.
| 총점 | 레벨 | 전형적 증상 |
|---|---|---|
| 0~18 | Lv.1 탐색 | 정책·예산·담당자 모두 없음 |
| 19~36 | Lv.2 실험 | 성공 사례는 있는데 재현이 안 됨 |
| 37~54 | Lv.3 확산 | 정책과 활용이 충돌하기 시작 |
| 55~72 | Lv.4 내재화 | 측정은 하는데 성과 귀속이 모호 |
| 73~90 | Lv.5 자율운영 | 검수 지점 설계가 새 과제 |
보정 규칙이 하나 있다. 거버넌스 소계가 15점 만점에 5점 미만이면 총점과 무관하게 레벨을 한 단계 낮춥니다. 정책 없이 퍼진 활용은 사고 한 번에 전면 중단되기 때문입니다.
해석 순서는 총점 → 최저 영역 → 부서 편차다. 부서 간 총점 차가 15점을 넘으면 전사 평균은 사실상 의미가 없다. 상위와 하위를 별도 케이스로 다루는 편이 낫습니다.
같은 35점도 처방은 정반대다. 대기업은 기술·도구와 거버넌스가 높은데 리터러시가 낮고, 스타트업은 개인 활용도만 높고 데이터·정책이 0점에 가깝다. 단계별 정의가 흐릿하다면 AI 활용 성숙도 5단계 가이드를 먼저 맞춰두면 채점 기준이 또렷해집니다.
레벨마다 반복되는 함정: 라이선스 먼저, 사용 횟수 KPI
Lv.1은 ‘라이선스 먼저, 목적 나중’이다. 임원 지시로 유료 계정 300개를 계약했는데 석 달 뒤 주간 활성 사용자가 15명이다. 계약서엔 좌석 수만 적혀 있고 어떤 업무를 바꿀지는 어디에도 없습니다.
Lv.2는 사례만 늘고 표준이 없는 상태다. 발표회에 사례 8건이 올라오는데 다른 팀이 재현할 수 있는 건 0건이다. 프롬프트 표준과 버전관리가 없으면 파일럿은 개인기로 남습니다. 한 IT 기업 마케팅팀에서는 잘 쓰는 직원과 못 쓰는 직원의 간극이 생산성 문제가 아니라 위화감이라는 조직 문제가 됐습니다. 개인기 말고 팀의 표준을 만들어달라는 요청이었다.
Lv.4는 사용 횟수를 KPI로 잡는 함정이다. 프롬프트 입력 건수와 로그인 일수는 올리기도 조작하기도 쉽다. 보고서 숫자는 매달 오르는데 문서 리드타임은 그대로인 경우가 흔합니다. 소요 시간이나 재작업 비율 같은 결과 지표를 하나는 붙여야 합니다.
Lv.3의 함정은 정책이 금지 목록으로 굳어 섀도 AI가 생기는 것, Lv.5의 함정은 자동화를 넓히며 사람 검수 지점을 없애는 것입니다.
병목 하나를 90일 과제로 바꾸는 방법
흔한 실수가 한 단계 위 조직의 과제를 당겨오는 것이다. 그러면 사용률부터 무너집니다.
Lv.1~2의 90일
Lv.1은 대상 업무를 좁히는 게 먼저다. 1~30일에 반복 빈도가 주 1회 이상이고 산출물 형태가 고정된 업무 3개를 고릅니다. 회의록 요약, 보고서 초안이 전형적인 후보죠.
31~60일은 한 팀 안에서 5명을 뽑아 파일럿을 돌립니다. 부서를 섞지 않는 이유는 같은 업무를 하는 사람끼리여야 프롬프트를 서로 베낄 수 있기 때문입니다. 61~90일은 사용 규칙 A4 한 장. 반입 금지 데이터와 검수 책임자, 사고 신고 경로면 초안으로 충분하다. 이 기간의 지표는 주간 활성 사용자(WAU) 하나입니다.
Lv.2의 병목은 도구가 아니라 표준의 부재다. 프롬프트를 업무 유형별 폴더로 모으고 파일명에 버전과 수정일을 넣습니다. 라이브러리는 갱신 담당자를 정할 때 살아남는다. 부서당 챔피언 1명에게는 주 1시간을 공식 업무로 인정해줍니다. 시간이 배정되지 않은 챔피언은 두 달 안에 사라진다. 여기에 격주 30분, 사례 2건을 공유하는 자리를 붙이고 실패한 시도도 함께 올립니다.
Lv.3 이상의 90일과 재진단 운영
Lv.3은 접근 권한이 단순한 문서군부터 RAG 범위를 확정한다. Lv.4는 모델 레지스트리와 데이터 리니지, ROI 산식(절감 시간 × 인건비 단가 − 라이선스·교육비)까지. Lv.5는 검수 지점을 없애는 게 아니라 어디에 남길지 다시 정하는 작업입니다. 교육을 상시 과정으로 세우는 순서는 기업 AI 교육 도입 8단계 로드맵에서 이어집니다.
재진단은 분기 1회가 적정합니다. AI 성숙도 진단 도구는 같은 조건으로 반복될 때만 추세를 보여준다. 문항 문구, 채점 기준, 응답자 명단을 고정하지 않으면 점수 변화가 개선 때문인지 응답자 교체 때문인지 구분되지 않습니다.
경영진 보고는 1페이지로 고정한다. 현재 레벨 / 병목 영역 / 90일 과제 / 필요 예산, 네 칸이면 됩니다. 예산 칸이 비면 보고가 아니라 공유가 된다. 문장 구성은 AI 교육 품의서 작성 가이드의 포맷을 그대로 얹으면 재작업이 줍니다.
외부 문항과 대조하고 싶다면 조직 AI 준비도 평가 체크리스트, 데이터 성숙도 자가 진단, AI 활용 수준 측정 정리, 조직 성숙도 5단계 체크리스트를 비교군으로 두면 문항 편향이 줄어듭니다.
AI 성숙도 자가진단 자주 묻는 질문
단계를 건너뛰고 상위로 바로 갈 수 있나요?
기술 도입은 건너뛸 수 있습니다. 다만 데이터·거버넌스·리터러시는 누적형이라 대부분 Lv.3에서 역주행한다. RAG와 에이전트를 한 번에 붙인 조직의 사용률이 반년 뒤 떨어지는 이유는 기술 부족이 아니라, 문서 권한 기준과 검수 책임자가 없어 현업이 결과를 믿지 못해서입니다.
자가진단과 컨설팅사의 정식 진단은 무엇이 다른가요?
자가진단은 내부 인식을 정렬하고 우선순위를 뽑는 도구, 정식 진단은 증빙을 검증하는 절차다. 자가진단은 편향이 생기는 대신 비용이 없고 분기마다 반복해 추세를 봅니다. 병목을 좁힌 뒤 그 영역만 외부 검증을 의뢰하는 순서가 비용 효율이 좋습니다.
부서마다 점수 차가 크면 어떻게 봐야 하나요?
편차가 15점 이상이면 평균은 버리고 두 그룹으로 나눠 운영합니다. 상위 부서는 확산 거점으로 프롬프트와 사례를 공급하고, 하위 부서는 같은 교육을 반복하기보다 병목을 다시 본다. 하위 부서의 저점은 대개 리터러시가 아니라 업무 프로세스나 데이터 접근 권한에서 나옵니다.
규제 산업은 문항을 어떻게 조정하나요?
한 제약사 사업부는 강의 요청부터 결이 달랐다. 민감정보를 넣지 말라는 당부로 시작해달라는 것. 이런 조직은 거버넌스 점수가 높고 리터러시가 낮은 조합이 흔합니다. 문항은 그대로 두되, 출처 제시와 할루시네이션 검증 항목의 채점을 더 엄격하게 보는 편이 실제에 가깝습니다.
숫자 하나가 남으면, 다음 분기 회의는 달라집니다
총점보다 중요한 건 영역별 편차이고, 거버넌스가 5점 미만이면 레벨을 한 단계 낮춰 본다. 레벨마다 빠지는 함정이 다르니 자기 레벨의 안티패턴을 먼저 확인하는 편이 도구를 하나 더 사는 것보다 낫습니다.
오늘 할 첫 행동은 하나다. 30문항을 스프레드시트에 옮기고 본인 외 두 명을 지정해 따로 채점한 뒤 중앙값을 냅니다. 15~20분이면 모인다. 세 사람 점수가 5점 이상 벌어지는 문항이 조직 안에서 사실 인식이 어긋난 지점입니다.
여기까지 하면 “몇 개 해당한다”까지만 손에 남는다. 진짜 막히는 건 그다음이다. 병목이 데이터인지 지시 설계인지 리더십인지 가려내고, 그 근거를 결재 라인이 읽을 문서로 만드는 일이 남습니다. 40곳 넘는 현장에서 가장 자주 본 장면도, 체크리스트는 돌렸는데 품의서 한 장으로 옮기지 못해 멈춘 경우였다. 예산 항목까지 붙일 단계라면 기업 AI 교육 비용 시뮬레이션이 다음 순서입니다.
이미 자가진단을 돌렸는데 “그래서 무엇부터 손대나”에서 멈춰 있다면, 200~1,000점 AMI 점수와 3계층 8차원 병목 차트(개인 실행·팀 운영·조직 체계), 그림자 AI형부터 시스템 선도형까지 8종 조직 유형 판정이 그 자리를 메웁니다. 17문항 5분 정밀 진단으로 병목과 90일 로드맵 받기 — 로그인 없이 제출 즉시 웹 리포트로 나오고, 이메일을 남기면 같은 리포트를 메일로도 받아 품의서에 첨부할 수 있습니다.