AI가 일을 처리해 주는데 팀장은 왜 더 바빠졌을까요?
AI가 서류를 처리해 줘도 팀장이 건마다 다시 확인하고 고치고 있다면 일은 줄어든 게 아닙니다. 지난 2주 동안 몇 건에 사람 손이 갔는지 세어 보는 방법을 알려 드립니다.
🍎 바쁘다면 알짜배기만이라도 !
- AI가 서류를 처리해 주는데도 팀장이 건마다 확인하고 고치고 되돌리고 있다면, 줄어든 일은 없고 팀장의 일만 바뀐 것입니다.
- 그래서 AI가 몇 건을 처리했는지보다, 그중 몇 건에 사람 손이 갔는지를 먼저 세어야 합니다. 이 비율을 '관리자 개입률'이라고 부르겠습니다.
- 결제·발주·고객정보 수정처럼 잘못되면 되돌리기 어려운 일은, 되돌릴 방법과 담당자가 정해지기 전에는 사람 확인 없이 진행하게 두지 마십시오.
자동화를 넣었는데 팀장이 더 바빠진 아침
가정해 봅시다. 거래처에서 오는 청구서를 AI가 읽고 입력해 주는 자동화를 넣었습니다. 그런데 오전 9시 10분, 팀장 책상에는 AI가 "여기부터는 사람이 봐 주세요"라고 돌려보낸 서류가 쌓여 있습니다.
팀장은 서류 원본을 처음부터 다시 읽습니다. 잘못 입력된 금액을 고치고, 이미 넘어간 건은 원래대로 돌려놓습니다. AI가 일을 끝낸 시간은 줄었지만, 팀장에게는 도입 전에 없던 '넘겨받아 다시 하는' 일이 생겼습니다.
AI가 서류를 돌려보내는 것은 사람에게 알림을 보낸 것일 뿐, 그 업무가 끝났다는 뜻이 아닙니다. 확인할 사람, 고칠 사람, 잘못 넘어간 일을 되돌릴 사람이 업무마다 정해져 있지 않으면, 돌려보낸 서류는 결국 팀장 책상으로 모입니다.
관리자 개입률: 처리한 건 중 손이 간 건의 비율
같은 기간에 처리한 건 중에서, 팀장이 확인하거나 고치거나 되돌린 건이 몇 건인지 세어 보면 됩니다. 이 비율이 관리자 개입률입니다. 100건 중 30건에 손이 갔다면 30%입니다.
이 비율은 AI가 서류를 얼마나 정확히 읽는지와는 별개입니다. AI가 모두 정확히 읽어도, 결제 전에 팀장이 매번 확인하게 해 두었다면 개입률은 100%입니다.
감독 부담을 다룬 Gartner·Deloitte 자료
시장조사기관 Gartner는 2026년 5월, AI에게 일을 맡기면 관리자는 목표와 규칙을 정해 주고 결과가 제대로 끝났는지 계속 살펴야 한다고 설명했습니다. (Gartner, 2026.05)
같은 글에는 인사 최고책임자의 75%가 관리자들이 그 어느 때보다 압도당하고 있다고 답했다는 조사 결과도 있습니다. AI 때문에 그렇게 됐다고 밝힌 값은 아니므로, 자동화가 더할 감독 일을 이 부담에 그대로 더하지 말아야 한다는 출발점으로만 보십시오.
회계·컨설팅 기업 Deloitte는 AI가 스스로 정할 일, 사람의 서명이 필요한 일, 상급자에게 넘길 일을 나누고 기록을 남기라고 권합니다. 2025년 8~9월 기업·IT 리더 3,235명을 조사했더니, 업무를 스스로 실행하는 에이전트형 AI 도입을 계획하는 기업 가운데 AI를 누가 어디까지 통제할지 관리 체계가 성숙했다고 답한 곳은 21%였습니다. (Deloitte, 2026)
컴퓨터 조작 과제(OSWorld)의 AI 정확도와 남은 실패
스탠퍼드 대학의 AI 현황 보고서에 따르면, 컴퓨터를 직접 조작하는 과제를 모은 시험(OSWorld)에서 AI의 정확도는 2025년에 66.3%까지 올랐습니다. 사람 기준선은 72.35%였고, 정해진 시험에서 세 번에 한 번쯤은 실패했습니다. (Stanford AI Index, 2026)
이 수치는 실제 결제·발주 업무의 실패율이 아니라, 컴퓨터 조작을 AI에게 맡기면 사람 기준선에 못 미치는 만큼 일부는 사람이 다시 봐야 한다는 신호로만 읽어야 합니다.
되돌릴 방법과 담당자가 없는 업무의 사람 확인
결제, 발주, 계좌, 고객정보처럼 회사 밖 시스템에 기록이 남는 일은 되돌리는 방법과 되돌릴 담당자가 둘 다 있어야 합니다. 하나라도 없다면 개입률이 낮아도 사람 확인 없이 진행하게 두면 안 됩니다. 한 번의 잘못된 실행이 여러 건에서 아낀 시간을 없앨 수 있기 때문입니다.
조사 숫자와 우리 회사 개입률의 차이
Deloitte 조사는 AI 업무에 직접 관여한 리더를 대상으로 했고, Gartner의 75%는 AI 도입 효과만 따로 잰 값이 아닙니다. OSWorld 66.3%도 실제 기업 업무가 아니라 컴퓨터 조작 시험의 결과입니다.
Gartner와 Deloitte는 사람의 확인과 개입 기준을 업무 설계에 넣으라고 합니다. 우리 회사의 개입률은 우리 회사의 처리 기록으로 따로 계산해야 합니다.
최근 2주 처리 기록으로 개입률 계산하기
- 사용 중인 자동화 도구에서 최근 2주 처리 기록을 엑셀로 열 수 있는 파일로 내려받습니다.
- 업무 번호, 최종 결과, 확인한 건, 고친 건, 되돌린 건, 손이 간 이유(한 줄)만 남깁니다. 기록에 확인·수정·되돌림 칸이 없으면 팀장에게 건별로 물어 채웁니다.
- 확인·수정·되돌림 중 하나라도 있으면 손이 간 1건으로 표시하고, 전체 건수로 나눕니다.
- 결제·발주·고객정보 수정 업무는 되돌릴 담당자가 정해져 있는지 따로 확인하고, 비어 있으면 다음 실행 전에 담당자부터 정합니다.
개입률에 정해진 기준은 없으니, 첫 값은 다음 2주 값과 비교하는 출발점으로 삼습니다. 손이 간 이유가 두 번 이상 반복됐다면 그 이유를 규칙으로 바꿀 수 있는지 먼저 표시하고, 판단이 필요한 예외만 사람에게 남기면 됩니다. 같은 예외가 매주 돌아오는데 사람이 계속 처음부터 읽고 있다면 운영 자동화는 아직 끝나지 않은 것입니다.
