AI 에이전트 도입 ROI — 라이선스비가 아니라 재작업 비용을 세라
지난 6월 12일, 견적서를 하나 받았습니다. 월 구독료 옆에 "업무 시간 40% 절감"이라는 문구가 큼직하게 박혀 있더군요. 그 40%를 어떻게 셌는지 물었지만 산출 근거는 끝내 오지 않았어요. AI 에이전트 도입을 저울질하는 1인 에이전시나 소규모 팀이라면 이 장면이 익숙할 겁니다. 제 입장은 분명해요. 에이전트 플랫폼의 진짜 원가는 구독료가 아니라 결과물을 사람이 뒤에서 손보는 시간이고, 그 시간을 세지 않은 도입 ROI는 처음부터 착시예요.
AI 에이전트 도입 비용은 라이선스비가 전부인가요?
The Register 보도에 따르면 세일즈포스 Agentforce 파트너들이 이 플랫폼에서 기대만큼 매출을 못 올리고 있다고 합니다. 저는 이 소식을 읽고 파트너 실적표보다 그 반대편이 궁금해졌어요. 구축을 대행하는 회사들이 돈을 못 번다면, 그 일감은 어디로 갔을까요. 갈래는 둘뿐입니다. 도입 자체가 적었거나, 큰 구축비를 물 만큼의 프로젝트가 아니었거나.
어느 쪽이든 도입을 검토하는 사람에게 남는 교훈은 같아요. 플랫폼을 켜는 일과 업무가 실제로 줄어드는 일 사이에는 누군가 메워야 하는 골이 있습니다. 대기업은 그 골을 파트너사 인건비로 메우고, 저 같은 소규모 사업자는 제 밤 시간으로 메웁니다. 청구서에 안 찍힐 뿐 자동화 원가는 똑같이 발생하고요.
여섯 달 동안 제가 직접 센 숫자
말로만 하면 설득이 안 되니 제 기록을 꺼냅니다. 2026년 2월 3일부터 7월 31일까지, 콘텐츠 파이프라인 세 갈래를 에이전트에 맡기고 처리 결과를 스프레드시트에 손으로 적었어요.
에이전트가 자동 처리한 산출물은 1,240건입니다. 이 중 제가 손을 댄 건이 187건, 15.1%였어요. 재작업 한 건에 평균 22분이 들었으니 여섯 달 동안 68시간을 여기 썼습니다. 같은 기간 구독료와 API 요금은 6개월치 56만 원이었고요. 제 시간을 시급 3만 원으로 환산하면 204만 원입니다. 눈에 보이는 비용의 3.6배가 눈에 안 보이는 쪽에 숨어 있었어요.
더 아픈 항목은 따로 있었습니다. 재작업 187건 중 92건은 산출물이 틀려서가 아니라 맞는지 확인하려고 쓴 시간이었어요. 결과가 멀쩡해도 눈으로 훑기 전에는 내보낼 수 없으니까요. 검증은 자동화가 줄여 주지 않는 항목입니다. 오히려 처리량이 늘면 눈으로 봐야 할 대상도 같이 늘어납니다.
벤더 대시보드와 제 장부는 왜 어긋날까요?
8월 3일에 에이전트 운영 지표 두 개를 나란히 놓아 봤습니다. 관리 화면이 표시한 성공률은 98.6%였고, 제 장부의 무손질 완결률은 74%였어요. 같은 기간, 같은 작업인데 24.6포인트가 벌어졌습니다.
이유는 단순합니다. 플랫폼은 요청이 오류 없이 끝났는가를 세고, 저는 내가 안 건드리고 내보냈는가를 셉니다. 에이전트가 그럴듯한 문장을 완성해 반환하면 벤더 지표는 성공이에요. 그 문장의 근거가 틀렸는지는 사람이 읽어야 압니다. 자동화 도구가 자기 실패를 스스로 정의하는 한, 그 성공률은 제 원가와 무관한 숫자로 남습니다.
그래도 지금 도입해야 한다는 반론
지금 AI 에이전트를 안 익히면 2년 뒤에 못 따라간다는 반론이 가장 셉니다. 저는 절반쯤 받아들여요. 학습은 실제로 필요하고, 저도 그래서 2월에 시작했습니다. 다만 배우려고 쓴 돈은 교육비고, 업무를 줄이겠다고 쓴 돈은 설비비예요. 둘을 한 칸에 적으면 어느 쪽도 평가가 안 됩니다.
재작업은 초기 곡선일 뿐 곧 준다는 반론도 자주 듣습니다. 제 자동화 기록은 절반만 편들어 줘요. 2월 재작업률 21.4%가 7월에 15.1%로 내려온 건 맞습니다. 그런데 5월 이후로는 15% 언저리에서 더 내려가지 않았어요. 남은 15%는 학습으로 사라지는 종류가 아니라, 사람 판단이 필요한 일이 원래 그만큼이었다는 뜻입니다.
규모가 커지면 상쇄된다는 말에는 전제를 다시 깔고 싶어요. 상쇄되려면 검증 비용이 자동화 건수에 비례하지 않아야 합니다. 제 경우 검증은 정확히 비례했어요. 규모의 경제가 붙는 쪽은 라이선스비고, 사람이 읽어야 하는 일은 그대로 늘어납니다.
도입 전에 2주만 스톱워치를 켜 보세요
거창한 파일럿은 필요 없어요. 실제 업무 30건을 정해 놓고, 에이전트에 맡긴 뒤 손댄 시간을 분 단위로 적으면 됩니다. 2주면 충분합니다. 저는 이 방식으로 8월에 네 번째 워크플로 도입을 접었어요. 무손질 완결률이 41%로 나왔고, 아낀 시간보다 검토 시간이 길었거든요. 구독료 3만 원을 아낀 게 아니라 매달 11시간을 지킨 판단이었습니다.
플랫폼 회사가 이 지표를 자기 화면에 안 넣는 이유도 이제 이해합니다. 무손질 완결률은 팔기 어려운 숫자니까요. 파트너 매출이 안 따라온다는 소식이 도는 지금, 도입 결정의 무게중심은 벤더 자료에서 내 스톱워치로 넘어와야 합니다. 여러분의 지난달 장부에는 그 숫자가 적혀 있나요.
자주 묻는 질문
Q. 무손질 완결률은 몇 퍼센트부터 도입할 만한가요?
A. 제 기준선은 70%입니다. 60% 밑이면 검토 시간이 절감분을 먹었고, 80%를 넘긴 워크플로는 여섯 달 내내 손이 거의 안 갔어요.
Q. AI 에이전트 재작업 시간은 어떻게 기록하나요?
A. 운영 초기에는 도구 없이 종이에 시작·종료 시각만 적었습니다. 자동 계측을 붙이려다 2월에 사흘을 날렸고, 표본 30건이면 손기록으로 충분하더군요.
Q. AI 에이전트 도입에서 라이선스비를 깎는 협상은 의미가 없나요?
A. 제 장부에선 구독료가 전체 원가의 21%였어요. 20% 할인을 받아도 총원가는 4% 남짓 줄어듭니다. 같은 노력을 예외 처리 줄이는 데 쓰는 편이 운영 원가 회수가 빨랐습니다.