Cost Without Benefit: 전사 AI 도구를 산 기업들이 Gartner에 business case를 다시 묻는다
Gartner CEO Gene Hall은 3분기 실적 콜에서 AI 벤더와 전사 계약을 맺은 고객 대다수가 비용만 늘고 효과를 보지 못해 business case와 비용 관리를 도와 달라고 한다고 전했습니다. 전사 AI 계약을 직무별 지표로 다시 재는 6주 점검 방법을 붙였습니다.
Gartner CEO Gene Hall은 2026년 3분기 실적 콜에서 AI 벤더와 전사 계약을 맺은 고객 대다수가 비용만 늘고 실질 효과를 보지 못했다고 전했습니다. 이 고객들이 이제 business case(투자 근거와 기대 효과를 숫자로 정리한 문서)를 다시 묻고 있습니다. 우리 회사가 같은 처지를 피하려면 좌석 수가 아니라 직무별 업무 지표로 AI 계약을 다시 재고 갱신 전에 과제 단위 business case를 만들어야 합니다.
요약
Gartner는 2026년 11월 3일 3분기 실적 콜을 열었습니다. 이 노트는 Motley Fool이 공개한 녹취를 읽고 썼습니다. AI 이야기는 두 군데서 나옵니다. 준비 발언에서 Hall은 Gartner가 고위 임원 75,000명 이상에게 AI에서 가치를 얻는 법을, CIO 10,000명 이상과 그 팀에게 AI 구현법을, 테크 기업 5,000곳 이상에게 AI 전략을 조언한다고 했습니다. Q&A에서는 Goldman Sachs 애널리스트가 AI가 고객 이탈과 신규 영업에 미치는 영향을 묻자, 고객들이 AI 벤더 한 곳과 전 직원용 대형 계약을 맺었지만 대다수가 실질 효과를 보지 못했다고 답했습니다. 고객들은 이제 Gartner에 맞는 business case를 찾고 비용을 관리하도록 도와 달라고 합니다. Hall은 이 일이 Gartner가 가장 잘하는 영역이라고 했습니다.
Hall은 이 요청이 원래 있던 수요지만 최근 약 3개월 사이 눈에 띄게 늘었다고 했습니다. 고객 반응을 옮기며 한 말은 짧습니다. “I have got the cost, but not the benefits.” 효과를 내기가 생각보다 어렵다는 것입니다. 관심도 넓어졌습니다. 1년 전에는 대부분의 직무에서 AI가 가장 큰 관심 주제였는데, 지금은 Gartner가 지원하는 모든 직무에서 그렇다고 했습니다. CFO Craig Safian도 AI가 모든 주요 직무에서 1위 주제이고 신규 영업 대화의 흔한 출발점이라고 했습니다. 실적은 매출 약 15억 달러(+2%), 계약 가치 CV(contract value, 연간 구독 계약 총액) 53억 달러(+2.5%)로 3분기 연속 가속했고 연간 가이던스를 올렸습니다. 아래에서는 이 발언을 다섯 가지 메커니즘으로 풀고 우리 회사의 전사 AI 계약을 business case로 다시 재는 방법을 기술과 현업 순서로 정리합니다.
핵심 메커니즘
Enterprise-wide AI agreement: 전 직원에게 같은 AI 도구를 까는 계약
무엇인가. AI 벤더 한 곳과 대형 계약을 맺어 모든 직원에게 같은 도구를 주는 방식입니다. Hall은 고객 상당수가 이렇게 했다고 말했습니다.
어떻게 작동하나. 계약 금액은 좌석 수로 정해지고 비용은 첫날부터 생깁니다. 효과는 직원 각자가 도구를 어느 업무에 쓰느냐에 달려 있습니다. 쓰임새를 정하지 않고 배포하면 비용은 장부에 잡히지만 효과는 어느 지표에도 잡히지 않습니다. Hall이 전한 고객 상황이 이 구조입니다. 비용은 늘었는데 대다수에서 실질 효과가 없었습니다.
언제 쓰고 언제 안 쓰나. 전사 배포는 직원들이 AI에 익숙해지는 단계에는 맞습니다. 효과를 숫자로 보고해야 하는 단계라면 좌석보다 과제가 먼저입니다.
작은 예시(가상 예시). 직원 3,000명 제조사가 AI 비서 좌석 3,000개를 1년 계약했습니다. 6개월 뒤 매주 쓰는 사람은 600명이고 그중 업무 지표가 바뀐 곳은 구매팀 견적 비교와 품질팀 불량 보고서 초안 두 곳뿐입니다.
Business case request: 계약 뒤에 다시 묻는 투자 근거
무엇인가. 이미 산 AI 도구를 어디에 써야 효과가 나는지, 비용은 어떻게 줄일지 외부 자문사에 묻는 요청입니다.
어떻게 작동하나. 입력은 이미 맺은 계약과 사용 실태입니다. 처리는 직무별로 효과가 나는 쓰임새를 고르고 비용 구조를 다시 짜는 일입니다. 출력은 과제별 business case와 비용 관리안입니다. Hall은 이 요청이 최근 약 3개월 사이 눈에 띄게 늘었다고 했습니다.
언제 쓰나. 갱신을 앞둔 계약, 이사회나 CFO가 AI 투자 효과를 물을 때입니다.
원문의 예. 녹취에는 개별 고객 이름이나 업종, 금액이 나오지 않습니다. Hall은 효과를 못 본 고객들이 생각보다 어렵다고 말하며 도움을 청한다고만 전했습니다.
AI as #1 topic for every role: 모든 직무의 1순위 관심사
무엇인가. Gartner 고객이 가장 많이 찾는 주제가 AI라는 관찰입니다. Hall은 1년 전에는 대부분의 직무에서 1위였지만 지금은 모든 직무에서 1위라고 했습니다. Safian은 CFO와 CMO도 포함된다고 덧붙였습니다. 사이버 보안 같은 다른 주제도 여전히 중요하다고 했습니다.
어떻게 작동하나. IT 부서의 주제였던 AI가 재무, 마케팅, 인사 같은 모든 기능 조직의 질문으로 번졌습니다. 그만큼 business case를 만들 주체도 IT 한 곳이 아니라 각 기능 조직이 됩니다.
원문의 예. Gartner IT Symposium/Xpo에서 AI를 다룬 세션은 325개였고 개막 기조연설도 AI의 가치, 리스크, 안전, 거버넌스를 다뤘습니다.
AI winners and losers: AI가 Gartner 고객을 둘로 나눈다
무엇인가. AI 덕분에 사업이 좋아진 고객과 AI에 타격을 받은 고객이 갈리면서 Gartner의 판매 환경도 갈린다는 설명입니다.
어떻게 작동하나. Hall은 데이터센터 장비를 만드는 회사들은 판매 환경이 좋고 AI에 더 직접 타격을 받는 회사들은 판매가 어렵다고 했습니다. Safian은 대형 테크 벤더의 감원이 갱신과 성장에 부담이고 고객의 검토가 길어져 판매 주기가 예전보다 길다고 했습니다. 그래도 테크 벤더 CV는 한 자릿수 초반으로 늘어 회사 평균보다 높았습니다. 소프트웨어·서비스·소형 테크 벤더는 한 자릿수 중후반으로 늘었습니다.
언제 쓰나. 자문·구독 서비스를 사거나 파는 쪽 모두, 고객의 AI 노출도에 따라 예산이 달라진다는 점을 계획에 넣을 때 씁니다.
BTI: Gartner가 자기 리서치 사업을 바꾸는 방식
무엇인가. BTI(Business Transformation of Insights)는 Gartner가 리서치 상품인 Insights를 바꾸는 프로그램입니다. Hall은 네 축으로 설명했습니다.
어떻게 작동하나. Impact는 문서가 몇 명에게 읽혔고 고객 유지에 어떤 영향을 줬는지 재서 둘 다 키우는 축입니다. Quantity는 더 넓은 우선 과제를 다루는 문서 수를 늘리는 축입니다. Timeliness는 빠르게 대응하는 새 콘텐츠를 만드는 축으로, 직원 교육을 월 1회에서 주 1회로 바꿨고 분석가 상담을 며칠 안에 잡을 수 있게 했습니다. Client experience는 Gartner 앱과 AskGartner(Gartner 리서치를 묻고 답하는 고객용 도구)를 개선하는 축입니다.
원문의 수치. 영향력이 큰 문서는 중간 한 자릿수로, 전체 문서는 두 자릿수로 늘었습니다. 사건 대응형 콘텐츠는 크게 늘었다고 했고 모바일 이용과 AskGartner 이용도 전년보다 늘었습니다. Safian은 유지율을 BTI 성과를 판단하는 최종 지표로 꼽았습니다. 지갑 유지율(wallet retention)은 GTS 98%, GBS 99%였습니다.
통념과 다른 주장
흔히 이렇게 봅니다전 직원에게 AI 도구를 깔아 주면 각자 쓰임새를 찾아 생산성이 오른다고 봅니다.
Hall은 이렇게 봅니다전사 계약을 맺은 고객 대다수는 비용만 늘고 실질 효과를 보지 못했습니다. 그래서 이제 어디에 써야 효과가 나는지 business case부터 다시 묻습니다.
근거Gartner 고객들이 효과가 생각보다 어렵다며 business case와 비용 관리 지원을 요청하고 있고 이 요청이 최근 약 3개월 사이 눈에 띄게 늘었다고 Hall이 전했습니다.
흔히 이렇게 봅니다생성형 AI가 리서치·자문 회사의 수요를 잠식한다고 봅니다.
경영진은 이렇게 봅니다AI는 Gartner가 지원하는 모든 직무에서 1순위 주제이고 신규 영업 대화의 흔한 출발점입니다.
근거CV 성장률이 3분기 연속 올라 2.5%가 됐고 AI 효과를 못 본 고객의 재문의가 늘었다고 했습니다.
저자가 든 사례
사례 1: 전사 AI 도구를 산 Gartner 고객들
| 항목 | 내용 |
|---|---|
| 상황 | AI 벤더 한 곳과 대형 계약을 맺어 전 직원에게 도구를 줌. 비용은 늘었고 대다수는 실질 효과 없음 |
| 한 일 | Gartner에 맞는 business case를 찾고 비용을 관리하도록 도움을 요청 |
| 결과 | 요청이 최근 약 3개월 사이 눈에 띄게 늘었음. 고객 이름·업종·금액은 원문에서 밝히지 않음 |
| 연결 | Enterprise-wide AI agreement, Business case request |
사례 2: Gartner 자신의 3분기
| 항목 | 내용 |
|---|---|
| 상황 | CV 성장률을 다시 끌어올리는 중 |
| 한 일 | BTI로 문서의 영향력, 양, 속도, 고객 경험을 바꿈 |
| 결과 | CV 53억 달러(+2.5%), 3분기 연속 가속. 연방정부 제외 시 +2.8%. 연간 EBITDA 가이던스 4,500만 달러 상향 |
| 연결 | BTI, AI as #1 topic for every role |
사례 3: 영업 인력을 늘리지 않고 재배치
| 항목 | 내용 |
|---|---|
| 상황 | Hall은 앞으로 몇 분기 성장에 필요한 영업 인력이 이미 충분하다고 봄 |
| 한 일 | 퇴사가 생길 때마다 같은 지역을 충원할지, 지역을 합치고 그 자리를 다른 곳에 쓸지 결정 |
| 결과 | 전체 인원은 그대로 두고 가속이 확인될 때만 지역을 늘림. Safian은 아직 끌어낼 생산성이 많다고 봄 |
| 연결 | AI winners and losers(고객군에 따라 영업 자원을 옮김) |
애널리스트(RBC)가 질문에서 영업 인원을 5,000명 수준으로 묶어 두는 것 아니냐고 물었고 Safian은 숫자를 되풀이하지 않은 채 전체 인원은 바뀌지 않는다고 답했습니다.
기술 디테일: 전사 AI 계약을 business case로 다시 재려면
아래 필드, 설정값, 기준은 실행 제안이며 Gartner나 녹취에 나온 방법이 아닙니다.
Enterprise-wide AI agreement의 효과를 보려면 먼저 사용 깔때기를 그립니다. 벤더 관리 콘솔에서 내려받는 사용 로그를 좌석 단위로 모읍니다. 배포 좌석, 월간 활성 사용자, 주 3일 이상 쓰는 사용자, 업무 지표에 연결된 사용 순서로 비율을 냅니다. 마지막 단계가 business case가 있는 사용입니다. 이 비율이 낮으면 좌석이 아니라 쓰임새가 부족한 것입니다.
Business case request에 답하려면 사용 기록을 과제 단위로 묶습니다. 대화 원문은 개인정보 문제로 그대로 쓰지 않고 관리 콘솔이 주는 메타데이터(부서, 사용 횟수, 기능 종류)와 직원 설문을 씁니다. 원문을 쓸 수 있는 조직이라면 LLM으로 대화 주제를 업무 범주로 분류합니다. 범주 목록은 미리 고정하고(예: 견적 비교, 보고서 초안, 코드 리뷰, 고객 응대 초안, 기타) 구조화 출력으로 받습니다. temperature 0으로 같은 표본을 두 번 분류해 범주가 다르면 사람이 확인합니다. 일치율이 90% 아래면 범주 정의를 고칩니다.
{
"use_case_id": "PROC-QUOTE-COMPARE",
"function": "구매",
"owner": "구매팀장",
"seats_used": 42,
"weekly_active_share": 0.71,
"task_category": "견적 비교",
"kpi": "견적 비교 1건당 처리 시간(분)",
"baseline": 95,
"current": 40,
"measurement": "holdout",
"annual_value_krw": 180000000,
"annual_cost_krw": 25000000,
"decision": "keep_and_expand",
"reviewed_by": "FP&A",
"reviewed_at": "2026-12-10"
}
위 값은 가상 예시입니다. decision은 keep_and_expand(유지·확대), keep(유지), reduce_seats(좌석 축소), stop(중단) 네 가지로 고정합니다. 효과 측정은 holdout(같은 업무의 일부를 AI 없이 돌려 비교)을 우선하고 불가능하면 도입 전 2개 분기와 비교한 값에 신뢰도 low를 붙입니다.
AI as #1 topic for every role에 맞추려면 직무별로 따로 잽니다. 같은 도구라도 재무, 마케팅, 구매의 효과 지표가 다릅니다. 직무마다 지표 하나만 고릅니다. 재무는 결산 마감 일수, 마케팅은 콘텐츠 1건 제작 시간, 구매는 견적 비교 처리 시간처럼 이미 재고 있는 숫자를 씁니다. 새 지표를 만들면 기준선이 없어 비교가 안 됩니다.
| 막히는 경우 | 증상 | 대응 |
|---|---|---|
| 활성 사용자만 보고 판단 | 많이 쓰는데 업무 지표는 그대로 | 깔때기 마지막 단계(지표 연결)로 판단 |
| 대화 원문 사용 불가 | 무엇에 썼는지 모름 | 메타데이터와 직원 설문 10문항으로 대체 |
| 분류 편차 | 같은 대화가 다른 범주로 분류됨 | 두 번 분류해 불일치는 사람 확인 |
| 기준선 없음 | 도입 전 수치가 없음 | holdout 10%를 새로 두고 4주 측정 |
| 겹치는 도구 | 같은 업무에 AI 도구 두세 개 | 과제별 주 도구 하나만 비용에 넣음 |
현업 실행 디테일: 누가, 언제, 무엇을
| 역할 | 맡는 일 |
|---|---|
| CFO·FP&A | AI 계약 비용 집계, 효과 금액 검증, 갱신 예산 승인 |
| CIO·IT 자산관리 | 계약·좌석 목록, 사용 로그 추출, 벤더 협상 |
| AX 추진 조직 | 직무별 인터뷰, 과제 선정, business case 초안 |
| 기능 조직 리더(재무·구매·마케팅 등) | 직무 지표 선택, holdout 운영 |
| 구매·법무 | 갱신 조건, 좌석 축소 조항 검토 |
시작 전 준비물은 네 가지입니다. AI 도구 계약서와 좌석 수, 갱신일 목록. 최근 3개월 사용 로그. 직무별로 이미 재고 있는 업무 지표 목록. 같은 업무에 쓰는 다른 AI 도구 목록입니다.
| 기간 | 할 일 | 산출물 |
|---|---|---|
| 1주 | 계약·좌석·갱신일 목록 정리 | AI 계약 대장 |
| 2주 | 사용 로그로 깔때기 작성 | 직무별 사용 깔때기 |
| 3~4주 | 직무별 리더 인터뷰, 후보 과제 3~5개 선정 | 과제 후보 목록 |
| 5주 | 과제마다 holdout 설계와 기준선 확정 | 측정 계획서 |
| 6주 | 과제별 business case, 좌석 조정안 | 갱신 결정안(1쪽) |
직무별 리더 인터뷰에서 묻는 질문은 다음과 같습니다.
- 지금 이 도구를 가장 많이 쓰는 업무는 무엇이고 그 업무의 결과를 어떤 숫자로 재고 있습니까?
- 도구를 쓰기 전과 비교해 그 숫자가 바뀌었습니까? 근거 자료가 있습니까?
- 도구가 없어지면 어떤 업무가 멈춥니까?
- 같은 일을 하는 다른 AI 도구나 사내 시스템이 있습니까?
갱신 판정 기준(예시)은 이렇습니다. 과제별 연간 효과가 비용의 3배 이상이고 holdout으로 확인했으면 유지·확대합니다. 1~3배이거나 전후 비교만 있으면 유지하고 다음 분기에 다시 잽니다. 주 3일 이상 사용자가 배포 좌석의 20% 미만인 부서는 좌석을 줄입니다. 업무 지표에 연결된 과제가 하나도 없는 도구는 갱신하지 않습니다.
AX 적용 제언입니다. 전사 AI 비서 계약을 맺은 국내 기업이라면 첫 갱신 협상에서 Hall이 전한 것과 같은 질문을 받게 됩니다. 첫 순서는 계약 대장과 사용 깔때기입니다. 그다음 기능 조직마다 과제 하나를 골라 holdout으로 재고 갱신 결정을 과제 단위로 내립니다. 컨설팅 프로젝트라면 CFO를 스폰서로 세우고 6주짜리 AI 계약 점검으로 시작하는 것이 현실적입니다. 숫자가 나오는 과제는 확대하고 나머지 좌석은 줄이면, 같은 예산으로 효과가 보이는 곳에 돈을 옮길 수 있습니다.
원문 사례
| 항목 | 녹취에서 확인한 내용 |
|---|---|
| 일시·형식 | 2026년 11월 3일, Gartner 3분기 실적 콜(Motley Fool 녹취) |
| 발언자 | Gene Hall(회장 겸 CEO), Craig Safian(CFO) |
| AI 조언 대상 | 고위 임원 75,000명 이상, CIO 10,000명 이상과 그 팀, 테크 기업 5,000곳 이상 |
| 전사 AI 계약 고객 | 비용 증가, 대다수 실질 효과 없음, business case·비용 관리 요청이 최근 약 3개월 사이 증가 |
| AI 관심도 | 1년 전 대부분 직무에서 1위, 지금은 모든 직무에서 1위. IT Symposium AI 세션 325개 |
| 매출 | 약 15억 달러, +2%(환율 제외 +3%) |
| 조정 EBITDA·EPS | 3억 6,400만 달러(+8%), EPS 3.59달러(+30%) |
| CV | 53억 달러, +2.5%(연방정부 제외 +2.8%), 3분기 연속 가속 |
| 유지율 | 지갑 유지율 GTS 98%, GBS 99% |
| 연간 가이던스 | 매출 64.05억 달러 이상, EBITDA 16.15억 달러 이상(4,500만 달러 상향), EPS 14.65달러 이상 |
| 영업 인력 | 전체 인원 유지, 퇴사 시 충원 또는 지역 재배치. 5,000명 수치는 애널리스트 질문에서 나옴 |
핵심 개념
- CV (contract value)
- Gartner 구독 계약의 연간 가치 합계로, 앞으로의 매출을 미리 보여 주는 지표입니다.
- wallet retention
- 기존 고객이 지난해 쓴 금액 가운데 올해도 유지하거나 늘린 비율입니다.
- NCVI (net contract value increase)
- 한 분기 동안 순증한 계약 가치입니다.
- GTS·GBS
- Gartner의 IT 리더 대상(Global Technology Sales)과 기능 조직 리더 대상(Global Business Sales) 영업 부문입니다.
- AskGartner
- 고객이 Gartner 리서치에 질문하고 답을 받는 도구로, 이번 분기 이용이 늘었습니다.
- holdout
- 같은 업무의 일부를 일부러 AI 없이 돌려 효과를 비교하는 대조 집단입니다.
내 메모
TODO: 내 생각 추가
이 노트는 Gartner 2026년 3분기 실적 콜 녹취(The Motley Fool, “Gartner (IT) Q3 2026 Earnings Call Transcript”, 2026.11.3, 발언자 Gene Hall CEO, Craig Safian CFO)를 읽고 썼습니다. 요약, 핵심 메커니즘의 사실, 통념과 다른 주장, 저자가 든 사례, 원문 사례 표는 녹취 내용을 AX Review가 다시 정리한 것이고 직접 인용은 Hall의 한 문장뿐입니다. 영업 인원 5,000명은 경영진 발언이 아니라 애널리스트 질문에 나온 수치입니다. 기술·현업 실행 디테일, JSON 예시, 사용 깔때기 비율, 일정과 판정 기준, 인포그래픽은 원문에 없는 내용으로 새로 작성했습니다. 전체 내용은 원문에서 볼 수 있습니다.