ICE 스코어링 도구

ICE 스코어링은 언제 쓰나요?

할 수 있는 실험이나 개선안은 많은데 개발자와 시간은 한정되어 있을 때, 회의에서 목소리 큰 사람의 안이 먼저 채택되는 일을 줄이려고 쓰는 방식입니다. 아이디어마다 영향력(Impact), 자신감(Confidence), 용이성(Ease)을 1~10점으로 매기고 하나의 점수로 줄여 줄을 세웁니다. 그로스 해킹 분야에서 션 엘리스(Sean Ellis)가 널리 알린 것으로 알려져 있으며, 빠르게 많은 실험을 돌려야 하는 초기 제품 팀에서 자주 쓰입니다. 복잡한 입력 없이 5분 안에 줄 세우기가 가능하다는 점이 장점이고, 그만큼 거친 도구라는 점이 한계입니다.

세 점수를 어떻게 매기나요

영향력은 성공했을 때 목표 지표(가입 전환율, 결제율, 유지율 등)를 얼마나 움직일지, 자신감은 그 예측을 얼마나 믿을 만한 근거가 있는지, 용이성은 실행에 드는 시간과 인력이 얼마나 적은지입니다. 용이성은 높을수록 쉽다는 뜻이라 "노력"과 방향이 반대라는 점을 헷갈리지 마세요. 사람마다 점수 감각이 달라서 팀 안에서 기준을 먼저 맞추는 것이 중요합니다. 아래 표는 합의의 출발점으로 쓸 수 있는 예시 기준입니다.

점수 공식: 평균과 곱

이 도구의 기본값은 세 점수의 평균입니다. ICE = (I + C + E) ÷ 3. 평균 방식은 하나가 낮아도 다른 둘이 높으면 점수가 크게 떨어지지 않습니다. 한편 ICE = I × C × E처럼 곱으로 계산하는 변형도 쓰이며, 이 경우 어느 한 축이 낮을 때 점수가 훨씬 가파르게 깎입니다. 자료마다 어느 쪽을 표준으로 보는지 다르기 때문에, 팀 안에서 한 가지를 정해 계속 쓰는 것이 더 중요합니다. 위의 "점수 계산 방식" 선택으로 같은 입력을 두 방식으로 비교해 볼 수 있습니다.

예시: SaaS 성장 실험 4개 줄 세우기

월 구독형 업무 도구를 운영하는 팀이 다음 분기에 돌릴 실험 후보 네 개를 점수화한 가상의 사례입니다. 평균과 곱을 모두 계산해 보았습니다.

연간 결제 배지는 이미 비슷한 문구가 있어 자신감이 6이고 하루면 수정할 수 있어 용이성이 9라 맨 위에 올랐습니다. 눈여겨볼 행은 리퍼럴입니다. 영향력은 9로 가장 크지만 보상 설계와 추적 개발이 필요해 용이성이 3이라 꼴찌입니다. 평균 5.67과 곱 135로 순위는 같지만 곱 방식은 1위(378)의 3분의 1 수준까지 벌어져 격차가 더 크게 보입니다. 이 결과는 "리퍼럴을 영영 하지 말자"가 아니라 "빠른 실험 세 개를 먼저 돌리고, 그 사이 리퍼럴은 설계를 쪼개 용이성을 올리자"로 읽는 것이 맞습니다.

평균과 곱이 갈라지는 지점

두 방식의 차이는 "세 점수가 얼마나 고른가"에서 드러납니다. 아래 표는 평균이 모두 7로 같은 조합을 곱으로 바꿨을 때의 값입니다. 마지막 열은 7×7×7=343을 기준(100%)으로 한 비율입니다.

평균 방식에서는 네 조합이 모두 7.00으로 같은 순위가 되지만, 곱 방식에서는 한 축이 1~3점인 조합이 고른 조합의 3분의 1 이하로 내려갑니다. 즉 "치명적으로 약한 축이 하나라도 있는 후보를 걸러내고 싶다"면 곱, "대략적인 순서만 필요하다"면 평균이 어울립니다. 도구 상단의 선택 상자를 바꾸면 같은 입력이 즉시 다시 정렬되므로 두 방식에서 상위권이 겹치는지 확인해 보는 것도 좋은 습관입니다. 두 방식에서 모두 상위에 오른 후보는 방식에 덜 흔들리는 안전한 선택입니다.

예시 2: 동네 소매점의 마케팅 후보 네 가지

이번에는 온라인 서비스가 아닌 오프라인 매장 사례입니다. 점주가 다음 달에 시도할 수 있는 아이디어를 점수화했다고 가정합니다. 이 점수는 설명을 위한 가상의 값입니다.

평균 순위는 계산대 옆 재구매 쿠폰 QR 비치 > 동네 커뮤니티 앱 광고 집행 > 회원 등급제 도입 > 진열대 동선 재배치이고, 곱 순위는 계산대 옆 재구매 쿠폰 QR 비치 > 진열대 동선 재배치 > 동네 커뮤니티 앱 광고 집행 > 회원 등급제 도입입니다. 이 사례의 교훈은 회원 등급제입니다. 영향력이 9로 가장 크지만 시스템과 운영 규칙을 새로 만들어야 해 용이성이 2라서 두 방식 모두에서 상위권에 들지 못합니다. 반대로 커뮤니티 앱 광고는 비용만 내면 바로 집행할 수 있어 용이성이 8이지만, 반응을 예측할 근거가 없어 자신감이 3이므로 곱 방식에서 특히 낮게 평가됩니다. 이런 후보는 소액으로 한 주만 집행해 보고 결과로 자신감을 고쳐 매기는 "작은 검증"이 먼저입니다.

팀 회의에서 진행하는 순서

1. 후보 정리(10분): 이름만으로 무엇을 하는 일인지 알 수 있게 한 줄로 쓰고, 크기가 비슷한 것끼리 묶습니다.
2. 기준 합의(5분): 이 분기의 목표 지표 하나를 정하고, 위 기준표에서 1·5·10점이 각각 무엇인지 팀 말로 고칩니다.
3. 개별 채점(10분): 서로의 점수를 보지 않고 각자 채점합니다. 먼저 말하는 사람의 점수에 끌려가는 것을 막기 위해서입니다.
4. 격차 토론(15분): 같은 축에서 사람별 점수가 4점 이상 벌어진 항목만 이유를 듣습니다. 이 과정에서 숨은 정보(과거 실험, 기술 제약)가 드러납니다.
5. 평균 입력과 정렬: 합의한 점수를 도구에 입력하고 "결과 복사"로 회의록에 붙입니다.
6. 상위 후보 확정: 상위 2~3개를 이번 주기 실행 후보로 정하고, 자신감이 낮은 항목에는 검증 작업을 붙입니다.

이 순서는 하나의 예시이며 팀 규모에 따라 줄일 수 있습니다. 혼자 쓴다면 3번과 4번을 "하루 지난 뒤 다시 채점해 보기"로 바꾸면 첫인상 편향을 줄이는 데 도움이 됩니다.

입력 규칙과 도구의 동작

• 초기 점수: 새 항목은 영향력·자신감·용이성이 모두 5점으로 들어옵니다. 5점은 "아직 채점하지 않음"과 같으므로 추가한 뒤 반드시 조정하세요.
• 이름 중복: 같은 이름은 추가되지 않습니다. 이름 앞뒤의 공백은 제거되고 최대 80자입니다.
• 점수 입력: 값을 바꾼 뒤 칸을 벗어나면 저장되고 표가 즉시 다시 정렬됩니다. 순위가 바뀌어 행이 움직이는 것은 정상입니다.
• 1위 표시: 최고점이 같은 항목은 모두 강조되며 🏆가 붙습니다.
• 방식 저장: 마지막에 고른 평균/곱 방식은 항목 목록과 별도로 기억됩니다.
• 복사 결과: "순위. 이름 - 점수 [계산식]" 형태의 줄로 나와서 메신저나 문서에 그대로 붙일 수 있습니다.

점수를 해석하는 법

점수는 절대 평가가 아니라 같은 팀이 같은 날 매긴 후보끼리의 상대 순위입니다. 7.3과 7.0의 차이는 오차 범위에 가깝기 때문에 소수점 한두 자리 차이로 우열을 단정하지 말고 상위 2~3개를 후보군으로 묶어 보세요. 자신감이 낮은 상위 후보(예: 체험 기간 단축, 영향력 8·자신감 4)는 바로 실행하기보다 소규모 검증이나 고객 인터뷰로 자신감을 올린 뒤 재평가하는 것이 좋습니다. 실험이 끝나면 결과를 보고 다음 분기에는 자신감 점수를 근거 있게 고쳐 쓰는 것이 이 방식을 살아 있게 만듭니다.

흔한 실수

• 자신감을 희망으로 채운다. 근거가 없으면 낮게 매기는 것이 규칙입니다. 이 축이 있는 이유는 과신하는 아이디어를 거르기 위해서입니다.
• 혼자 점수를 매긴다. 같은 후보를 두세 명이 각자 매긴 뒤 평균을 내면 개인 편향이 줄어듭니다.
• 모든 점수를 6~8점에 몰아 준다. 변별력이 사라집니다. 후보 중 가장 쉬운 것에 9~10을, 가장 어려운 것에 1~3을 먼저 주고 나머지를 배치해 보세요.
• 범위가 다른 후보를 섞는다. 하루짜리 문구 수정과 한 분기짜리 신기능을 한 표에 넣으면 용이성만으로 앞뒤가 정해집니다. 크기를 비슷하게 맞추거나 분리하세요.
• 한 번 매긴 점수를 고정한다. 실험 결과와 새 정보가 나올 때마다 갱신해야 합니다.

재평가 주기와 기록 습관

ICE 표는 한 번 쓰고 버리는 문서가 아니라 주기마다 갱신하는 문서일 때 가치가 큽니다. 실험을 끝낸 항목은 결과를 짧게 적고 자신감이 실제와 얼마나 어긋났는지 돌아보세요. 예를 들어 자신감을 8로 매겼는데 결과가 기대보다 훨씬 낮았다면, 다음 번에는 비슷한 종류의 후보에 근거를 더 엄격하게 요구해야 한다는 신호입니다. 반대로 자신감 3으로 미뤄 둔 후보가 소규모 검증에서 반응이 좋았다면 그때 점수를 올려 다시 줄을 세웁니다. 이 도구는 기록을 날짜별로 남기지 않으므로, 분기가 끝날 때 "결과 복사"로 한 번 내보내 보관하는 습관을 권합니다.

한계와 다른 도구

ICE에는 도달 범위가 없어서 소수 고객에게 큰 영향을 주는 안과 전체 고객에게 작은 영향을 주는 안을 구분하기 어렵습니다. 그 차이가 중요하다면 RICE 스코어링 도구를 쓰세요. 두 축만으로 빠르게 판단하려면임팩트-노력 매트릭스가, 긴급도까지 보려면아이젠하워 매트릭스가 어울립니다. 실험으로 정한 결과를 분기 계획에 반영할 때는OKR 트래커와 연결해 보세요.

입력한 내용은 어디에 저장되나요?

등록한 아이디어와 점수는 이 브라우저의 localStorage에만 저장되며 서버로 전송되지 않습니다. 다른 기기나 브라우저와는 동기화되지 않고, "전체 초기화" 또는 브라우저의 사이트 데이터 삭제로 지울 수 있습니다. 팀과 공유하려면 "결과 복사"를 눌러 표 형태의 텍스트를 문서에 붙여 넣으세요.

자주 묻는 질문