AI가 표에서 찾은 “인사이트”는 실제 관찰과 추측이 섞이기 쉽습니다. 숫자에서 바로 원인을 말하게 하지 말고 관찰, 가능한 설명, 추가 확인을 서로 다른 열로 분리합니다.
숫자가 움직였다고 이유까지 들어 있는 것은 아니다
표에서 인사이트를 찾기 전에 어떤 결정을 지원할지 정한다. AI 결과는 관찰 / 비교 기준 / 가능한 가설 / 반대 신호 / 다음 확인으로 나눈다. 비율은 원 합계에서 다시 계산하고, 분모가 다른 세그먼트를 순위만으로 비교하지 않는다.
인사이트 문장 공식
[어떤 지표가] [무엇과 비교해] [어느 범위에서] 달라졌다. 표만으로 원인을 확정할 수 없으며 [가능한 설명]을 확인하려면 [추가 데이터]가 필요하다. 현재 가능한 행동은 [원복 가능한 다음 단계]다.
예: 모바일의 클릭 대비 구매 완료율이 전월보다 낮아졌다. 같은 기간 결제 화면 변경이 있었지만 원인으로 확정할 수 없으므로 기기별 오류와 서버 주문을 확인한다.
이 구조는 긴 문장을 만들기 위한 것이 아니라 사실과 해석이 섞이는 것을 막기 위한 장치입니다.
분석 질문을 먼저 정합니다
“특이한 점을 찾아줘”보다 “지난달 대비 전환율 하락에 가장 크게 기여한 채널과 기기를 찾는다”처럼 결정을 지원하는 질문을 씁니다. 비교 기간, 기준선, 제외 조건도 정합니다.
합성 예제의 구조
표에는 날짜, 채널, 기기, 노출, 클릭, 전환과 비용이 있다고 가정합니다. 전환율과 클릭률은 AI가 임의로 읽지 않게 계산식을 함께 제공합니다.
아래는 실제 광고 계정이 아닌 합성 주간 표다. 전환율은 전환 ÷ 클릭, 클릭당 비용은 비용 ÷ 클릭으로 계산한다.
| 주 | 기기 | 클릭 | 전환 | 비용 | 전환율 | 클릭당 비용 |
|---|---|---|---|---|---|---|
| 1주 | 모바일 | 1,000 | 50 | 1,200,000원 | 5.0% | 1,200원 |
| 2주 | 모바일 | 1,200 | 36 | 1,500,000원 | 3.0% | 1,250원 |
| 1주 | 데스크톱 | 400 | 20 | 520,000원 | 5.0% | 1,300원 |
| 2주 | 데스크톱 | 380 | 20 | 513,000원 | 약 5.3% | 1,350원 |
표에서 바로 말할 수 있는 것은 모바일 전환율이 5.0%에서 3.0%로 낮아졌고, 데스크톱 전환 수는 20건으로 같다는 사실이다. “모바일 광고 소재가 지쳤다”거나 “결제 화면 오류가 원인이다”는 문장은 아직 표 안에 없다.
| 관찰 | 가능한 설명 | 반대 신호 | 다음에 열 자료 |
|---|---|---|---|
| 모바일 클릭은 20% 늘고 전환은 28% 줄음 | 유입 구성 또는 결제 단계 변화 | 데스크톱 전환은 유지 | 채널×기기, 결제 오류, 추적 변경 |
| 모바일 비용은 25% 증가 | 클릭 증가와 단가 상승이 함께 영향 | 클릭당 비용 증가는 약 4.2% | 노출·클릭률·입찰 변경 |
| 데스크톱 전환율은 소폭 상승 | 표본 변동 가능 | 전환 건수는 동일 | 더 긴 기간의 클릭·전환 |
이 정도면 ‘모바일부터 확인한다’는 우선순위는 정할 수 있다. 하지만 소재를 교체할지, 결제 화면을 되돌릴지는 추가 자료를 본 뒤 결정한다. 이것이 관찰과 행동 사이에 가설 칸을 두는 이유다.
아래 합성 표를 분석하되 결과를 세 칸으로 분리해줘.
① 관찰: 표에서 직접 계산되는 사실과 계산식
② 가설: 가능한 원인이지만 표만으로 확정할 수 없는 설명
③ 추가 확인: 가설을 확인하기 위해 필요한 데이터
비교 기준: 전월 대비, 채널×기기 세그먼트.
제약: 상관관계를 원인으로 표현하지 말고 표본이 작은 구간을 표시해.
차트 선택 기준
- 시간 변화는 선 그래프
- 범주 간 크기 비교는 막대 그래프
- 전체에서 차지하는 비율은 범주 수가 적을 때만 구성비 차트
- 두 수치의 관계 탐색은 산점도
- 전환 단계의 이탈은 퍼널 또는 단계별 막대
차트 제목에는 결론을 과장하기보다 비교 범위와 지표를 씁니다. 예: “7월 대비 8월 채널별 전환율”은 좋지만, 원인을 확인하지 않았다면 “소셜 광고 피로로 전환 급락”이라고 단정하지 않습니다.
사람이 다시 계산할 항목
합계로부터 다시 계산해야 하는 비율인지, 평균의 평균을 사용하지 않았는지, 분모가 0인 행이 어떻게 처리됐는지 확인합니다. 표본 수가 크게 다른 세그먼트는 단순 순위로 비교하지 않습니다.
실패 사례
소수의 고가 주문 때문에 평균 주문액이 오른 표를 보고 “모든 고객의 구매력이 개선됐다”고 쓰면 실패입니다. 중앙값, 주문 수와 고객별 분포를 추가로 보고 관찰 범위를 좁혀야 합니다.
비교 전에 확인할 다섯 가지
| 항목 | 확인 질문 |
|---|---|
| 기간 | 같은 길이·요일·시즌인가 |
| 분모 | 클릭, 세션, 사용자 중 같은 기준인가 |
| 표본 | 절대 건수와 결측이 얼마나 되는가 |
| 구성 | 채널·기기·신규 고객 비중이 바뀌었는가 |
| 사건 | 가격·재고·추적·프로모션·배포 변경이 있었는가 |
평균만 비교하지 않고 중앙값·분포·절대 건수와 구성 변화도 봅니다. 전체 수치가 안정적이어도 중요한 세그먼트에서 반대 변화가 있을 수 있습니다.
차트가 오해를 만드는 신호
- 막대축을 잘라 작은 차이를 큰 변화처럼 보입니다.
- 비율만 표시하고 분모와 절대 건수를 숨깁니다.
- 이중축으로 서로 다른 지표가 같은 방향처럼 보입니다.
- 범주가 많은 원형 차트로 차이를 비교하게 합니다.
- 시간 간격이 다른 점을 같은 간격으로 연결합니다.
- 결측값을 0으로 이어 추세처럼 표현합니다.
차트 아래에는 기간, 단위, 분모, 출처와 제외 규칙을 짧게 적습니다.
의사결정 표로 마무리합니다
| 관찰 | 가설 | 반증 자료 | 다음 확인 | 결정 시각 |
|---|---|---|---|---|
| 모바일 완료율 감소 | 결제 변경 영향 가능 | 서버 주문은 정상일 수 있음 | 오류 로그·이벤트 대조 | 8/24 15시 |
인사이트가 있다는 말은 반드시 즉시 행동하라는 뜻이 아닙니다. 데이터가 부족하면 추가 측정과 판단 보류도 명확한 결론입니다.
자주 묻는 질문
AI가 상관관계와 인과관계를 구분할 수 있나요?
구분하도록 요청할 수 있지만 최종 판단은 연구·실험 설계와 업무 맥락이 필요합니다. 같은 시점에 변했다는 이유만으로 원인이라고 쓰지 않습니다.
표본이 작다는 기준은 몇 건인가요?
모든 지표에 통하는 숫자는 없습니다. 현재 전환율, 변동성, 세그먼트와 의사결정 위험에 따라 다릅니다. 절대 건수와 불확실성을 함께 표시합니다.
차트 제목에 결론을 써도 되나요?
관찰된 범위의 결론은 쓸 수 있지만 확인하지 않은 원인을 넣지 않습니다. 모바일 전환율 감소는 가능하지만 소재 피로로 감소는 추가 근거가 필요합니다.
개인별 행을 그대로 분석하지 말고 목적에 맞는 최소 집계 단위로 바꿉니다. 작은 집단은 다른 열과 결합했을 때 다시 식별되지 않는지 확인하세요.