광고주별 지면등급 조정 검증

이 섹션만 KPI 와 세그먼트를 구분하지 않고 전부 합쳐서 볼 수 있습니다. 다른 섹션은 선택한 KPI · 세그먼트 하나만 다룹니다. 판정기간과 지면 범위는 화면 상단 선택을 따르고, 대상 셀렉터로 전부 합계 · KPI별 · 세그먼트별을 고릅니다.

어떤 등급에서 이동 폭이 달라지면 조정 셀이 몇 개가 되는지를 봅니다. 행은 등급(조정 등급 또는 기존 등급), 열은 이동 폭입니다. 누적으로 두면 열이 ≥N칸 이 되어 "이 등급에서 N칸 이상 움직이는 셀은 몇 개인가" 에 바로 답합니다. 열은 5칸까지만 보여줍니다 — 그 이상은 표가 넓어지기만 하고 셀 수가 급격히 줄어 판단에 쓰이지 않습니다. 개별 모드의 마지막 열 5칸+ 는 5칸 이상을 모두 합친 값입니다 — 이동 폭에 상한을 두어 적용 범위를 좁힐 때 쓰는 숫자입니다. 셀을 드래그하면 엑셀처럼 사각 범위가 선택되고 아래에 합계·평균이 나옵니다. 클릭 한 번으로 해제됩니다. 별도의 "조정 셀" 열은 두지 않았습니다 — 조정된 셀은 모두 1칸 이상 움직이므로 누적 모드의 ≥1칸 열이 곧 행 총계입니다. 개별 모드에서 행 총계가 필요하면 그 행을 드래그하거나 누적으로 바꾸면 됩니다. 1차원 분포로는 이 질문에 답할 수 없습니다. 등급과 이동 폭이 독립이 아니기 때문입니다 — 예를 들어 최하위 등급으로 내려온 셀은 전역이 상위 등급이어야 하므로 이동 폭이 클 수밖에 없습니다.

지금 선택한 KPI · 세그먼트 · 판정기간 · 지면 범위의 실제 숫자가 들어갑니다. 설정을 바꾸면 함께 갱신됩니다. 게이트 줄의 오른쪽 초록 숫자가 남은 수, 그 아래 붉은 줄이 그 단계에서 빠진 수입니다 — 빠진다고 버려지는 게 아니라 전역 등급을 그대로 씁니다.

조정 후보가 될 광고주만 남깁니다. 조건은 노출 하한 하나이고, 하한은 상품마다 다릅니다 — 배너 10,000 · 아이커버 1,500. 아이커버는 노출 정의가 달라 노출 ≈ 클릭(CTR 100%)이라, 같은 숫자를 쓰면 배너보다 30~285배 센 기준이 됩니다. "충분히 관찰했는가" 를 묻는 자리이므로 관찰 기회인 노출로 잽니다 — 클릭으로 재면 이미 CTR 로 한 번 걸러진 뒤라 관찰량과 성과가 섞입니다. 이 게이트는 거친 사전 필터입니다. 실측으로 아무리 풀어도 조정 셀은 0~2개만 변합니다 — 셀 게이트 ①(클릭 ≥ z²(1−b)/b)이 같은 일을 지면별 기준율에 맞춰 더 정확하게 하기 때문입니다. 수가 적어 보여도 아래 "소진·전환 비중" 을 함께 보세요 — 광고주 수는 절반이어도 그 광고주들이 실적의 거의 전부를 차지할 수 있습니다. ⚠ 아이커버는 노출 정의가 배너와 달라 노출 ≈ 클릭 이라(세그먼트 CTR 100%) 같은 10,000 이라도 배너에는 느슨하고 아이커버에는 유효한 하한이 됩니다.

게이트(노출 하한)를 통과하지 못해 조정 대상에서 빠진 광고주입니다. 소진 많은 순으로 보여줍니다 — 클릭 순이 아니라 소진 순인 이유는 "돈은 들어가는데 대상이 아닌" 광고주가 판단에 중요하기 때문입니다. 무엇을 봐야 하는가 — 소진이 큰 광고주가 상단에 몰려 있으면 하한을 다시 볼 필요가 있습니다. 노출이 적으면 관찰 자체가 부족하므로 빠지는 것이 맞습니다.

셀마다 "지면의 전역 등급" 과 "그 광고주가 그 지면에서 낸 실측 효율의 등급" 이 몇 칸 다른지 셉니다. 계열이 셋이고 분모가 다릅니다 — 연회색 전체 셀, 파랑 게이트 ① 통과(최소 클릭 충족), 초록 조정 확정. 오른쪽(양수)은 그 광고주에게 전역보다 좋은 지면, 왼쪽은 나쁜 지면입니다. 세로축을 로그로 두면 막대 높이가 실제 차이보다 작게 보입니다 — 수백 대 수만이 두 배쯤으로 보입니다. 그래서 기본을 선형으로 두고, 자릿수가 다른 전체 셀 계열은 숨겨 두었습니다. 무엇을 봐야 하는가 — 파랑입니다. 연회색은 표본이 없어서 흩어진 셀까지 포함하므로 항상 넓게 퍼집니다(여지의 증거가 아닙니다). 파랑이 0 에 몰려 있으면 전역 등급이 이미 맞으므로 조정할 것이 없고, 넓게 퍼져 있으면 여지가 있습니다. 초록이 파랑의 일부여야 정상입니다 — 게이트 ②③ 이 그중 확신할 수 있는 것만 남긴 결과입니다.

NA 판정과 같은 순서입니다. 어디서든 걸리면 전역 등급을 유지합니다. 무엇이 좋은가 — 게이트가 대부분을 걸러내는 것이 정상이고 의도한 동작입니다. 오류 비용이 비대칭이라 보수적으로 설계했기 때문입니다. 거의 걸러내지 않는다면(예: 절반 이상 통과) 게이트가 느슨하다는 뜻이므로 의심해야 합니다. ①표본에서 대부분 탈락하는 것도 정상입니다 — 광고주 하나가 지면 하나에서 수천 클릭을 쌓는 일은 드뭅니다.

KPI 03·05 는 ④ ROAS 미세조정이 붙습니다. 1단계(CVR)로 정해진 등급을 기준으로, 그 셀의 ROAS 가 그 광고주 자기 평균의 2배 이상이면 1칸 상향, 절반 이하면 1칸 하향 합니다(전환 ≥ 10 인 셀만). 절대 ROAS 가 아니라 자기 평균 대비인 이유는, 절대값으로 하면 객단가가 높은 광고주가 모든 지면에서 함께 상향돼 지면 변별이 아니라 광고주 판정이 되기 때문입니다. 대상은 게이트 ①② 를 통과한 셀뿐입니다 — ③ 에서만 걸린 셀은 전역 등급에서 출발해 움직일 수 있지만, ①(표본)이나 ②(안정)에서 걸린 셀은 데이터를 믿을 수 없으므로 ROAS 로도 조정하지 않습니다.

탈락 = 조정하지 않고 전역 등급을 그대로 쓴다는 뜻입니다. 버려지는 게 아니라, 그 셀은 지금처럼 모든 광고주가 공유하는 전역 등급으로 계속 서빙됩니다 — 개인화 대상에서만 빠집니다. 아래 표에서 탈락률은 "직전 대비" 를 보세요. ②·③ 은 앞 게이트를 지난 셀만 대상이므로, "전체 대비 2%" 가 실제로는 남은 셀의 3분의 1~절반이 빠지는 것일 수 있습니다.

셀의 실측 CVR 은 표본이라 흔들립니다. 그래서 점추정만 보고 바로 등급을 바꾸지 않고, Wilson 95% 신뢰구간이 전역 등급 밴드를 완전히 벗어났을 때만 옮깁니다. 역할이 나뉘어 있습니다 — 신뢰구간은 바꿀지 말지만 정하고, 어느 등급으로는 실측 CVR 이 정합니다. 목표가 "그 광고주의 실제 효율에 해당하는 등급을 준다" 이므로 부여값은 실측이어야 합니다. 아래 그림에서 세로선(실측)이 놓인 칸이 곧 부여 등급입니다.

왜 신뢰한계가 아니라 실측인가 — 앞 6개월로 판정하고 뒤 6개월의 실제 등급으로 채점했습니다. |부여 − 실제| 클릭가중 평균이 실측 0.48칸 · 신뢰한계 0.89칸 · 무조정 3.74칸 입니다 (2026-07-27 기준 1회 측정). 신뢰한계는 경계값이지 추정치가 아닙니다 — 점추정 대신 쓰면 구간 반폭만큼 편향이 남고, 그 편향은 게이트 ③ 에서 이미 95% 신뢰로 기각한 전역 등급 쪽입니다. "확실할 때만 바꾼다" 는 원칙은 게이트에서 지킵니다. 부여 폭까지 깎으면 같은 보수성을 두 번 적용하는 셈입니다.

아래는 실제 셀입니다. 회색 띠가 전역 등급 밴드, 파란 막대가 Wilson 95% 구간, 세로선이 실측 CVR 입니다.

가로축은 배수입니다. 1× 오른쪽이 "불안정" 판정이고 그 셀은 조정하지 않습니다. 월별 분모가 제각각이어도 "그 클릭량에서 기대되는 출렁임" 을 빼고 초과 변동만 재므로, 저트래픽 셀의 표본잡음을 불안정으로 오인하지 않습니다. 무엇이 좋은가 — 1× 왼쪽에 대부분 있으면 표본 게이트를 지난 셀들은 대체로 안정적이라는 뜻입니다. 1× 오른쪽 꼬리가 두꺼우면 "클릭은 충분한데 월마다 성과가 흔들리는" 셀이 많다는 뜻이고, 그 셀들을 조정하지 않는 것이 맞습니다.

조정이 필요한 광고주 × 지면 전부를 축으로 잡았습니다(상위 일부를 자른 것이 아닙니다). 세로 = 광고주, 가로 = 지면, 둘 다 조정 셀이 많은 순으로 정렬했습니다. 파랑 = 등급 올림, 빨강 = 내림, 회색 = 조정 없음. 무엇을 봐야 하는가 — 색이 왼쪽 위에 몰려 있으면 조정이 소수 광고주·지면에 집중된 것이고, 고르게 퍼져 있으면 넓게 얇게 조정되는 것입니다. 특정 행 전체가 같은 색이면 그 광고주는 모든 지면에서 같은 방향, 열 전체가 같은 색이면 그 지면의 전역 등급 자체가 광고주 다수에게 안 맞는다는 신호입니다. 커서를 올리면 광고주·지면·기존 등급 → 조정 등급·이동 칸수·클릭·전환·실측 CVR 이 뜹니다.

조정된 셀을 클릭 많은 순으로 보여줍니다. 판정에 쓰인 실제 수치를 함께 실었습니다 — 실측 CVR(그 광고주의 그 지면 성과), 지면 기준 CVR(= 게이트 ① 의 기준선 b · 그 지면에서 집행한 게이트 통과 광고주 합산 · 기존 업종 등급의 근거), 최소 클릭(게이트 ① 하한 z²(1−b)/b — 지면 기준 CVR 에서 계산되므로 지면마다 다릅니다. 왼쪽 클릭 과 비교하면 그 셀이 표본 게이트를 어떻게 지났는지 바로 보입니다), X² 배수(게이트 ②, 1× 넘으면 불안정), 셀 ROAS(그 지면의 매출÷비용), 광고주 ROAS(그 광고주가 집행한 모든 지면 합산 매출÷비용 = 배수의 분모), 배수(셀 ROAS ÷ 광고주 ROAS, 2단계 판정값). 등급은 기존 → 1단계(CVR) → ROAS(±1) → 최종 순으로 보여줍니다. 이동 열의 양수는 등급을 올린 것(그 광고주에게 더 좋은 지면)입니다.

같은 지면에서 같은 등급을 받는 광고주를 한 줄로 묶습니다. 산출이 (광고주, 지면, 등급) 에서 (지면, 등급, 광고주목록) 이 됩니다 — 등급은 하나도 바뀌지 않는 무손실 압축입니다. 무엇을 봐야 하는가 — 1인 그룹이 많으면 조정이 광고주마다 제각각이라 묶을 게 없다는 뜻이고, 큰 그룹이 많으면 여러 광고주가 같은 판정을 공유해 그만큼 행수가 줄어든다는 뜻입니다.

한 행의 광고주들은 기존 등급과 조정 등급이 모두 같습니다 — 기존 등급은 지면의 전역 등급이라 광고주 축이 없고, 조정 등급은 그룹을 묶는 키이기 때문입니다. 다만 효율이 같다는 뜻은 아닙니다. 같은 등급 밴드 안에 들어왔을 뿐이라, 그 안에서 실측 CVR 은 몇 배씩 차이날 수 있습니다. 광고주 열에는 그 그룹의 광고주를 전원 싣습니다.