관련성과 순위는 왜 AI 답변 엔진을 지배합니까?

C-SEO Bench는 생성 엔진의 마음에 들도록 문서를 재작성하는 일이 실제로 통하는지를 묻는 벤치마크이고, 그 답은 대체로 아니오입니다. NeurIPS 2025 Datasets and Benchmarks Track에서 발표되었고, 질문 응답과 상품 추천 두 과제를 여섯 개 도메인에 걸쳐 다루며, 코드와 데이터는 공개되어 있습니다.¹ 이것은 GEO와 SEO 단계가 그 둘레에 세워진 결과이기도 합니다.

초록은 결과를 얼버무리지 않고 말합니다. “현재의 C-SEO 방법 대부분은 대체로 효과가 없을 뿐 아니라 문서 순위에 부정적인 영향을 주는 경우도 많으며, 이는 기대와 정반대다. 오히려 LLM 컨텍스트 안에서 출처의 순위를 올리려는 전통적 SEO 전략이 유의하게 더 효과적이다.” 논문 자체의 요약은, 대상 문서를 컨텍스트 윈도우의 첫 번째에 두는 것이 “LLM 응답에서 어떤 C-SEO 방법보다 훨씬 큰 인용 순위 상승을 가져온다”는 것입니다.

이 결과를 보통의 단발 실험보다 물리치기 어렵게 만드는 세부가 둘 있습니다. 첫째는 폭입니다. 논문은 54개 “방법과 도메인” 사례를 보고하는데, 흩어진 승리가 있었다면 드러날 만한 수입니다. 그 위에서 나온 발견이 “54개 사례 중 순위 개선이 통계적으로 유의한 경우는 세 건만 발견했다”이고, 질문 응답 과제에서는 어떤 방법도 효과가 없었습니다. 둘째는 실패의 방향입니다. 몇몇 변환은 도움이 되지 않은 데 그치지 않고 문서의 순위를 떨어뜨렸습니다. 통계 추가는 측정된 24개 설정 가운데 19개에서 순위를 낮췄습니다.¹ 중립적인 전술은 값이 쌉니다. 부정적인 전술은 잘못된 블로그 글을 읽은 대가로 내는 세금입니다.

재작성으로 얻은 이득은 같은 후보 집합 안에서 같은 재작성을 채택한 문서가 늘어날수록 줄어들고, C-SEO Bench는 그 감쇠를 직접 측정했습니다. 벤치마크는 후보 집합 안에서 같은 방법으로 최적화된 문서의 수를 바꿔 가며 “C-SEO 채택자를 늘릴수록 전체 이득은 줄어들며, 이 문제의 혼잡하고 제로섬적인 성격을 보여준다”는 것을 확인했습니다.¹ 2026년 비판적 서베이는 개별 이득의 경쟁적 침식을 중간 확신도에 놓았고, 이는 이 분야의 주요 주장을 담은 표에서 중간으로 표시된 세 행 가운데 하나입니다.²

이것은 스톡과 플로의 차이이고, 반복 예산을 어디에 둘지 결정해야 하는 차이입니다. 진짜 관련성은 스톡입니다. 어떤 질문에 대한 최선의 답인 페이지는 경쟁자도 관련성을 갖게 되었다고 해서 덜 관련되지 않습니다. 관련성은 같은 자리에 늘어선 상대가 아니라 쿼리에 대해 판단되기 때문입니다. 서식 전술은 플로입니다. 후보 집합 안에서 여러분의 문서를 눈에 띄게 만들어 작동하므로, 그 가치는 다른 문서들이 그것을 채택하는 속도와 정확히 같은 속도로 떨어집니다.

2024년 KDD 논문은 같은 재분배를 반대편에서 보여줍니다. 순위별 표를 보면 성적이 가장 좋은 세 전술이 이미 1위인 출처의 가시성은 낮추면서 5위 출처의 가시성은 대략 두 배로 만듭니다. 인용 출처 추가는 1위 가시성을 -30.3%, 5위 가시성을 +115.1% 움직였고, 인용문 추가는 -22.9%, 통계 추가는 -20.6%였습니다.³ 이 기법들은 답변 점유율을 만들어 내지 않습니다. 강한 출처에서 약한 출처로 옮길 뿐입니다. 여러분이 강한 출처라면, 같은 기법은 비용입니다.

그것은 답변 점유율을 더 크게 가져가는 값을 하고, 발표된 근거는 거기까지입니다. 비판적 서베이가 이 분야의 주요 주장에 매긴 확신도 표는 “인용 점수가 클릭, 전환, 매출을 예측한다”를 그 표가 쓰는 가장 낮은 구간인 매우 낮음에 놓습니다. 근거는 “시사적인 준실험 하나와 몇 건의 업계 주장”이고, 인과는 확립되지 않았습니다.² 순위에서 컨텍스트 위치로, 다시 인용으로 이어지는 사슬은 측정할 수 있습니다. 인용에서 방문으로, 방문에서 고객으로 이어지는 사슬은 아직 전혀 측정되지 않았습니다.

독립적인 행동 데이터는 마지막 고리가 그 자체로 얇다는 것을 보여줍니다. 퓨 리서치 센터는 2025년 3월 Google 검색 68,879건을 추적했고, AI 요약을 만난 사용자가 전통적인 검색 결과를 클릭한 것은 방문의 8%였으며 요약이 없던 방문에서는 15%였습니다. 요약 안의 링크를 클릭한 것은 방문의 1%뿐이었습니다.⁶ 컨텍스트의 맨 앞자리를 차지해서 사는 것은, 대체로 클릭하지 않을 독자 앞에 이름이 한 번 나오는 일입니다.

실무적인 결과가 둘 따라옵니다. 첫째, 순위 작업의 가치는 예측 트래픽이 아니라 여러분의 이름을 부르는 답변의 비율로 매기십시오. 오늘 누구나 실제로 측정할 수 있는 변수는 점유율이기 때문입니다. 둘째, 값이 매겨진 성과 주장은 의심하고 보십시오. 같은 서베이 표의 마지막 행은 업계가 아직도 되풀이하는 그 숫자를 위한 자리이고, “GEO가 가시성을 40% 높인다”에 대해 “일반적 주장으로는 기각”이라는 판정을 기록합니다. 근거는 그 숫자가 하나의 구성 아래 단일 지표에서 나온 상대적 최댓값이라는 점입니다.² 순위를 먼저 올리는 것은 그것이 깨끗하게 측정된 유일한 변수를 움직이기 때문이지, 누군가가 여러분을 위해 성과에 값을 매겨 주었기 때문이 아닙니다.