신생 도메인에 크롤 예산이 열리는 순간 — 인바운드 링크와 크롤량의 상관 관찰

신생 도메인의 색인이 더딜 때 가장 흔한 오해는 "검색엔진이 우리를 불신한다(distrust)"는 것입니다. 그러나 저희가 운영 중인 도메인들의 크롤 로그를 놓고 보면, 대부분은 불신이 아니라 아직 크롤 예산이 배정되지 않은 상태입니다. 두 상태는 처방이 완전히 다르기 때문에 구분이 중요합니다.

판별 — 크롤 로그와 색인 집계를 교차한다

URL 단위 색인 조회만 보면 두 상태가 똑같이 "색인 없음"으로 보입니다. 갈림길은 크롤 활동 로그에 있습니다.

• 크롤이 활발한데 색인이 평평하다 → 색인 거부(불신성 신호). 콘텐츠·중복 문제를 의심할 차례입니다.
• 크롤 자체가 하루 0~3페이지 → 크롤 예산 콜드스타트. 콘텐츠를 고칠 문제가 아니라 발견 신호를 공급할 문제입니다.

관찰 — 링크가 늘자 크롤이 뛰었다

강남의 한 의원 자체도메인(royalline.kr)의 3주 로그가 전형적입니다. 7월 중순까지 일일 크롤 0~3페이지, 색인 집계는 한 자릿수에 머물렀습니다. 이후 신뢰 도메인들에서 심층 페이지로 향하는 인바운드 링크를 단계적으로 늘리자, 크롤러가 인지한 링크 수(inLinks)가 12→39로 늘었고 일일 크롤량이 한 자릿수에서 40~50페이지대로 계단식 상승했습니다. 같은 기간 색인 집계는 2에서 21로 단조 증가했습니다. 크롤 중단도, 색인 거부도 없었습니다 — 예산이 열리는 곡선입니다.

실무 함의

• 신생 도메인 진단은 색인 수가 아니라 크롤 로그부터 봅니다. 불신 여부는 크롤×색인의 교차로만 판정됩니다.
• 콜드스타트의 레버는 재발행이 아니라 이미 색인된 페이지로부터의 링크입니다. 심층 페이지로 직접 거는 것이 홈 링크보다 발견 효율이 좋았습니다.
• 색인 흡수 속도(주당 +5~7)보다 발행이 빠르면 미색인 잔고만 쌓입니다. 발행 페이싱은 흡수 속도에 맞춥니다.

이 도메인의 콘텐츠 구조는 로얄라인의원 사례 페이지에서 볼 수 있습니다.