답변 구조 개입이 AI 크롤러 수집을 늘리는가 — 피부과 병원 페이지 1,991곳 층화 무작위 대조 실험(사전등록, 2026-08-10~10-05)
收藏资源简介:
국내 피부과 병원 정보 사이트(크덤집)의 병원 페이지 1,991곳을 층화 무작위로 두 군에 나누고, 처치군에만 답변 구조(페이지 첫머리 요약 문단 + 질문형 소제목)를 넣었습니다. 그 뒤 8주 동안 AI 크롤러 4종(GPTBot·ClaudeBot·OAI-SearchBot·PerplexityBot)이 각 페이지를 몇 번 가져갔는지 쟀습니다. 가설·표본·분석·중단 규칙은 배포 전에 사전등록했습니다. 결과: 검출하지 못했습니다. 주 모형(음이항 회귀) IRR 1.039, 95% 신뢰구간 0.997–1.082, p=0.067, N=1,991. 처치군 방문이 3~4% 많은 방향이었지만 사전에 정한 기준으로는 구분되지 않습니다. 이 결과는 "효과 없음"이 아닙니다. 이 표본으로는 +8% 까지의 효과를 배제하지 못합니다. 2차 지표도 전부 유의하지 않았고, 유의 여부와 무관하게 전부 보고합니다. 8주 수집은 사이트 전체를 훑는 대형 크롤 웨이브 두 번(2·5주차)에 크게 좌우됐습니다. 크롤러가 페이지별 처치를 가려 오기보다 사이트 단위로 몰려 왔다는 뜻으로 읽습니다. 잰 것은 크롤 수집이지 AI 답변의 인용이 아닙니다. 설계: 최근 30일 AI 크롤러 방문이 있고 소개 본문이 있는 피부과 병원 페이지 전수(1,993곳, 프리미엄 2곳 제외 1,991곳). 기저 방문량 3구간 × 수도권 여부로 6개 층을 만들고 층 안에서 해시 순서로 네 군에 배정했습니다(시드 GEO-RCT-2026-08-10). 구조화 데이터 추가(T1)는 이미 전 페이지에 구현돼 있어 검정하지 못하고 대조군으로 흡수했습니다. 처치 블록은 렌더 시점에 붙여 사이트맵 lastmod 가 움직이지 않았음을 배포 전후 해시 대조로 확인했습니다. 분석은 음이항(NB2) 회귀, 공변량 log(기저+1)·log(본문 길이)·층 고정효과. 배포 전 위약 검정 IRR 0.997, p=0.910. 기간 2026-08-10 14:04 ~ 2026-10-05 14:04 KST. 파일: 페이지별 익명화 데이터, 분석 코드(공개 데이터로 다시 돌려 판정 당시 결과와 일치 확인), 사전등록 문서의 판본별 원문 5개(git 커밋 해시·시각 포함), README(변수 설명·재현 방법). 한계: 결과변수는 크롤 수집이며 인용이 아닙니다. 한 사이트·한 업종·한국어 페이지입니다. 사전등록 커밋 시각은 비공개 저장소 기록이라 제3자가 직접 검증할 수 없고, 외부에서 확인할 수 있는 가장 이른 공개는 2026-08-11 02:03 KST 의 https://intrix.kr/lab/preregistration/geo-rct-preregistration 입니다(배포 약 12시간 뒤, 결과 관측 전). 같은 사이트에서 먼저 돌던 다른 무작위 실험의 처치가 군 사이에 불균형하게 깔려 있었으나, 사전 지정한 보정 후에도 결론은 같았습니다. 수치를 인용하실 때 모집단(피부과 병원 페이지 1,991곳)·기간(2026-08-10~10-05)·결과변수(크롤 수집)를 함께 적어 주십시오. Abstract (English): We randomly assigned 1,991 clinic pages on a Korean dermatology directory to control or treatment within six strata. Treatment pages received an answer-oriented block (a summary lead paragraph and question-style subheadings), and we counted fetches by four AI crawlers (GPTBot, ClaudeBot, OAI-SearchBot, PerplexityBot) for eight weeks. Hypotheses, sample, analysis and stopping rules were preregistered before deployment. The primary negative binomial model gave IRR 1.039 (95% CI 0.997–1.082, p = 0.067): the effect was not detected, and effects up to +8% cannot be ruled out. All secondary outcomes were also non-significant. Two site-wide crawl waves dominated the window. The outcome is crawler fetches, not citation in AI answers. Page identifiers are salted hashes; analysis code and every preregistration version are included.



