# RO&LEE Partners — 크롤러 정책 # 원칙: 검색·답변에 노출시켜 주는 크롤러는 허용하고, # 학습 전용 크롤러는 개별 판단한다. # ── 검색엔진 ────────────────────────────── User-agent: Googlebot Allow: / User-agent: Yeti Allow: / User-agent: bingbot Allow: / User-agent: Daum Allow: / # ── AI 검색·답변 (실제 유입이 발생하는 경로) ── User-agent: OAI-SearchBot Allow: / User-agent: ChatGPT-User Allow: / User-agent: Claude-SearchBot Allow: / User-agent: Claude-User Allow: / User-agent: PerplexityBot Allow: / User-agent: Perplexity-User Allow: / # Google-Extended는 Gemini 등 Google AI 응답의 인용 여부에 관여한다. # 이 사이트의 고객 사례 중 Gemini 추천을 통한 상담 유입 건이 있어 # 차단하면 해당 경로가 끊길 수 있으므로 허용한다. User-agent: Google-Extended Allow: / # ── 학습 전용 ───────────────────────────── # GPTBot은 학습 목적 수집이라 차단한다. # 검색 노출용 OAI-SearchBot / ChatGPT-User는 위에서 허용했으므로 # ChatGPT 답변에 인용되는 경로 자체는 유지된다. User-agent: GPTBot Disallow: / # ── 공개하지 않는 화면 ──────────────────── # 관리자 화면은 콘텐츠 작성용이고, /demo/ 는 영업용 샘플이라 # 검색엔진에 노출하지 않는다. 그 외 경로는 모두 허용한다. User-agent: * Disallow: /admin/ Disallow: /demo/ Allow: / Sitemap: https://ronlee.kr/sitemap.xml