위커프 크롤러 개요

위커프(Weekerp) 웹 크롤러의 역할과 동작 방식, User-Agent 정보, robots.txt 접근 제어 및 차단 방법을 안내합니다.

2026.11.06 업데이트

위커프(Weekerp)는 고객 웹사이트의 사이트맵(Sitemap)을 생성하고 관리하기 위해 웹 크롤러(봇)를 운영합니다.

위커프 크롤러는 고객이 사이트맵 관리 기능을 활성화한 웹사이트에서만 동작하며, 페이지의 접근 가능 여부, 검색엔진 설정, 콘텐츠 변경 여부를 확인하여 사이트맵을 최신 상태로 유지합니다.

 

위커프 크롤러 목록

사용자 에이전트 설명 및 세부 정보
Weekerp-SitemapBot 위커프의 사이트맵 관리 기능에 사용되는 크롤러입니다. 페이지를 방문하여 사이트맵에 포함할 수 있는 페이지인지 확인하고, 콘텐츠 변경 여부를 파악합니다. 기본 동작은 위커프에 사이트를 연결해서 사용하는 고객을 대상으로만 사용합니다.

 

Weekerp-SitemapBot

웹사이트가 없는 페이지를 어떻게 응답하는지 확인하기 위해 /__weekerp_404_로 시작하는 주소를 요청할 수 있습니다. 서버 로그에 이 주소가 보이는 것은 정상 동작입니다.

사용자 에이전트 문자열:

Mozilla/5.0 (compatible; Weekerp-SitemapBot/1.0; +https://weekerp.com/docs/bots)

robots.txt 사용자 에이전트 토큰:

Weekerp-SitemapBot

 

크롤러 접근 제어

Weekerp-SitemapBot은 robots.txt 규칙을 준수합니다. 다음 순서로 규칙을 적용합니다.

  1. User-agent: Weekerp-SitemapBot 규칙이 있으면 그 규칙을 따릅니다.
  2. 없으면 User-agent: Googlebot 규칙을 따릅니다.
  3. 둘 다 없으면 User-agent: * 규칙을 따릅니다.

위커프 크롤러만 차단하려면 다음과 같이 작성합니다.

User-agent: Weekerp-SitemapBot
Disallow: /

robots.txt 변경 사항은 1시간 이내에 반영됩니다. 위커프 고객은 위커프 콘솔에서 사이트맵 관리 기능을 비활성화하여 크롤러의 방문을 중단할 수도 있습니다.

 

크롤러 식별 및 문의

서버 로그에 표시되는 User-Agent 문자열은 다른 프로그램에서도 동일하게 사용할 수 있으므로, User-Agent만으로 실제 위커프 크롤러인지 확인할 수는 없습니다. 위커프 크롤러로 표시된 요청이 비정상적인 동작을 보이는 경우 지원창구를 이용해서 문의해주세요.