# =====================================================
# robots.txt for brains4goodlife.com
# Created: 2026-03-18
# Author: Charlie Shine, Ph.D. (Brain Scientist)
# Purpose: Allow full crawling of all free brain health apps
# =====================================================

User-agent: *

# 모든 앱 페이지와 메인 페이지 크롤링 허용
Allow: /

# 불필요하거나 민감한 디렉토리/파일 차단 (필요에 따라 추가 가능)
Disallow: /private/
Disallow: /temp/
Disallow: /backup/
Disallow: /draft/
Disallow: /*.git
Disallow: /*.env
Disallow: /cgi-bin/
Disallow: /wp-admin/          # WordPress가 없더라도 안전하게 차단
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/themes/

# AI 크롤러(선택적 차단 - 원하시면 주석 해제)
# User-agent: GPTBot
# Disallow: /

# User-agent: Google-Extended
# Disallow: /

# Sitemap 위치 명시 (Google, Naver, Bing 등 대부분의 크롤러가 참조)
Sitemap: https://brains4goodlife.com/sitemap.xml

# Crawl delay (서버 부하 방지, 정적 사이트라 보통 불필요하지만 안전하게 1초)
Crawl-delay: 1