# enpay.co.jp robots.txt
#
# AIクローラーの方針（2026-09-03 決定）:
#   - 一般クローラー / AI検索・回答エンジンの「引用系」 … 許可
#   - 生成AIモデルの「学習系」                        … 拒否
#
# robots.txt のグループは継承されない（RFC 9309: 最も具体的な1グループのみが適用され、
# 他グループの Disallow は引き継がれない）。そのため許可グループにも Disallow を明記する。
# また Disallow を Allow より先に書く（最長一致で評価しないパーサーでも Disallow が効くようにするため）。

User-agent: *
Disallow: /content/
Disallow: /contents/
Allow: /

# --- AI検索・回答エンジンの引用系（許可）-------------------------------------
# ユーザーの質問に答えるためにページを取得するクローラー。
# AIの回答内でenpayが正しく認識・言及・引用されるために許可する。
User-agent: OAI-SearchBot
User-agent: ChatGPT-User
User-agent: Claude-SearchBot
User-agent: Claude-User
User-agent: PerplexityBot
User-agent: Perplexity-User
Disallow: /content/
Disallow: /contents/
Allow: /

# --- 生成AIモデルの学習系（拒否）---------------------------------------------
# 収集したコンテンツをモデルの学習データに使うクローラー。
# 一度学習されると撤回できないため拒否する。
#
# ※ Google-Extended の拒否は Google検索・AI Overviews の掲載には影響しない
#    （そちらは Googlebot が担当し、上の `User-agent: *` で許可済み）
User-agent: GPTBot
User-agent: ClaudeBot
User-agent: anthropic-ai
User-agent: CCBot
User-agent: Google-Extended
User-agent: Bytespider
User-agent: Applebot-Extended
User-agent: Meta-ExternalAgent
Disallow: /

Sitemap: https://enpay.co.jp/sitemap.xml