# safsoz.av.tr – Enhanced LLMS Permissions with Server Protection
# Full AI access + overload protection

###############################################################################
# 1) Universal AI Access (Full Allow)
###############################################################################

User-Agent: *
Allow: /

AI-Training: allow
AI-Research: allow
AI-Commercial-Use: allow

# Sunucuyu korumak için tarama hızı sınırı
Crawl-Delay: 5
# (Her botun bir isteği gönderdikten sonra en az 5 saniye beklemesini sağlar.)

###############################################################################
# 2) Major AI Bots – Full Access + Rate Limit
###############################################################################

User-Agent: GPTBot
Allow: /
Crawl-Delay: 5

User-Agent: ChatGPT-User
Allow: /
Crawl-Delay: 5

User-Agent: Google-Extended
Allow: /
Crawl-Delay: 4

User-Agent: GoogleOther
Allow: /
Crawl-Delay: 4

User-Agent: ClaudeBot
Allow: /
Crawl-Delay: 5

User-Agent: CCBot
Allow: /
Crawl-Delay: 5

User-Agent: Meta-External-Agent
Allow: /
Crawl-Delay: 6

User-Agent: PerplexityBot
Allow: /
Crawl-Delay: 5

User-Agent: Amazonbot
Allow: /
Crawl-Delay: 6

User-Agent: Applebot-Extended
Allow: /
Crawl-Delay: 5

###############################################################################
# 3) Future-proof AI standards
###############################################################################

Sitemap: https://www.safsoz.av.tr/sitemap_index.xml

AI-Usage: allow
AI-Access: allow
AI-Archive: allow

User-Agent: LLM-Safety
Allow: /
Crawl-Delay: 5

User-Agent: AI-Safety-Crawler
Allow: /
Crawl-Delay: 5

User-Agent: Large-Language-Model
Allow: /
Crawl-Delay: 5

###############################################################################
# 4) Legal clarity 
###############################################################################

# All AI systems may use content for:
# - Training
# - Research
# - Dataset inclusion
# - Commercial model development
# - Summaries & derivative works generation