# ==========================================
# 1. PERINTEISET HAKUKONEET & AI-HAUT (SALLITTU)
# ==========================================

User-agent: *
Disallow: /wp-admin/   # Esimerkki suojatusta kansiosta
Disallow: /wp-content/plugins/monarch/
Allow: /wp-admin/admin-ajax.php
Allow: /

# Internal / technical areas
Disallow: /wp-login.php
Disallow: /xmlrpc.php

# WordPress search and unnecessary query URLs
Disallow: /?s=
Disallow: /search/

# Sallitaan erikseen kriittiset AI-hakubotit liikennettä varten
User-agent: Googlebot
Allow: /

User-agent: OAI-SearchBot
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

# ==========================================
# 2. TEKOÄLYMALLIEN KOULUTUSBOTIT (ESTETTY)
# ==========================================

# OpenAI (ChatGPT:n taustakoulutus)
User-agent: GPTBot
Disallow: /

# Google (Gemini-mallien koulutus, EI vaikuta normaaliin Google-hakuun)
User-agent: Google-Extended
Disallow: /

# Anthropic (Clauden koulutusbotit)
User-agent: ClaudeBot
Disallow: /

# Apple (Apple Intelligence -koulutus)
User-agent: Applebot-Extended
Disallow: /

# Meta (Llama-mallien koulutus)
User-agent: FacebookBot
Disallow: /

# Yleiset datakaapijat ja AI-koulutusmassat
User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

# ==========================================
# SIVUSTOKARTTA
# ==========================================
Sitemap: https://loginets.com/sitemap_index.xml