# robots.txt - ai.adplatform.it
# Ultimo aggiornamento: 2026-09-25

# --- Motori di ricerca tradizionali: accesso completo ---
User-agent: Googlebot
Allow: /

User-agent: Bingbot
Allow: /

User-agent: *
Allow: /
Disallow: /*?*utm_
Disallow: /*?*fbclid
Disallow: /*?*gclid

# Nota tecnica: la thank-you page e le pagine legal hanno noindex via meta tag
# in HTML: NON vanno bloccate qui in robots.txt. Se le blocchi, Googlebot non
# fa crawl della pagina e quindi non vede mai il tag noindex, che può portare
# a un comportamento di indicizzazione incoerente. noindex in HTML + crawl
# libero è la combinazione corretta per queste pagine.

# --- AI: citabilità nei motori di risposta (consentiti) ---
# Governano se il sito viene citato in ChatGPT Search, Claude, AI Overviews.
User-agent: OAI-SearchBot
Allow: /

User-agent: Claude-SearchBot
Allow: /

User-agent: PerplexityBot
Allow: /

User-agent: Google-Extended
Allow: /

# --- AI: training dei modelli (bloccati) ---
# Non incidono su citabilità/search; qui scegliamo di non alimentare
# il training di modelli terzi con i contenuti del sito.
User-agent: GPTBot
Disallow: /

User-agent: ClaudeBot
Disallow: /

User-agent: CCBot
Disallow: /

User-agent: Bytespider
Disallow: /

User-agent: cohere-ai
Disallow: /

Sitemap: https://ai.adplatform.it/sitemap.xml