# M51 Marketing - Robots.txt
# Policy: alle crawlere velkomne (søk, AI-søk og trening) - kun private stier blokkert.
# robots.txt-grupper slås IKKE sammen: å liste AI-botene separat overstyrer *-gruppen
# og risikerer å utelate Disallow-stier man legger til senere. Én gruppe = korrekt for alle.
# Googlebot styrer AI Overviews/AI Mode. OAI-SearchBot = ChatGPT-søk. PerplexityBot = Perplexity.
# Google-Extended/GPTBot/ClaudeBot mv. er trening-only og påvirker ikke AI-søk-synlighet.

User-agent: *
Allow: /
Disallow: /api/
Disallow: /login/
Disallow: /admin/
Disallow: /verktoy/leads/
Disallow: /invest/
Disallow: /invest-materials/
Disallow: /agent-demo/
Disallow: /ressurser/
Disallow: /prov-aios/
Disallow: /intern
Disallow: /takk-prov-aios/
Disallow: /prov-m51-markedsforingsagent/
Disallow: /takk/
Disallow: /takk-kontakt/
Disallow: /frokostseminar-m51-df/
Disallow: /frokostseminar-m51-dfs/
Disallow: /frokostseminar-ai-agenter/

Sitemap: https://m51.no/sitemap-index.xml