Gratis verktyg

robots.txt-generator för AI-sök

Skapa en robots.txt gratis: välj vilka AI-botar (GPTBot, OAI-SearchBot, PerplexityBot, ClaudeBot, Google-Extended) som får läsa din sajt. Kopiera eller ladda ner direkt.

GPTBot OpenAI · träningOAI-SearchBot OpenAI (ChatGPT search) · sökChatGPT-User OpenAI (ChatGPT) · användarhämtningPerplexityBot Perplexity · sökPerplexity-User Perplexity · användarhämtningClaudeBot Anthropic · träningClaude-SearchBot Anthropic · sökClaude-User Anthropic · användarhämtningGoogle-Extended Google (Gemini) · träningGooglebot Google (AI Overviews) · sökBingbot Microsoft (Copilot) · sökApplebot-Extended Apple Intelligence · träningMeta-ExternalAgent Meta AI · träningCCBot Common Crawl · träningBytespider ByteDance · träning

Sökvägar att blockera (en per rad)

Sidkartans adress

robots.txt

User-agent: *
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: GPTBot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: OAI-SearchBot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: ChatGPT-User
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: PerplexityBot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Perplexity-User
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: ClaudeBot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Claude-SearchBot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Claude-User
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Google-Extended
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Googlebot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Bingbot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Applebot-Extended
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Meta-ExternalAgent
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: CCBot
Allow: /
Disallow: /admin/
Disallow: /cart/

User-agent: Bytespider
Allow: /
Disallow: /admin/
Disallow: /cart/

Vanliga frågor

Vad är robots.txt?

En textfil i roten på din sajt (dindoman.se/robots.txt) som talar om för sökmotorer och AI-botar vilka delar av sajten de får läsa.

Ska jag blockera GPTBot?

GPTBot samlar data för att träna modeller. Blockerar du den påverkas inte ChatGPT-sök, som använder OAI-SearchBot. Vill du synas i AI-svar ska sökbotarna vara tillåtna.

Vad är skillnaden på tränings- och sökbotar?

Träningsbotar samlar in text för framtida modeller. Sökbotar hämtar sidor i realtid för att citera dem i svar. Sökbotarna är de som ger synlighet och trafik.

Var lägger jag filen?

Ladda upp robots.txt i webbplatsens rot så att den nås på https://dindoman.se/robots.txt.

Nämns ni faktiskt i AI-svaren?

Åtkomst är steg ett. Få din gratis AI Visibility Score i ChatGPT, Perplexity, Gemini och Google.

Kör gratis analys