AI Crawler Controls
Argent administrerer automatisk din robots.txt — åbner ChatGPT, Claude og Gemini, og lukker prisrobotter og konkurrenters scrapers ude. Opdateres automatisk, 24/7.
Tjek dine crawler-indstillinger →Problemet
Standard robots.txt-konfigurationer blokerer alle ukendte bots — inklusiv ChatGPT, Claude og Gemini.
User-agent: * Disallow: / # ChatGPT, Claude og Gemini # er nu blokeret fra dit website. # De kan ikke finde dig.
# Argent AI Crawler Controls User-agent: GPTBot Allow: / User-agent: ClaudeBot Allow: / User-agent: Google-Extended Allow: / User-agent: * Disallow: /
6 AI-systemer
Argent holder listen opdateret, efterhånden som nye AI-systemer lanceres.
ChatGPT
Lukket indOpenAI
GPTBot
Claude
Lukket indAnthropic
ClaudeBot
Gemini
Lukket indGoogle-Extended
Perplexity
Lukket indPerplexity AI
PerplexityBot
Bing Copilot
Lukket indMicrosoft
Bingbot
Meta AI
Lukket indMeta
meta-externalagent
Autonomt vedligeholdt
Argent overvåger OpenAI, Anthropic og Googles officielle dokumentation og opdaterer dine crawler-regler automatisk, når nye bots udsendes — uden at du løfter en finger.
Tjek det gratis med vores scanner — og se præcis hvilke AI-bots der har adgang.