# Tjek robots.txt for AI-bots: blokerer du GPTBot eller ChatGPT?

> Analysér din robots.txt mod 11 AI-bots (GPTBot, OAI-SearchBot, ClaudeBot, PerplexityBot…). Se, hvilke du blokerer, den præcise linje og en rettelse, du kan kopiere.

- **Kilde (source):** https://aistohire.com/da/aeopro-tjek-om-chatgpt-og-perplexity-kan-citere-dit-websted-198/f/audit-af-robots-txt-for-ai-bots
- **Platform (platform):** AIstoHire
- **Sprog (language):** da

## Kort sagt

- Tjek om din robots.txt blokerer AI-bots
- Indsæt en URL, og Aeopro krydser din robots.txt med de 11 bots fra ChatGPT, Claude, Perplexity og Bing og viser dig den præcise linje, der lukker døren for dem.
- Adskiller det at blokere fra det at være usynlig
- Reel præcedens, ikke tekstsøgning
- Den præcise linje, der blokerer dig

## Tjek om din robots.txt blokerer AI-bots

Aeopro henter din /robots.txt, parser den efter User-agent-grupper og vurderer, bot for bot, om den URL, du auditerer, er tilladt eller blokeret. Den leder ikke efter din bots navn «på øjemål» i filen: den anvender reglerne på ægte: den specifikke gruppe vinder over jokertegnet *, og inden for gruppen gælder reglen med det længste mønster, hvor Allow afgør uafgjort over for Disallow. Den understøtter jokertegnene * og $ i stierne, så en Disallow: /*?*  eller en Allow: /blog/$ fortolkes, som crawleren fortolker dem, ikke som de ser ud ved første øjekast.

Resultatet er en matrix over 11 bots med deres klasse ved siden af: OAI-SearchBot, ChatGPT-User, Claude-User, Claude-SearchBot, PerplexityBot og Bingbot er svar-bots, dem der søger, citerer og linker; GPTBot, ClaudeBot, Google-Extended, Applebot-Extended og CCBot er trænings-bots. Den skelnen er nøglen til hele rapporten: hvis du blokerer en svar-bot, kommer fundet ind som blokerende og sætter loft over din AEO-score, for uden adgang er der ingen mulig citation. Hvis du blokerer en trænings-bot, er fundet informativt: at ville holde sit indhold ude af et datasæt er en legitim beslutning, og Aeopro diskuterer den ikke med dig.

Hver blokeret bot kommer med beviset: det røde trafiklys, den User-agent-gruppe, der gælder for den, og den præcise linje i filen, der forårsager det, kopieret ordret. Du behøver ikke genlæse din robots.txt for at lede efter synderen, du har den foran dig.

Aeopro dækker også de fejl, der ikke er en Disallow. Hvis din /robots.txt returnerer en HTML-side, typisk for en opsat 404 eller en SPA-router, der tager det hele, eller svarer med en 500-fejl, opdager den det og løfter det som et fund: bots behandler det som «uden restriktioner», men det er et tegn på sjusk. Og hvis der er en Crawl-delay over 10 sekunder, advarer den dig, for ved det tempo opgiver nogle crawlere at læse dig helt. Hvis du slet ikke har en robots.txt, siger rapporten det uden at straffe dig: fraværet blokerer ingen.

## Hvad den indeholder

- **Adskiller det at blokere fra det at være usynlig** — at blokere en trænings-bot er din egen beslutning og vises som informativt. At blokere en svar-bot er at forsvinde fra svarene i ChatGPT eller Perplexity, og det er et blokerende fund, der sætter loft over din AEO-score.
- **Reel præcedens, ikke tekstsøgning** — den specifikke gruppe over jokertegnet *, det længste mønster over det korte og Allow, der vinder ved uafgjort, med understøttelse af * og $ i stierne. Det er den samme logik, som crawleren anvender, så dommen er den, du faktisk får.
- **Den præcise linje, der blokerer dig** — hver rød bot kommer med den User-agent-gruppe, der gælder for den, og den bogstavelige tekst på den linje, der forårsager det. Slut med at læse 200 linjer robots.txt i hånden for at finde den Disallow, der er til overs.
- **De 11 bots, der betyder noget nu, med deres klasse** — de seks svar-bots (OAI-SearchBot, ChatGPT-User, Claude-User, Claude-SearchBot, PerplexityBot, Bingbot) og de fem trænings-bots (GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot), vurderet mod den konkrete URL, du auditerer, ikke kun mod domænets rod.
- **Fanger de stille fejl** — en /robots.txt, der serverer HTML i stedet for ren tekst, en der svarer 500, eller en absurd Crawl-delay over 10 sekunder. Fejl, der ikke vises i noget klassisk SEO-værktøj, og som afslører en dårligt konfigureret server.
- **Rettelsen er allerede skrevet, og uden at bruge AI** — fra selve fundet genererer du robots.txt-rettelsen med en kontakt pr. bot. Du vælger, hvem du åbner for, den endelige fil genereres live med din nuværende robots.txt plus den nye blok, og du kopierer den. Den er deterministisk: den bruger ikke tokens.
- **Gratis at gentage** — robots.txt-auditten er en del af rapportens deterministiske kontroller. Du ændrer filen, udruller den, analyserer igen, og deltaet fortæller dig, om fundet blev lukket. Så mange gange, du vil.

## Ofte stillede spørgsmål

### Hvordan ved jeg, om min robots.txt blokerer ChatGPT?

Indsæt URL'en i Aeopro: den henter din /robots.txt, parser den efter User-agent-grupper og vurderer netop den URL mod de 11 AI-bots. På kortet «Adgang for AI-bots» har du hver enkelt med et grønt eller rødt trafiklys. For ChatGPT er der to forskellige bots, og de bør ikke forveksles: OAI-SearchBot og ChatGPT-User er svar-bots, dem der søger og citerer kilder i en samtale; GPTBot er trænings-botten. Hvis du vil optræde som citeret, er de to første dem, du ikke må blokere.

### Hvad er forskellen på en svar-bot og en trænings-bot?

En trænings-bot (GPTBot, ClaudeBot, Google-Extended, Applebot-Extended, CCBot) indsamler indhold til at træne modeller. At blokere den er en legitim beslutning, og Aeopro markerer det som informativt uden at trække i din score. En svar-bot (OAI-SearchBot, ChatGPT-User, Claude-User, Claude-SearchBot, PerplexityBot, Bingbot) er den, der går ind og læser din side i det øjeblik, nogen spørger om noget, og det er den, der citerer og linker til dig i svaret. At blokere den svarer til ikke at eksistere for den AI: derfor kommer det fund ind som blokerende og sætter loft over rapportens AEO-score.

### Hvorfor ser min robots.txt tilladende ud, når værktøjet siger, at jeg blokerer bots?

Det er næsten altid et præcedensproblem. Hvis du har en specifik gruppe til en bot, erstatter den gruppe helt jokertegnets *-gruppe: de tilladende regler i * gælder ikke længere for den. Og inden for en gruppe vinder hverken den første eller den sidste regel, det er den med det længste mønster, der vinder, hvor Allow afgør uafgjort over for Disallow. Tilføj jokertegnene * og $, og det er let, at en Disallow, der var tænkt til søgeparametre, ender med at dække halve hjemmesiden. Aeopro anvender de regler på samme måde som crawleren og viser dig den præcise linje, der afgør dommen, så du kan se, hvor blokeringen kommer fra.

### Hvad sker der, hvis jeg ikke har en robots.txt, eller hvis den returnerer en fejl?

At mangle en robots.txt blokerer ingen, og Aeopro straffer dig ikke for det: den angiver det og går videre. Det, der udløser et fund, er, at filen er i stykker: hvis din /robots.txt returnerer en HTML-side i stedet for ren tekst, hvilket er meget almindeligt på single-page-hjemmesider, hvor routeren tager alle stier, eller hvis den svarer med en 500-fejl. Bots tolker det som «uden restriktioner», så det lukker ikke døren for dig, men det er et symptom på en dårligt konfigureret server. Den advarer dig også om en Crawl-delay over 10 sekunder, fordi nogle crawlere ved det tempo opgiver, før de har læst hele dit site.

### Giver Aeopro mig den rettede robots.txt eller kun diagnosen?

Den giver dig den rettet. Fra fundet åbner du robots.txt-rettelsen, som har en kontakt for hver blokeret bot: du bestemmer, hvem du åbner for, og hvem du holder ude, og den komplette fil genereres live ved at sammensætte din nuværende robots.txt med den nye blok af tilladelser, idet den specifikke gruppe vinder over jokertegnet. Du kopierer den og uploader den. Rettelsen sammensættes uden AI: den er deterministisk og bruger ikke tokens, ligesom selve auditten, så du kan analysere igen bagefter for at bekræfte, at fundet blev lukket.

- [Aeopro — AEO-audit: gør dig læsbar og citerbar for AI](https://aistohire.com/da/aeopro-tjek-om-chatgpt-og-perplexity-kan-citere-dit-websted-198)

## Om platformen

**Aeopro — AEO-audit: gør dig læsbar og citerbar for AI** — applikation til AIstoHire. Tilgængelig på: https://aistohire.com/da/aeopro-tjek-om-chatgpt-og-perplexity-kan-citere-dit-websted-198/f/audit-af-robots-txt-for-ai-bots

### Andre sprog

- `es`: https://aistohire.com/es/aeopro-auditoria-aeo-visibilidad-en-ia-198/f/auditoria-robots-txt-bots-ia
- `en`: https://aistohire.com/aeopro-aeo-audit-ai-visibility-198/f/robots-txt-audit-ai-bots
- `fr`: https://aistohire.com/fr/aeopro-audit-aeo-visibilite-ia-198/f/audit-robots-txt-bots-ia
- `it`: https://aistohire.com/it/aeopro-audit-aeo-visibilita-ia-198/f/audit-robots-txt-bot-ia
- `pt`: https://aistohire.com/pt/aeopro-auditoria-aeo-visibilidade-ia-198/f/auditoria-robots-txt-bots-ia
- `de`: https://aistohire.com/de/aeopro-aeo-audit-ki-sichtbarkeit-198/f/robots-txt-audit-ki-bots
- `bg`: https://aistohire.com/bg/aeopro-proverete-dali-chatgpt-i-perplexity-mogat-da-tsitirat-sayta-vi-198/f/odit-na-robots-txt-za-ai-botove
- `ja`: https://aistohire.com/ja/aeo-kansa-ai-inyo-taisaku-198/f/robots-txt-ai-bot-kansa
- `nl`: https://aistohire.com/nl/aeopro-controleer-of-chatgpt-en-perplexity-je-site-kunnen-citeren-198/f/robots-txt-audit-ai-bots
- `ko`: https://aistohire.com/ko/aeopro-aeo-audit-ai-inyong-198/f/robots-txt-ai-bot-jeomgeom
- `sv`: https://aistohire.com/sv/aeopro-granska-om-chatgpt-och-perplexity-kan-citera-din-webbplats-198/f/granskning-robots-txt-ai-botar
- `ar`: https://aistohire.com/ar/aeopro-dqq-hl-ysttia-chatgpt-wperplexity-alastshhad-bmuqak-198/f/tadqiq-robots-txt-botat-althaka2-alistinaa3i
- `no`: https://aistohire.com/no/aeopro-sjekk-om-chatgpt-og-perplexity-kan-sitere-nettstedet-ditt-198/f/revisjon-robots-txt-ki-roboter
- `fi`: https://aistohire.com/fi/aeopro-auditoi-voivatko-chatgpt-ja-perplexity-lainata-sivustoasi-198/f/robots-txt-tekoalybotit-auditointi
- `zh`: https://aistohire.com/zh/aeopro-aeo-geo-audit-198/f/robots-txt-ai-bots-audit
- `pl`: https://aistohire.com/pl/aeopro-sprawdz-czy-chatgpt-i-perplexity-zacytuja-twoja-strone-198/f/audyt-robots-txt-boty-ai
- `he`: https://aistohire.com/he/aeopro-bdko-am-chatgpt-v-perplexity-ykolim-ltstt-at-hatr-shlkm-198/f/bdikat-robots-txt-botim-bina-melachutit
- `cs`: https://aistohire.com/cs/aeopro-zjisti-zda-chatgpt-a-perplexity-mohou-citovat-tvuj-web-198/f/audit-robots-txt-ai-boti
- `id`: https://aistohire.com/id/aeopro-audit-apakah-chatgpt-dan-perplexity-bisa-kutip-situs-anda-198/f/audit-robots-txt-bot-ai
