robots.txt is de universele standaard om crawlers te vertellen wat ze mogen benaderen. AI-crawlers zoals GPTBot, ClaudeBot en Googlebot-Extended controleren dit bestand als eerste voordat ze je site crawlen.

Maak een robots.txt-bestand aan in de hoofdmap van je website.

robots.txt plain

# /robots.txt
User-agent: *
Allow: /

# Allow AI crawlers explicitly
User-agent: GPTBot
Allow: /

User-agent: ClaudeBot
Allow: /

User-agent: Google-Extended
Allow: /

Sitemap: https://knvb.nl/sitemap.xml

Bronnen

XML-sitemap +7 punten totaal

Geen geldige XML-sitemap gevonden. Gecontroleerd: knvb.nl/sitemap.xml, knvb.nl/sitemap_index.xml.

XML-sitemap

HOOG

Sitemaps helpen AI-crawlers al je pagina's efficiënt te ontdekken. Zonder sitemap kunnen crawlers belangrijke content missen of tijd verspillen aan het ontdekken van je sitestructuur.

Maak een XML-sitemap aan en verwijs ernaar in robots.txt met een Sitemap:-richtlijn.

sitemap.xml html

<!-- /sitemap.xml -->
<?xml version="1.0" encoding="UTF-8"?>
<urlset xmlns="http://www.sitemaps.org/schemas/sitemap/0.9">
  <url>
    <loc>https://knvb.nl/</loc>
    <lastmod>2025-01-15</lastmod>
    <changefreq>weekly</changefreq>
    <priority>1.0</priority>
  </url>
  <url>
    <loc>https://knvb.nl/about</loc>
    <lastmod>2025-01-10</lastmod>
  </url>
</urlset>

# Add to /robots.txt:
Sitemap: https://knvb.nl/sitemap.xml

Bronnen

JSON-LD aanwezig +7 punten totaal

Geen geldige JSON-LD-blokken met schema.org @context gevonden.

JSON-LD aanwezig

HOOG

JSON-LD is het voorkeursformaat voor gestructureerde data bij Google en AI-zoekmachines. Het vertelt AI-systemen precies waar je pagina over gaat met behulp van een gestandaardiseerd vocabulaire.

Voeg minstens één <script type="application/ld+json">-block toe met "@context": "schema.org" dat je organisatie of pagina-inhoud beschrijft. Dit geeft agents een ondubbelzinnige, machineleesbare beschrijving van je pagina en maakt deze geschikt voor rich results in de zoekmachine.

JSON-LD html

<script type="application/ld+json">
{
  "@context": "https://schema.org",
  "@type": "Organization",
  "name": "Your Company",
  "url": "https://knvb.nl",
  "logo": "https://knvb.nl/logo.png"
}
</script>

Bronnen

Repareer met AI-vaardigheden

$ /plugin marketplace add bartwaardenburg/isagentready-skills

Gedetailleerde resultaten

Agentprotocollen

Weging 15% · Geen toepasselijke checkpoints · 5 bonuskansen

Niet beoordeeld

WebMCP Declaratieve API: Mislukt

API Catalog (RFC 9727): Mislukt

Agent Skills index: Mislukt

x402-betalingen: Overgeslagen

MPP (x-payment-info): Overgeslagen

UCP (.well-known/ucp): Overgeslagen

ACP (.well-known/acp.json): Overgeslagen

AP2 (A2A payments capability): Overgeslagen

Bruikbaarheid van OpenAPI: Overgeslagen

Kwaliteit van MCP server card: Overgeslagen

Live OpenAPI-verificatie: Overgeslagen

Live MCP-verificatie: Overgeslagen

AI-catalogus: Mislukt

API-foutresponses: Overgeslagen

API rate-limit-headers: Overgeslagen

Vindbaarheid van developerdocumentatie: Overgeslagen

A2A Agent Card: Mislukt

MCP-ontdekking: Mislukt

OpenAPI / API-documentatie: Mislukt

agents.json: Mislukt

Kwaliteit declaratieve formulieren: Overgeslagen

Dekking interactieve oppervlakken: Mislukt

AI-contentontdekking

Weging 30% · 4 checkpoints mislukt · 5 bonuskansen

38/100

robots.txt aanwezig: Mislukt

Content Signals (robots.txt): Overgeslagen

AGENTS.md agent-gids: Mislukt

Agent content contracts: Mislukt

Soft-404-hygiëne: Overgeslagen

DNS-AID agent-records: Gedeeltelijk

AI-crawlerrichtlijnen: Overgeslagen

XML-sitemap: Mislukt

llms.txt: Mislukt

Meta robots / X-Robots-Tag: Geslaagd

Signalen voor contentversheid: Mislukt

Content negotiation (text/markdown): Mislukt

HTTP bot-toegankelijkheid: Geslaagd

Link response headers: Mislukt

Beveiliging & vertrouwen

Weging 15% · 3 mislukt, 1 gedeeltelijk · 1 bonuskans

59/100

HTTPS: Geslaagd

Beveiliging van tooldefinities: Overgeslagen

Risicobeoordeling automatisch verzenden: Geslaagd

OAuth Discovery: Mislukt

OAuth Protected Resource: Mislukt

Agent Auth Readiness: Mislukt

HSTS-header: Gedeeltelijk

Content-Security-Policy: Mislukt

X-Content-Type-Options: Geslaagd

Framebescherming: Geslaagd

CORS-configuratie: Geslaagd

Referrer-Policy: Geslaagd

Content & Semantiek

Weging 20% · 5 mislukt, 2 gedeeltelijk

59/100

Server-side gerenderde content: Geslaagd

Autocomplete van formuliervelden: Geslaagd

Toetsenbordnavigatie: Geslaagd

Documenttitel: Gedeeltelijk

Toegankelijke namen van knoppen: Geslaagd

Misbruik van aria-hidden: Geslaagd

Status van dynamische widgets: Overgeslagen

Page token budget: Geslaagd

Koppenstructuur: Mislukt

Semantische HTML-elementen: Mislukt

Toegankelijke landmarks & ARIA: Mislukt

Alt-tekst voor afbeeldingen: Gedeeltelijk

Taalattribuut: Mislukt

Beschrijvende linkteksten: Geslaagd

Vraaggestuurde koppen: Mislukt

Labeldekking van formulieren: Geslaagd

AI-zoeksignalen

Weging 20% · 5 checkpoints mislukt

0/100

JSON-LD aanwezig: Mislukt

Organization / WebSite-schema: Mislukt

Hoogwaardige schematypen: Mislukt

Entiteitskoppeling (@id): Overgeslagen

BreadcrumbList-opmaak: Overgeslagen

Schemavalidatie: Overgeslagen

FAQPage-schema: Overgeslagen

Auteurvermelding: Mislukt

Trust anchor pages: Mislukt

AI-trainingsblootstelling

Heeft geen invloed op de gereedheidsscore

Aanvullend

Geen bescherming tegen AI-training gevonden. Je content mag mogelijk vrij worden gebruikt om AI-modellen te trainen.

Aanwezigheid in Common Crawl Onbekend

Controle verlopen.

Blokkering van trainingscrawlers Niet gevonden

Geen robots.txt gevonden. Trainingscrawlers kunnen vrij toegang krijgen tot je content.

TDMRep-verklaring Niet gevonden

Geen TDMRep-bestand gevonden op /.well-known/tdmrep.json. Het TDM Reservation Protocol (W3C) laat je aangeven of je tekst- en dataminingrechten voorbehoudt. Zie w3.org/community/reports/tdmrep/CG-FINAL-tdmrep-20240510 voor de specificatie.

ai.txt-beleid Niet gevonden

Geen ai.txt-bestand gevonden. ai.txt laat je AI-gebruiksvoorkeuren voor je content aangeven.

Web Bot Auth Niet gevonden

Geen Web Bot Auth-sleuteldirectory voor handtekeningen gevonden. Bots kunnen hun identiteit niet bewijzen aan origins via ondertekende HTTP-verzoeken.

Ontwikkeltools

Scan en herstel vanuit je editor

Installeer onze MCP-server om elke website te scannen vanuit je terminal. Combineer het met AI-agentvaardigheden om falende checks automatisch te herstellen.

Scan elke website direct vanuit je terminal
Herstel falende checks met AI-agentvaardigheden
Scan opnieuw om verbeteringen te verifiëren

SCANNEN

claude mcp add isagentready-mcp -- npx -y isagentready-mcp

codex mcp add isagentready-mcp -- npx -y isagentready-mcp

gemini mcp add isagentready-mcp -- npx -y isagentready-mcp

docker run -i --rm ghcr.io/bartwaardenburg/isagentready-mcp

FIXEN

/plugin marketplace add bartwaardenburg/isagentready-skills

git clone https://github.com/bartwaardenburg/isagentready-skills.git ~/.cursor/skills/isagentready-skills

git clone https://github.com/bartwaardenburg/isagentready-skills.git ~/.agents/skills/isagentready-skills

git clone https://github.com/bartwaardenburg/isagentready-skills.git ~/.codeium/windsurf/skills/isagentready-skills

git clone https://github.com/bartwaardenburg/isagentready-skills.git ~/.agents/skills/isagentready-skills

gemini skills install https://github.com/bartwaardenburg/isagentready-skills.git

git clone https://github.com/bartwaardenburg/isagentready-skills.git ~/.config/agents/skills/isagentready-skills

MCP-server AI-vaardigheden

Gedetailleerd rapport aanvragen Optionele opvolging met een gepersonaliseerd pdf-rapport

Gratis PDF-rapport

Ontvang je gedetailleerde rapport

Ontvang een gepersonaliseerd rapport met concrete inzichten om de AI-agentgereedheid van je website te verbeteren.

Gedetailleerde score-uitsplitsing per categorie
Geprioriteerde verbeteraanbevelingen
Stapsgewijze implementatiegids

Controleer meer dan de homepage

Controleer meerdere pagina's van je website. Krijg een privérapport met gegroepeerde verbeterpunten en één inbegrepen hercontrole. Je betaalt eenmalig.

Bekijk siteaudits