Geblokkeerd vanwege verboden toegang (403): wanneer je server Googlebot weigert

Laatst bijgewerkt: 2026-10-30

In het kort

Deze status betekent dat je server 403 Forbidden aan Googlebot teruggaf. Google wijst erop dat Googlebot nooit inloggegevens stuurt, dus een 403 aan Googlebot wordt meestal ten onrechte teruggegeven. Hoort de pagina in Google, zoek dan de firewall-, CDN- of serverregel die hem blokkeert en laat geverifieerde Googlebot door.

Exact label in Search Console: Blocked due to access forbidden (403)

Wat het betekent

De hulp van Google over Pagina-indexering legt uit dat HTTP 403 betekent dat de user-agent inloggegevens meegaf maar geen toegang kreeg. Googlebot geeft nooit inloggegevens mee, dus je server geeft deze fout ten onrechte terug, en de pagina wordt niet geïndexeerd. Om hem geïndexeerd te krijgen, laat je niet-ingelogde gebruikers toe of sta je verzoeken van Googlebot expliciet zonder authenticatie toe, nadat je zijn identiteit hebt geverifieerd.

De blokkade zit vaak in een beveiligingslaag en niet in de pagina zelf. In zijn advies over crawlproblemen merkt Google op dat beveiligingssystemen vaak zijn ingesteld om ongewoon hoge verzoekvolumes te blokkeren, en dat Googlebot die kan activeren omdat hij meer verzoeken doet dan een menselijke bezoeker. Google zegt ook dat je 403 niet moet gebruiken om crawlen te vertragen: 4xx-codes anders dan 429 hebben geen effect op de crawlsnelheid.

Is het een probleem?

Ja, als de URL publiek hoort te zijn. Een 403 op publieke pagina’s blokkeert indexering volledig en haalt pagina’s die al geïndexeerd waren na verloop van tijd uit de index als de blokkade zich uitbreidt. Voor besloten gebieden is het acceptabel, al houdt niet linken naar die URL’s het rapport schoner.

Veelvoorkomende oorzaken

WAF- of botbeschermingsregels

Beveiligingsdiensten die verzoeken blokkeren of een uitdaging tonen op basis van user-agent, verzoeksnelheid of reputatie, en soms Googlebot raken.

Blokkering op land of IP

Geo-blokkering of IP-deny lijsten die adressen dekken waar Googlebot vandaan crawlt.

Map- of hotlinkbeveiliging

Regels die toegang tot mappen of bestandstypen zoals pdf’s of afbeeldingen verbieden.

Fouten in bestandsrechten

Rechten op serverbestanden of -mappen waardoor de pagina niet kan worden gelezen.

Regels tegen nep-Googlebots die te ver gaan

Regels bedoeld om na-apers met de Googlebot-user-agent te stoppen die ook de echte crawler blokkeren.

Zo los je het op

  1. Reproduceer de 403. Voer “Live-URL testen” uit. Krijgt de livetest ook een 403, dan is de blokkade nu actief. Zoek in accesslogs naar 403-responsen op verzoeken van Googlebot.
  2. Zoek de laag die blokkeert. Controleer gebeurtenislogs van CDN en WAF, serverconfiguratie en beveiligingsplugins. Google merkt op dat de firewall niet onder jouw controle hoeft te vallen, dus betrek je hostingprovider erbij.
  3. Laat geverifieerde Googlebot door. Laat Googlebot toe na verificatie met een reverse-DNS-lookup of de gepubliceerde IP-reeksen van Google, niet alleen op user-agent, zodat na-apers geblokkeerd blijven.
  4. Los de rechten op. Corrigeer bestands- en maprechten voor publieke inhoud.
  5. Vraag indexering aan en valideer. Is de blokkade weg, vraag dan indexering aan voor kern-URL’s en klik op “Oplossing valideren” bij het probleem.

Check het met GSC Magic

gsc_inspect_urls_batch meldt de ophaalstatus per URL, zodat je assistent elke URL met een 403 kan opsommen en kan laten zien of het om één map, één bestandstype of de hele site gaat, wat de verantwoordelijke regel helpt inperken. Is Bing Webmaster Tools gekoppeld, dan laten bing_crawl_issues en bing_url_info zien of Bingbot ook wordt geweigerd, een hint dat een beveiligingslaag crawlers in het algemeen blokkeert.

gsc_inspect_urls_batchgsc_inspect_urlbing_crawl_issuesbing_url_info

Prompts om te kopiëren

Inspecteer deze URL’s en noem elke URL die is geblokkeerd vanwege verboden toegang (403). Groepeer ze per map en bestandsextensie.

Controleer de crawlproblemen van Bing voor mijn site en zeg of Bing ook 403-fouten krijgt op de URL’s die Google als verboden meldt.

We hebben vandaag onze firewallregels gewijzigd. Inspecteer deze eerder geblokkeerde URL’s en zeg welke Google nog als 403 meldt.

Gidsen op de blog

Blocked due to unauthorized request (401)

Deze status betekent dat de server Googlebot met 401 Unauthorized antwoordde en om inloggegevens vroeg die Googlebot niet heeft. Is de pagina privé, dan is dat correct en blijft de pagina buiten Google. Hoort hij publiek te zijn, verwijder dan de autorisatie-eis of, als die moet blijven, laat geverifieerde verzoeken van Googlebot door.

 Blocked due to other 4xx issue

Deze status betekent dat Googlebot een 4xx-clientfout kreeg die niet bij een van de codes met een eigen regel hoort, zoals 401, 403 of 404. Google geeft geen verdere details, dus de eerste stap is de exacte code vinden die je server teruggaf. Los daarna op hoe je server het verzoek afhandelt voor pagina’s die publiek horen te zijn.

 Server error (5xx)

“Serverfout (5xx)” betekent dat je server een fout op 500-niveau teruggaf toen Googlebot de pagina opvroeg. Google vertraagt het crawlen bij zulke fouten en laat URL’s die blijven falen uiteindelijk vallen. Controleer de hoststatus in Crawlstatistieken, reproduceer de fout en los dan capaciteit, time-outs of regels op die Googlebot tegenhouden.

Veelgestelde vragen

Waarom zou mijn server 403 aan Googlebot sturen?

Meestal door een beveiligingslaag: een firewall, botmanager, geo- of IP-blokkade, of een beschermingsregel die reageert op verzoekvolume. Google merkt op dat Googlebot beveiligingssystemen kan activeren omdat hij meer verzoeken doet dan een mens.

Hoe laat ik Googlebot veilig door?

Verifieer verzoeken met een reverse-DNS-lookup of tegen de gepubliceerde IP-reeksen van Google en laat ze dan toe. Vertrouw niet alleen op de user-agent, want iedereen kan die nabootsen.

Kan ik 403 gebruiken om minder crawling te krijgen?

Nee. Google zegt dat 401 en 403 geen effect hebben op de crawlsnelheid. Voor korte noodgevallen raadt Google aan tijdelijk 503 of 429 terug te geven.

Bronnen