hoe omgaan met crawl errors

[000]

• 404: Volgens google geen probleem zo’n error, maar je krijgt de mogelijkheid hier aan te geven dat het is “opgelost”. Ik vraag me af wat er dan is opgelost. Een 404 is een 404. Ik zou willen dat de bot ‘m uit de index verwijdert. Dus: wat gebeurt er als ik aangeef: “opgelost”?

[Alain Sadon]

Als je aangeeft dat die fout is ‘opgelost’ haalt Google hem uit de lijst met fouten. Maar als de fout blijft bestaan, zal Google de fout snel weer gaan melden. Ze schrijven hierover:

Als het probleem onopgelost blijft, zal de URL de volgende keer dat Google uw site crawlt, opnieuw in de lijst verschijnen, zelfs als u het probleem als verholpen heeft gemarkeerd.

Dus het is puur een administratieve optie. In werkelijkheid wordt er dus niets ‘opgelost’. Als je wilt dat de bot de pagina niet meer gaat proberen op te halen, dan moet je die pagina uitsluiten (disallow) via de robots.txt, of (en dat is meestal beter, want dan hou je de kracht van die pagina in de site) die URL 301-redirecten naar een bestaande pagina. Dat laatste doe je via de .htaccess.

[000]

Bedankt! Als ik jou goed begrijp is de consequentie van het ontvangen van een 404 niet dat de bot de pagina uit de index verwijdert..
De vraag wordt dan: Hoe krijg ik dat wel voor elkaar als de pagina is komen te vervallen?

• Deze reactie is gewijzigd 6 jaren, 2 maanden geleden door 000.

[Auteur]

Berichten