SEO training-, kennis- en adviescentrum › SEO forum › SEO vragen en discussies › Google webmaster -> Crawlfouten -> Niet bereikbaar -> Geen Reactie › Reply To: Google webmaster -> Crawlfouten -> Niet bereikbaar -> Geen Reactie
Heb nog eens even verder gezocht.
Ik kom regelmatig tegen dat website zelf eruit gaan op het moment dat google de website aan het crawlen is. Soms gebruikt google hier 15 api’s tegelijk voor.
Zeker met zo’n grote website geeft dat een enorme belasting op de Database Server.
Om dit te kunnen opvangen moet je je database connectie heel netjes programmeren, in 1 php file nooit meer dan 1 connectie openen en alle connecties direct weer sluiten als je ze niet nodig hebt.
Laat je programmeurs zoveel mogelijk optimalisatie in de belasting op de database doorvoeren. En kijk hoe de database server is geconfigureerd wat betreft aantal threads etc.