12. Aanmelden website bij zoekmachines

Daar de zoekmachine uiteindelijk de plaats is waar u met uw site gevonden wilt worden is een goede aanmelding bij zoekmachines van cruciaal belang. Er bestaat speciale software om dit voor u te doen, of u kunt een gespecialiseerd bedrijf benaderen om dit voor u uit te voeren. Beide methodes zijn echter niet aanbevelenswaardig omdat u zich m.b.t. dit cruciale onderdeel afhankelijk zou maken van anderen: nu u de site zo goed heeft geoptimaliseerd wilt u ook de finishing touch in eigen hand houden. En zoveel verschillende zoekmachines gebruiken we in Nederland niet. In de tabel hieronder vindt u de ingangen voor aanmelding bij de belangrijkste zoekmachines, met daarbij aangegeven het gebruik ervan onder Nederlanders (gebaseerd op een onderzoek van Marketingfacts, februari 2007).

Als u uw site bij deze zoekmachines aanmeldt, heeft u dus nagenoeg alles gehad.

Voordat u tot aanmelding overgaat, zorg dat uw site helemaal picobello in orde is. Geduld is ook hier een schone zaak. Controleer bijvoorbeeld of alle verwijzingen goed werken. Lees verder aandachtig de aanwijzingen die de verschillende zoekmachines geven. U hoeft overigens maar één pagina van uw site aan te melden, normaal gesproken de index-pagina. De zoekrobot ontdekt de rest dan automatisch ook (als er tenministe een koppeling heenligt).

Indien u niet wilt dat de zoekrobot vanaf de door u aangemelde pagina verder door uw site 'spidert', kunt u dat via een metatag in de betreffende pagina aangeven:

<meta name="ROBOTS" content="INDEX, NOFOLLOW">

Op deze manier wordt de pagina wel geïndexeerd, maar de uitgaande links verder niet gevolgd. Als u wel uw gehele site geïndexeerd wilt hebben, neemt u de volgende code op alle pagina's op:

<meta name="ROBOTS" content="INDEX, FOLLOW">

Tot slot kan ik u aanraden een robots.txt-bestand op te nemen in de root-directory van uw website. Niet dat dit iets toevoegt aan uw ranking, maar het lost een ander probleempje op. Ieder keer, namelijk, dat de zoekrobot langs komt kijkt deze of er een robots.txt-bestand aanwezig is. Daarin kan de webbeheerder namelijk van alles opgeven omtrent welke pagina's wel en niet gespiderd mogen/moeten worden. Als dit bestand afwezig is ontstaat er een 404-error, die in uw statistieken terug te vinden zijn. Dit vertroebelt uw inzicht in de werkelijke 404-fouten (dus opvragen van pagina's onder uw domein die niet bestaan) er zijn.

Als u alle pagina's door alle zoekrobots geïndexeerd wilt zien neemt u de volgende regels op in de robots.txt:

User-agent: *
Disallow:

U plaatst de robots.txt dus in de root-directory onder uw domein (d.w.z. op hetzelfde niveau als de index-pagina). In het SEO-tools hoofdstuk van deze handleiding staat een robots.txt-checker opgenomen. Via het Google Centrum voor Webmasters (categorie Hulpprogramma's) kunt u de robots.txt ook heel mooi checken. Meer informatie over de specifieke robots.txt syntax kunt u vinden bij The Web Robots Pages.