Geen vraag die wij vaak gesteld krijgen, daarom moest ik eigenlijk best hard lachen toen iemand ‘m stelde.
Want wanneer je je website heel goed vindbaar kan maken, dan kan je je website ook heel goed onvindbaar maken (toch?). Ik laat je stap voor stap zien hoe je dat doet.
Goede vraag! Het onzichtbaar maken van je website kan een aantal onderliggende redenen hebben, maar de hoofdredenen is altijd hetzelfde: je wilt niet dat je website (door andere mensen) gevonden wordt.
Voorbeelden hiervan kunnen zijn:
Ja, het is mogelijk om je website te verbergen voor Google. Daar moet je helaas wel iets voor doen. Je moet twee dingen tegen Google zeggen:
Als je deze twee dingen bij Google aangeeft, dan is de kans nihil dat de zoekmachine je website toch opneemt in de zoekresultaten.
Het verschil tussen crawlen en indexeren leg ik hieronder uit.
Indexeren en crawlen worden vaak door elkaar gehaald. Veel mensen denken dat ze hetzelfde betekenen, maar dat is niet het geval.
Het crawlen kun je zien als het bezoeken en in kaart brengen van pagina’s (URL’s) op je website. Indexeren is het beoordelen van die pagina’s.
Je zou dus zeggen dat als je URL’s niet bezocht worden, dat Google ze ook niet kan indexeren. Maar dat is niet waar.
Je kan wel tegen Google zeggen dat de crawlers je website niet mogen bezoeken, maar ze zien je de URL’s van je pagina’s nog wel en die nemen ze dan ook gewoon op in de zoekresultaten. Alleen de beoordeling van de content op de pagina’s in kwestie wordt wat lastiger, waardoor je niet zo goed zult ranken.
Om je website onzichtbaar te maken moet je ervoor zorgen dat Google je website niet crawlt en ook niet indexeert. Hoe je dit doet (en of je dit überhaupt zelf kan doen) is afhankelijk van:
Omdat het afhankelijk is van zoveel dingen, kan ik het niet voor iedereen uitleggen. Maar in hoofdlijnen zijn er twee dingen die je moet doen:
Aangezien veel mensen WordPress gebruiken, laat ik even zien hoe je beiden toepast in WordPress.
Stap 1: log in bij de back-end van je website.
Stap 2: Klik links op ‘Instellingen’ en dan op ‘Lezen’.
Stap 3: Vink het vinkje aan waar staat ‘Zoekmachines ontmoedigen om deze site te indexeren’.
Je website staat nu op noindex en wordt niet meer geïndexeerd. Nu moeten we alleen nog de disallow toevoegen om ook het crawlen tegen te gaan. Ook dit kan per WordPress website verschillen.
Het is belangrijk dat je naar de robots.txt van je website gaat. Als je Yoast gebruikt, doe je dat als volgt:
Stap 1: log in bij de back-end van je website.
Stap 2: klik links op de Yoast SEO plugin en vervolgens op ‘Extra’.
Stap 3: klik op ‘bestandsbewerker’.
Stap 4: voeg een regel met de tekst ‘Disallow: /’ (zonder aanhalingstekens) toe aan je robots.txt.
Stap 5: klik op ‘Sla robots.txt wijzigingen op’.
Het is je nu duidelijk hoe je je hele website kan verbergen voor Google. Maar in bepaalde gevallen wil je dat een specifieke pagina niet in Google te vinden is.
Dat is ook mogelijk!
Nu denk jij misschien: ‘wat voor pagina’s dan’? Nou deze bijvoorbeeld:
De redenen waarom je deze niet in Google terug wilt zien, zijn hetzelfde als de redenen waarom je je website onzichtbaar wilt maken voor Google.
In de stappen voor het onzichtbaar maken van je gehele website, laten wij je zien hoe je je hele website op noindex zet. Dit kan je ook specifiek per pagina bepalen.
Dit kan ook op vele manieren, maar ik ga het laten zien hoe je dit doet met Yoast. Dat is namelijk best makkelijk:
Stap 1: log in bij de back-end van je website.
Stap 2: ga naar de pagina die je wilt verbergen in Google.
Stap 3: scroll naar beneden tot je de Yoastmodule op de pagina ziet.
Stap 4: klik op ‘geavanceerd’.
Stap 5: zet ‘Ja (Huidige standaard voor pagina’s)’ op ‘Nee’ onder het kopje ‘Sta zoekmachines toe om deze pagina te tonen in zoekresultaten’.
Je pagina staat nu op noindex en wordt niet meer geïndexeerd. Nu moeten we alleen nog de disallow toevoegen voor deze specifieke pagina.
Stap 1: log in bij de back-end van je website.
Stap 2: klik links op de Yoast SEO plugin en vervolgens op ‘Extra’.
Stap 3: klik op ‘bestandsbewerker’.
Stap 4: voeg een regel met de tekst ‘Disallow: /vul-hier-de-naam-van-je-pagina-in/’ (zonder aanhalingstekens) toe aan je robots.txt.
Stap 5: klik op ‘Sla robots.txt wijzigingen op’.
Het kan zo zijn dat je al een paar maanden bezig bent en dan pas dit artikel leest. Je bedankpagina en je speciale actiepagina zijn helaas al geïndexeerd en dus in Google te vinden.
Gelukkig heb ik daar ook een oplossing voor :). In Search Console kan je namelijk handmatig je eigen zoekresultaten verwijderen.
Hoe je dat doet, dat leg ik je in het volgende artikel uit: Handmatig Google zoekresultaten verwijderen: het kan weer.
Dit werkt trouwens alleen voor je eigen zoekresultaten, niet voor zoekresultaten van anderen.
Geschreven door: Daniël Kuipers
Daniël is oprichter van Online Marketing Agency. Hij speurt het internet continu af naar de nieuwste snufjes en tactieken en blogt erover in begrijpelijke taal. Nou ja, soms dan.