De Meta Tag “Robots”
Robots meta tag zet wegwijzers. U kunt de zoekrobotten melden of uw site mag geïndexeerd worden en zo ja, welke pagina’s wel en welke niet.(!) U werkt hiervoor op twee niveaus.
Dat geeft nogal eens aanleiding tot verwarring, omdat de namen erg op mekaar gelijken.
- Volledige directories
Met robots.txt, een bestand dat u in de root plaatst. - Aparte pagina’s
Met robots meta tag, die u in de pagina plaatst
Met de Robots Meta tag heb je dan controle over iedere pagina in je site.
Meta Tag Syntax
< meta name="robots" content="4 mogelijkheden” >
Plaats deze meta tag tussen de en tags .
Robots meta tag : 4 mogelijkheden
Voor elke pagina kunt u kiezen uit 4 mogelijkheden:
- De zoekrobot mag de pagina indexeren
en mag de links volgen. (dit is de standaardinstelling)
- De zoekrobot mag de pagina niet indexeren
en mag ook de links niet volgen.
Bijvoorbeeld: een pagina die nog in opbouw is.
- De zoekrobot mag de pagina niet indexeren
maar mag wel de links op die pagina volgen.
- De zoekrobot mag de pagina indexeren
maar mag de links niet volgen.
Bijvoorbeeld: in het geval van e-mailadressen
Tips & tricks
- Gebruik deze meta tag vooral als een pagina NIET mag opgenomen worden.
- Niet alle zoekrobotten houden rekening met de Robots Meta tag (maar bv. Google wèl)
- Een andere methode om zoekrobots tegen te houden, is door gebruik te maken van een robots.txt-bestand.
