Iedereen wil goed gevonden worden in Google. Maar als we WordPress standaard in Google laten indexeren zullen er ook zaken zijn die we toch liever een beetje buiten beeld hadden gehouden.

WordPress, levert standaard een eenvoudige robots.txt bestand dat dynamisch is gegenereerd vanuit de WP applicatie. Dit is geweldig! maar misschien wilt u de inhoud te veranderen?

Vooral mappen als onderstaande bevatten voor Google geen interessante informatie:

  • /wp-admin/
  • /wp-includes/

Maar goed, hoe houden we die buiten beeld?

Dat doen we met bijvoorbeeld een plugin als WP Robots Txt van chrisguitarguy.

Deze plugin werkt weer erg gebruikersvriendelijk en is makkelijk in gebruik. Standaard worden na installatie van deze plugin de bovenstaande mappen voortaan geblokt in Google.

Men installeert de plugin op de gebruikelijke wijze en vervolgens kan men onder Instellingen>Lezen de aanpassingen in de robots.txt naar eigen wens inrichten.

Standaard is:

User-agent: *
Disallow: /wp-admin/
Disallow: /wp-includes/

Heeft u nu een map bijvoorbeeld /rommelmap/ die u voor Google buiten beeld wil hebben, dan voegt u simpelweg toe:

Disallow: /rommelmap/