Wat betekent dit?
We konden geen Robots file voor je site vinden, maar dit is een belangrijk bestand voor zoekmachines.
Robots.txt is een tekstbestand dat webmasters maken om webrobots (meestal zoekmachinerobots) te instrueren hoe ze pagina's op hun website moeten crawlen.
Het robots.txt-bestand is onderdeel van het robots exclusion protocol (REP), een groep webstandaarden die regelen hoe robots het web doorzoeken, inhoud openen en indexeren, en deze inhoud aan gebruikers aanbieden.
Wat moet je doen?
Zorg voor een robotbestand voor je site of neem contact op met je developer.
Je kunt dit probleem automatisch oplossen voor Wordpress websites, door op de "Autofix" knop te klikken
Leer hier meer.
Opmerkingen
0 opmerkingen