Hallo allemaal!

Ik heb een Crawl probleem in Google; Ik krijg de volgende melding:

Crawl uitgesteld omdat robots.txt ontoegankelijk was.

Mijn robot.txt ziet er als volgt uit, en is ook gewoon te bereiken via mijn website adres:

User-agent: *
Disallow: /wp-admin/
Allow: /wp-admin/admin-ajax.php
Sitemap: https://www.domeinnaam.nl/sitemap_index.xml

Wat gaat hier niet goed, en hoe kan ik dit verhelpen?

De melding die je krijgt geeft aan dat je robots.txt niet te bereiken was. De inhoud heeft hier niet zozeer invloed op.
Staat de robots gewoon in je root?

Heb je toevallig al het http verkeer met een 301 redirect naar de SSL versie van je website doorgestuurd?

Origineel gepost door Roderik Peeters

De melding die je krijgt geeft aan dat je robots.txt niet te bereiken was. De inhoud heeft hier niet zozeer invloed op.
Staat de robots gewoon in je root?

Mijn robots.txt staat inderdaad gewoon in mijn root, ik heb net een nieuwe test uitgevoerd in Webmaster tools van vandaag, maar dan blijf ik de fout zien!

Origineel gepost door Jay z.

Heb je toevallig al het http verkeer met een 301 redirect naar de SSL versie van je website doorgestuurd?

Ik heb inderdaad alles doorgestuurd, ik kan eventueel mijn .htaccess hier wel even posten als dat handig is?

Link naar je website?