He Allemaal,

Ik heb bij een webshop een heel raar probleem geconstateerd. Er wordt aangegeven door Google dat "Er is geen beschrijving beschikbaar voor dit resultaat vanwege robots.txt – meer informatie."

Het vreemde hierbij is dat robots.txt leeg is en dus niks kan blokkeren.

Daarnaast wordt ook de melding "Deze site is mogelijk gehackt." gegeven. Maar de site is niet gehackt en in GWMT ook gewoon schoon, er worden hier geen problemen aangegeven en ook met andere websites zoals sucuri.net wordt er niks gevonden.

De webbouwer heeft liever niet dat de url gepubliceerd wordt, en ik weet de oplossing ook niet. Heeft er iemand ervaring met dit probleem en een oplossing? Op verzoek kan de url wel gedeeld worden indien je een oplossing denkt te hebben. €50,- voor de gouden tip!

Ben benieuwd!

Correctie, er is wel een robots.txt nu, maar dat ziet er gewoon goed uit.

Was er überhaupt al een robots.txt file aanwezig (nu wel zeg je, maar toen nog niet dus)?

Ik had namelijk vorig jaar bij sommige websites ook opeens een melding dat mijn sites niet geïndexeerd konden worden omdat robots.txt niet gelezen kon worden, maar bij die sites was helemaal geen robots.txt aanwezig. Toen ik een robots.txt bestandje aangemaakt had was het probleem opgelost. Daarin stond alleen

Code:

User-agent: *
 Disallow:

Ga in Google Webmasters naar 'Fetchen als Google' onder Crawlen. Voer daar robots.txt in, en kies bij een succesvol resultaat voor 'Indienen bij index'. Dien enkel de url in (je krijgt namelijk een keuze).

Wacht 48 uur af.

Check voor de zekerheid ook htacces op foute regels, en eveneens de meta tags van de getroffen pagina's. Deze geven zoekmachines eveneens richtlijnen over hoe om te gaan met pagina's.

Succes!

Vaak zitten er verschillen in de profielen tussen www.domein.nl en domein.nl dus zorg dat altijd alle subdomeinen ook apart in WMT staan.