Binnen mijn webmaster tools krijg ik een storende crawler fout in HTTP: (403 error)
(ik gebruik Wordpress)
Nu wil ik dat Google deze pagina niet indexeert, maar krijg dat niet voor elkaar. Ik heb mijn robots.txt nu zo staan:
Maar als ik binnen Webmaster Tools check of deze nu gedissalowed wordt staat er als uitkomst dit: Googlebot: Toegestaan door regel 2: Disallow:User-agent: *
Disallow: /wp-app.php/service
Sitemap: http://www.mijnvoorbeelddomeinnaam.nl/sitemap.xml
Doe ik iets verkeerd? Iemand een idee?
- Disallow in robots.txt
-
24-10-2011, 08:41 #1
- Berichten
- 951
- Lid sinds
- 17 Jaar
Disallow in robots.txt
Laatst aangepast door Rein N : 24-10-2011 om 09:00 Reden: link verwijderd
-
-
24-10-2011, 08:48 #2
- Berichten
- 319
- Lid sinds
- 14 Jaar
Re: Disallow in robots.txt
Dat zou op deze manier moeten lukken:
User-Agent: *
Disallow: /wp-app.php
-
24-10-2011, 08:54 #3
- Berichten
- 951
- Lid sinds
- 17 Jaar
Re: Disallow in robots.txt
Dank voor je reactie Barry,
Heb de robots.txt veranderd zoals je aangaf maar hij geeft hetzelfde resultaat in Google Webmaster Tools. Is het wel zo dat google live de nieuwe robots.txt bekijkt of moet ik wachten tot ie die op eigen houtje weer een keer bekijkt?
-
24-10-2011, 08:55 #4
- Berichten
- 319
- Lid sinds
- 14 Jaar
Re: Disallow in robots.txt
Afwachten. Het is niet zo dat hij dit realtime doet.
-
24-10-2011, 08:58 #5
- Berichten
- 951
- Lid sinds
- 17 Jaar
Re: Disallow in robots.txt
Ah op die manier :) Hartelijk dank, zal wel goed komen dan.
EDIT: google heeft de robots.txt weer bekeken, werkt prima! :)Laatst aangepast door Rein N : 24-10-2011 om 09:37 Reden: update
Plaats een
- + Advertentie
- + Onderwerp
Marktplaats
Webmasterforum
- Websites algemeen
- Sitechecks
- Marketing
- Domeinen algemeen
- Waardebepaling
- CMS
- Wordpress
- Joomla
- Magento
- Google algemeen
- SEO
- Analytics
- Adsense
- Adwords
- HTML / XHTML
- CSS
- Programmeren
- PHP
- Javascript
- JQuery
- MySQL
- Ondernemen algemeen
- Belastingen
- Juridisch
- Grafisch ontwerp
- Hosting Algemeen
- Hardware Info
- Offtopic