Website uit google na theme update - hulp gevraagd

**Bob Maas** · 11-07-2015, 21:11

Ik zit een probleem. Ik heb 50 euro over voor diegene die me helpt. Het volgende is er gebeurd:

Info vooraf:
Wordpress website, bij de update is alleen een mobile responice theme geinstalleerd en wat grafische zaken aangepast

- Eind juni heb ik de vernieuwde website (http://goo.gl/2JVdek) van een klant live gezet. Stomme fout: vinkje 'Blokkeer google' vergeten aan te zetten.
- Vorige week, op aangeven van de klant, de fout hersteld.
- Hielp nog niet, alleen de index pagina werd gevonden in Google
- via webmaster tools sitemaps opnieuw ingediend, robots.txt aangepast, handmatig url's toegevoegd met fetch as google
- nog een resultaat

Gisteren viel mijn oog www.domein.nl en domein.nl. Hier zit ook een probleem. De oude instelling in Wordpress was site url www,domein.nl, nu is deze domein.nl (waarschijnlijk ergens verkeerd gegaan met de Duplicator plugin). Dus, beiden site ingediend bij webmaster tool, voor beiden een sitemap ingediend. Nu geeft de www.domein.nl sitemap een error (verwijst naar domein.nl sitemap) en van beiden sites wordt er maar 1 van 26 ingediende URL's geindexeerd.

Ik snap het niet meer. Kan iemand mijn adviseren hoe dit probleem asap op te lossen. Zoal al vermeld. Diegene die het oplost krijgt van mij 50 euro.

**Michael deW** · 11-07-2015, 23:05

Ik zou het volgende al eens doen.
<meta name="robots" content="noodp, noydir, index, follow"> i.p.v. <meta name="robots" content="noodp,noydir" />
<html lang="nl"> i.p.v. <html lang="en-US">

Verder zien de codes er normaal uit, je moet google ook wat tijd geven. Zou ook wat backlinks regelen als je het proces wilt versnellen.

Nog iets, hoe werd je ervoor gevonden in google ?? Zie bijvoorbeeld bij de pagina ICT recht het volgende staan.

<title>ICT recht</title> , niet echt een aantrekkelijke titel vind ik persoonlijk.
Meta description, bestaat gewoonweg niet ???
In de context staat 1x het woord ICT recht en dat is de titel.
Tja, denk niet dat je zo ooit in de top 10 gaat geraken.

Ron

**J. Haan** · 12-07-2015, 08:39

Een dubbele sitemap indienen lijkt me niet goed. Je kunt in .htaccess beter de .domein.nl dooverwijzen naar www.domein.nl (of andersom). Dan komt alle verkeer op 1 website i.p.v. 2.

**Marcel Melis** · 12-07-2015, 12:03

Ik zie dat je in robots.txt alleen "User-agent: *" hebt staan. Maak daar eens het volgende van:

User-agent: *
Disallow:

Dus verder niets achter "disallow" invullen, alleen het woordje "disallow" en de dubbele punt. Daarmee geef je aan dat alle pagina's geïndexeerd mogen worden. Eigenlijk zou dat niet nodig moeten zijn, maar zoals ik al eerder op mijn blog heb geschreven ontving ik vorig jaar een mailtje van Google met de volgende tekst:

"In de afgelopen 24 uur heeft Googlebot 1 fouten aangetroffen bij toegangspogingen tot uw robots.txt-bestand. Om ervoor te zorgen dat we geen pagina’s crawlen die in dat bestand staan vermeld, hebben we onze crawlpoging uitgesteld. De totale foutfrequentie voor robots.txt voor uw site is 100.0%."

Die site had helemaal geen robots.txt bestand, en om te voorkomen dat er URLs geïndexeerd werden die niet geïndexeerd mogen worden had Google maar helemaal niets geïndexeerd. Jij geeft nu ook niet aan welke pagina's wel en niet geïndexeerd mogen worden, dus dat is wellicht het probleem.

**M. Zanden** · 12-07-2015, 12:38

Stond het voorkeursdomein in Google webmastertools ook ingesteld op de www. versie?

Het insturen van twee sitemaps mag in mijn optiek geen problemen opleveren (aangezien dit toch dezelfde sitemap betreft en je deze toch instelt middels het voorkeursdomein in Google webmastertools.).

Via htaccess zou ik z.s.m. proberen de website terug te brengen in de originele staat, dus naar de www. versie.
Waar je website eerst op de www. versie (subdomein) stond staat deze nu op de domeinnaam zelf. Google ziet je website in dit geval (denk ik) als volledig nieuwe (sub) website waardoor deze volledig opnieuw geïndexeerd moet worden.

Zodra je de bovenstaande stappen hebt gedaan zou ik (indien mogelijk) enkele nieuwe artikelen aan de website toevoegen en daarna enkele nieuwe backlinks naar de website laten verwijzen. De kans dat de "overige pagina's" vrij snel weer zijn geïndexeerd is op deze manier naar mijn idee het grootst.

**M. Zanden** · 12-07-2015, 13:00

Overigens nog een kleine aanvulling: Wanneer in de HTML overal nog wordt verwezen naar de www. versie kan het ook zo zijn dat een sitemap generator de URL's simpelweg overslaat omdat ze eigenlijk niet (meer) bestaan en dus hoe dan ook niet gevolgd kunnen worden.

Edit: Inmiddels heb ik de code even bekeken en lijkt deze laatste bijdrage hier niet op te gaan.

**B. van der Weerd** · 12-07-2015, 15:09

Die RSS widgets met nieuws van Recht.nl en Computable doet er ook geen goed aan. Die links daarin kunnen beter nofollow zijn. Die laatste widget is ook enorm offtopic, ik zou mijn klant met klem afraden om die op de homepage te zetten. Zeker als de homepage vanuit SEO opzicht al bijna rampzalig is.

Deze hele site heeft gewoon een complete overhaul door een content manager nodig, die zowel de structuur, de teksten, the tone of voice en alles wat er nog meer bij hoort. Deze website zal in de huidige opzet nooit boven het maaiveld uit gaan komen.

Ik heb trouwens ook een website waar volgens de Google Webmaster Tools maar één pagina is geïndexeerd. In de praktijk blijken alle 50 pagina's gewoon te zijn geïndexeerd.

**Marcel Melis** · 12-07-2015, 15:52

Origineel gepost door B. van der Weerd

Ik heb trouwens ook een website waar volgens de Google Webmaster Tools maar één pagina is geïndexeerd. In de praktijk blijken alle 50 pagina's gewoon te zijn geïndexeerd.

In dit geval niet, als je op Google zoekt met site: krijg je inderdaad maar een paar pagina's en wat PDF's te zien (zowel met als zonder www).

**Bob Maas** · 12-07-2015, 20:27

Bedankt voor de reacties tot zover. Ik ga morgen de antwoorden grondig bestuderen en acties ondernemen.

**Bob Maas** · 14-07-2015, 08:20

@M Zanden, in Webmaster tools was het inderdaad de www. versie.

Hoe ga ik dit doen: Via htaccess zou ik z.s.m. proberen de website terug te brengen in de originele staat, dus naar de www. versie.?

En is het de bedoeling dat ik de huidige website op domein.nl houd en niet www.domein.nl?

**M. Zanden** · 14-07-2015, 08:39

@Bob,

Als het de bedoeling is om domein.nl te gebruiken i.p.v. www.domein.nl kun je het uiteraard ook zo laten staan en je richten op een gehele (nieuwe) indexatie van domein.nl (en alle bijbehorende pagina's). Het terugzetten naar de www. versie is geen vereiste maar omdat ik dacht op te maken uit je openingspost dat de pagina's eerder wel waren geïndexeerd op de www. versie leek het mij verstandig om terug te gaan naar de "basis" en van hieruit de pagina's weer te laten indexeren.

Even voor de duidelijkheid: Wil je nu wel of niet op de www. versie verder bouwen aan indexatie?

Aanvulling: Kun jij bevestigen of je de robots.txt onlangs (de afgelopen dagen) hebt aangepast? Deze staat nu namelijk op disallow wat inhoudt dat Google je hele website niet mag indexeren, volgens mij was dit onlangs nog niet het geval.

**M. Zanden** · 14-07-2015, 09:11

Hier nog een kleine aanvulling over het juist instellen van robots.txt (http://tools.seobook.com/robots-txt/)

User-agent: *
Allow: /

Zou in dit geval voldoende moeten zijn, maar gebruik dus absoluut geen disallow want nogmaals, hiermee voorkom je juist dat Google je website gaat indexeren.

**Marcel Melis** · 14-07-2015, 09:40

Origineel gepost door M. Zanden

Aanvulling: Kun jij bevestigen of je de robots.txt onlangs (de afgelopen dagen) hebt aangepast? Deze staat nu namelijk op disallow wat inhoudt dat Google je hele website niet mag indexeren, volgens mij was dit onlangs nog niet het geval.

Dat heeft hij op mijn advies gewijzigd, door niets achter disallow: te zetten vertel je Google juist dat de gehele website wel geïndexeerd mag worden. Zie o.a. http://www.robotstxt.org/robotstxt.html en google developers. Overigens staat ditzelfde ook op de pagina waarnaar jijzelf (M. Zanden) linkt...

Allow indexing of everything

User-agent: *
Disallow:

or

User-agent: *
Allow: /

**M. Zanden** · 14-07-2015, 09:53

Origineel gepost door Marcel Melis

Dat heeft hij op mijn advies gewijzigd, door niets achter disallow: te zetten vertel je Google juist dat de gehele website wel geïndexeerd mag worden. Zie o.a. http://www.robotstxt.org/robotstxt.html en google developers. Overigens staat ditzelfde ook op de pagina waarnaar jijzelf (M. Zanden) linkt...

Allow indexing of everything

User-agent: *
Disallow:

or

User-agent: *
Allow: /

Excuseer me dan, verwarring door de / (welke jij inderdaad niet noemt). Ik gebruik altijd Allow: / in de robots.txt en dat werkt dan ook altijd prima.

**Bob Maas** · 14-07-2015, 10:51

De website staat nu (in Wordpress) op domein.nl. Dit laat ik staan, anders verlies ik helemaal het inzicht wat er gaan gebeuren. IK heb inmiddels de htacces ook aangepast met het volgende (zou speciaal voor shared hosting zijn):

Code:

RewriteEngine on
RewriteCond %{HTTP_HOST} ^www\.(([a-z0-9_]+\.)?example\.com)$ [NC]
RewriteRule .? http://%1%{REQUEST_URI} [R=301,L]

Waar example\.com dus de domeinnaam is.

Robots..txt heb ik inderdaad vanmorgen aangepast op advies van Marcel.

Website uit google na theme update - hulp gevraagd