Hallo Webmasters,

In mijn robots.txt staat dat Google mijn parameters niet mag opnemen/crawlen:

Disallow: /?mode=
Disallow: /?limit=
Disallow: /?dir=

Helaas zie ik dat Google nog regelmatig in zijn Index pagina's indexeert van mijn website zoals:

www.site.nl/?dir=asc&limit=36&order=price
www.site.nl/?amp%3Bdir=desc&amp%3Border=name

Wat doe ik verkeerd?

Nu las ik dat ik eventueel een *& teken moest toevoegen, dus:


Disallow: /*&mode=
Disallow: /*&limit=
Disallow: /*&dir=


Wie weet hoe ik dit goed moet verwoorden?

in je .htaccess toevoegen ?

Disallow: /*?*mode=
Disallow: /*?*limit=
Disallow: /*?*dir=

Origineel gepost door Rik E

in je .htaccess toevoegen ?

Dat heb ik nog nooit gelezen. Normaal gesproken doe je dit dacht ik in Robots.txt waar het ook voor bedoeld is.

Origineel gepost door Jacob S

Disallow: /*?*mode=
Disallow: /*?*limit=
Disallow: /*?*dir=

Wat is precies het verschil tussen:
Disallow: /?dir=
Disallow: /*&dir=
Disallow: /*?*dir=


Alvast bedankt voor jullie antwoorden!

Het is een misverstand dat door robots.txt geblokkeerde inhoud niet zal worden geïndexeerd.
Google kan de pagina's nog steeds crawlen en indexeren als hier vanaf andere pagina's op het internet naar toe wordt gelinkt.
Om de pagina's volledig te verwijderen moet een andere methode worden gebruikt: de 'noindex' metatag.
Zie:
https://support.google.com/webmaster...r/139066?hl=nl

En als het gaat om url's met verschillende zoekparameters in de url die je wil consolideren naar 1 pagina, dan is hiervoor de 'canonical' tag bedacht.
Zie:
https://support.google.com/webmaster...r/139066?hl=nl

Eerste linkje moet deze zijn:
https://support.google.com/webmaster.../6062608?hl=nl

Opencart?

Origineel gepost door Jordy van der velde

Opencart?

Magento