Vraag Google indexatie

Gebruikersavatar
svermassen
Elite Poster
Elite Poster
Berichten: 1017
Lid geworden op: 21 Nov 2004
Locatie: Hechtel-Eksel
Bedankt: 18 keer
Uitgedeelde bedankjes: 39 keer
Contact:

Vraag Google indexatie

Berichtdoor svermassen » 1 week 1 dag 10 uur geleden (12 Mar 2019, 20:16)

Allen,


kan mij iemand een antwoord geven op het volgende issue?
Een aantal klanten van mij krijgen soms de melding dat er een probleem gedetecteerd is op hun site bij de indexatie.
==> Geïndexeerd, maar geblokkeerd door robots.txt

Het vreemde van al is dat we geen zoekmachines tegenhouden.

Thanx !

CCatalyst
Elite Poster
Elite Poster
Berichten: 1825
Lid geworden op: 20 Jun 2016
Bedankt: 159 keer
Recent bedankt: 4 keer
Uitgedeelde bedankjes: 5 keer

Re: Vraag Google indexatie

Berichtdoor CCatalyst » 1 week 1 dag 10 uur geleden (12 Mar 2019, 20:32)

svermassen schreef:Het vreemde van al is dat we geen zoekmachines tegenhouden.


Wil je hiermee zeggen dat je effectief gecontroleerd hebt dat er geen robots.txt bestanden in de file root staan?

Gebruikersavatar
svermassen
Elite Poster
Elite Poster
Berichten: 1017
Lid geworden op: 21 Nov 2004
Locatie: Hechtel-Eksel
Bedankt: 18 keer
Uitgedeelde bedankjes: 39 keer
Contact:

Re: Vraag Google indexatie

Berichtdoor svermassen » 1 week 1 dag 10 uur geleden (12 Mar 2019, 20:43)

Ik bedoel daarmee...

==> User-agent: *

Dus mij lijkt dit in orde.

CCatalyst
Elite Poster
Elite Poster
Berichten: 1825
Lid geworden op: 20 Jun 2016
Bedankt: 159 keer
Recent bedankt: 4 keer
Uitgedeelde bedankjes: 5 keer

Re: Vraag Google indexatie

Berichtdoor CCatalyst » 1 week 1 dag 9 uur geleden (12 Mar 2019, 21:04)

Kijk de "alternatieve" robots.txt mogelijkheden na, zijnde de robots meta tag en de X-Robots-Tag HTTP header.

Als dat ook niets oplevert, kan het mogelijks een robots.txt zijn die ergens downstream van de site root staat.

Noot dat enkel "User-agent: *" zonder iets anders in principe niet syntactisch correct is, maar ik denk niet dat dit de reden is.

Flippi
Pro Member
Pro Member
Berichten: 384
Lid geworden op: 26 Jan 2011
Bedankt: 25 keer
Uitgedeelde bedankjes: 57 keer

Re: Vraag Google indexatie

Berichtdoor Flippi » 1 week 16 uur 6 minuten geleden (13 Mar 2019, 14:38)

Kan het zijn dat robots.txt gewijzigd werd nadat de pagina al eens werd geïndexeerd?
Bijvoorbeeld: de pagina bevindt zich in /subdir/ en in robots.txt heb je na indexering van de pagina het volgende toegevoegd:

Disallow: /subdir/


Terug naar “Web-en applicatie-ontwikkeling”

Wie is er online

Gebruikers op dit forum: Geen geregistreerde gebruikers en 3 gasten