[Kaiser3]

Hallo,

ich habe über die robots.txt die Inhalte der Seite vom Indexieren ausgeschlossen.

Disallow: /agb

Disallow: /impressum

Disallow: /datenschutz

Disallow: /widerrufsrecht

Wenn ich aber den Text auf der Seite z.B. AGB kopiere und bei Google einfüge erhalte ich trotzdem einen Treffer in den Suchergebnissen?

Wie kann ich das verhindern?


Gruß

[oxal]

Hi - in meiner steht "Disallow: /agb/" und Google hält sich dran.

[Kaiser3]

Hallo,
habe jetzt mein Disallow: /agb

erweitert und Disallow: /agb/
daraus gemacht.
Hoffe, dass sich was ändert.

Gruß

[Marco Steinhaeuser]

Hallo,

mit der robots.txt kann man die Indexierung der Seiten nicht verhindern, es handelt sich lediglich um eine "Bitte" an die Suchmaschine, die sich jedoch meist daran hält. Der Trailing Slash dürfte daran nichts ändern. Dann braucht die Suchmaschine noch immer ein paar Tage/Wochen Zeit. Wenn die AGB bereits indexiert wurden, kann man die nicht so ohne weiteres wieder aus dem Index bekommen. Am besten macht sich in solchen Fällen auch die Arbeit mit Google Webmaster Tools.

Gruß