X-Robots-Tags in der .htaccess
lima-city → Forum → Die eigene Homepage → Homepage Allgemein
agent
antwort
auswirkung
beispiel
button
check
code
eigentlichen bilder
forum
header
http
index
jemand
nutzen
problem
reiter
ruf
set
tag
url
-
Hallo!
Hat tag/jemand">jemand Erfahrung mit den X-Robots-Tags? Ich versuche gerade damit Suchmaschinen davon abzuhalten meine Thumbnails und Buttons usw. in den Index aufzunehmen. Bis jetzt hat es aber nch nicht funktioniert.. Auf Art "doppelt hält besser" hab ich das einmal im Root-Verzeichnis
<Files ~ "\.gif$">
Header set X-Robots-Tag "noindex, noimageindex, nofollow, noarchive"
</Files>
und einmal in den jeweiligen Verzeichnisen
-/thumbnails/ (wo logischerweise die Thumbnais sind)
<Files ~ "\.gif$"> Header set X-Robots-Tag "noimageindex, noindex, nofollow, noarchive" </Files>
-/img/ (wo die Buttons usw. sind)
<Files ~ "\.(gif|png|jpe?g)$"> Header set X-Robots-Tag "noimageindex, noindex, nofollow, noarchive" </Files>
-/p/ (wo die Seiten der Galerie sind)
<Files ~ "\.jpg$"> Header set X-Robots-Tag "index" </Files> <Files ~ "\.gif$"> Header set X-Robots-Tag "noimageindex, noindex, nofollow, noarchive" </Files>
Zusätzlich hab ich noch in den Verzeichnisen "thumbnails" und "img"den Befehl
SetEnvIfNoCase ^User-Agent$ .*(googlebot|googlebot-mobile|adsbot-google|googlebot-image|mediapartners-google) HTTP_SAFE_BADBOT
hinzugefügt.
Hier noch meine robots.txt, die in diesen Fällen leider überhaupt nicht wirkt.
User-agent: QualidatorSiteAnalyzer Disallow: User-agent: EmailCollector Disallow: / User-agent: GagaRobot Disallow: / User-Agent: * Disallow: /impressum.html Disallow: /img/ Disallow: /thumbnails/ Disallow: /font/ Disallow: /css/ Disallow: /js/ Disallow: /error/ Disallow: /contact/ Disallow: /jZ639Ni_lIIllIlhe83_o0z1s_xXZ/ Allow: /index.html Allow: /music.html Allow: /downloads.html Allow: /news.html Allow: /about.html Allow: /lyrix.html Allow: /pics/ Allow: /lyrics/ Allow: /store/ Sitemap: http://www.theyorecords.de/sitemap.xml Sitemap: http://www.theyorecords.de/sitemap-news.xml
Bis jetzt hat sich noch nichts geändert. So ist wenn man bei der Google-Bildersuche "theYoRecords" eingibt alles voll mit meinen Thumbnails anstatt den gleichen Bildern in groß.... Hat jemand eine Idee woran das liegt? Oder braucht es einfach nur noch Zeit?
Beitrag zuletzt geändert: 12.5.2012 19:22:50 von yorecords -
Diskutiere mit und stelle Fragen: Jetzt kostenlos anmelden!
lima-city: Gratis werbefreier Webspace für deine eigene Homepage
-
Bei Google braucht sowas Zeit!
Falls du trotzdem nach 90 Tagen immer-noch das Problem hast, kannst du über den Google Webmaster-Tools nachschauen, ob Google die Blockierten URLs als solche erkennt. -
webfreclan schrieb:
Richtig, Google ist langsam mit dem aktualisieren des Index...
Bei Google braucht sowas Zeit!
yorecords schrieb:
Bei HTTP-Headern (wo X-Robots-Tags) solltest du dir beim Firefox die Erweiterung "Live HTTP Headers" installieren und immer prüfen ob die Header wirklich so gesendet werden wie du dir das vorstellst, da das normalerweise keinen Einfluss auf die Seite hat (nur Auswirkungen auf Suchmaschinen oder den Cache oder so, jedenfalls nichts sichtbares).
Hat jemand Erfahrung mit den X-Robots-Tags? Ich versuche gerade damit Suchmaschinen davon abzuhalten meine Thumbnails und -
Danke für eure Antworten!
hackyourlife schrieb:
]Bei HTTP-Headern (wo X-Robots-Tags) solltest du dir beim Firefox die Erweiterung "Live HTTP Headers" installieren und immer prüfen ob die Header wirklich so gesendet werden wie du dir das vorstellst, da das normalerweise keinen Einfluss auf die Seite hat (nur Auswirkungen auf Suchmaschinen oder den Cache oder so, jedenfalls nichts sichtbares).
Ich hab das jetzt installiert aber check irgendwie nicht wie ich das jetzt nutzen kann...
-
yorecords schrieb:
Du gehtst auf Seiteninformationen, dort ist ein neuer Reiter dazugekommen: "Headers". In diesem Reiter siehst du die übertragenen HTTP-Header... und um sicher zu sein, dass du alles richtig eingestellt hast muss dort auch der X-Robots-Tag erscheinen.
Ich hab das jetzt installiert aber check irgendwie nicht wie ich das jetzt nutzen kann... -
hackyourlife schrieb:
yorecords schrieb:
Du gehtst auf Seiteninformationen, dort ist ein neuer Reiter dazugekommen: "Headers". In diesem Reiter siehst du die übertragenen HTTP-Header... und um sicher zu sein, dass du alles richtig eingestellt hast muss dort auch der X-Robots-Tag erscheinen.
Ich hab das jetzt installiert aber check irgendwie nicht wie ich das jetzt nutzen kann...
Cool, danke!
Aber anscheinend funktioniert es nicht.. Jedenfalls steht da nichts davon.. Was mach ich falsch? -
yorecords schrieb:
Ich weiß es nicht, da bei mir der Header richtig gesendet wird:
Aber anscheinend funktioniert es nicht.. Jedenfalls steht da nichts davon.. Was mach ich falsch?X-Robots-Tag noindex, noimageindex, nofollow, noarchive
Zu finden ist das im Antwort-Header...
Natürlich gibts das nur, wenn du die Seite von einem Webserver abrufst (z.B. lima-city oder XAMPP); eine lokale Datei nützt dir hier nichts.
Screenshot -
hackyourlife schrieb:
yorecords schrieb:
Ich weiß es nicht, da bei mir der Header richtig gesendet wird:
Aber anscheinend funktioniert es nicht.. Jedenfalls steht da nichts davon.. Was mach ich falsch?X-Robots-Tag noindex, noimageindex, nofollow, noarchive
Zu finden ist das im Antwort-Header...
Natürlich gibts das nur, wenn du die Seite von einem Webserver abrufst (z.B. lima-city oder XAMPP); eine lokale Datei nützt dir hier nichts.
Screenshot
Das ist klar. Aber im Antwort-Header steht nichts davon. Ich ruf die Seite von Lima-City ab. -
yorecords schrieb:
Du könntest ja einen Link hergeben...
Das ist klar. Aber im Antwort-Header steht nichts davon. Ich ruf die Seite von Lima-City ab.
Bist du dir auch sicher, dass du eine GIF-Datei herunterlädst? Der Filter reagiert doch nur auf GIF... -
hackyourlife schrieb:
yorecords schrieb:
Du könntest ja einen Link hergeben...
Das ist klar. Aber im Antwort-Header steht nichts davon. Ich ruf die Seite von Lima-City ab.
Bist du dir auch sicher, dass du eine GIF-Datei herunterlädst? Der Filter reagiert doch nur auf GIF...
Zum Beispiel http://www.theyorecords.de/pics.html
Ja, ich hab die ganzen Thumbnails (und Buttons) extra zu gif konvertiert, dass die eigentlichen Bilder trotzdem in den index aufgenommen werden..
Beitrag zuletzt geändert: 16.5.2012 1:13:01 von yorecords -
yorecords schrieb:
Ich kann dein Problem nicht nachvollziehen, da der Header richtig gesendet wird...
Zum Beispiel http://www.theyorecords.de/pics.html
Ja, ich hab die ganzen Thumbnails (und Buttons) extra zu gif konvertiert, dass die eigentlichen Bilder trotzdem in den index aufgenommen werden..
Screenshot -
hackyourlife schrieb:
yorecords schrieb:
Ich kann dein Problem nicht nachvollziehen, da der Header richtig gesendet wird...
Zum Beispiel http://www.theyorecords.de/pics.html
Ja, ich hab die ganzen Thumbnails (und Buttons) extra zu gif konvertiert, dass die eigentlichen Bilder trotzdem in den index aufgenommen werden..
Screenshot
Das ist ja eigenartig... Bei mir werden die X-Robots-Tags nicht angezeigt... Wie kann das sein? -
Diskutiere mit und stelle Fragen: Jetzt kostenlos anmelden!
lima-city: Gratis werbefreier Webspace für deine eigene Homepage
