May 19
Möchte man eine Webseite nicht von der Wayback Machine (archive.org) archiviert haben, so gibt es eine einfache Möglichkeit um dies zu verhindern. Im Hauptverzeichnis erstellt man eine Datei namens “robots.txt”, welche im Fall der Domain “blogix.net” über “http://www.blogix.net/robots.txt” erreichbar sein muss. In die Datei “robots.txt” schreibt man folgendes:
User-agent: ia_archiver
Disallow: /
Dies verbietet “ia_archiver” (Wayback Machine) den Zugriff auf das Wurzelverzeichnis (“/”). Selbstverständlich kann auch jeder beliebige andere Pfad angegeben werden. “/preislisten/” beispielsweise würde das Archivieren von “http://www.blogix.net/preislisten/” und dessen Dateien und Unterverzeichnisse verbieten.
Bereits erzeugte Abbilder der Webseite werden mit dieser Anweisung ebenfalls aus dem Archiv entfernt. Berücksichtigen muss man allerdings, dass es mehrere Woche dauern kann, bis die Seite reindiziert und somit die Aufforderung zur Entfernung gefunden wird. Etwas beschleunigen kann man dies, indem man explizit einen Antrag auf (Re-)Indizierung stellt.
Mar 13
Nachdem die ersten Rootserver IPv6 unterstützen, springt nun auch Google auf den IPv6-Zug auf. Unter dem URL ipv6.google.com bzw. der IPv6-Adresse 2001:4860:0:2001::68 ist ab sofort die Suchmaschine ausschließlich über IPv6 zu erreichen und nimmt dort wie von der IPv4-Adresse www.google.com gewohnt Suchanfragen entgegen und liefert Ergebnisse aus.
Mar 03
Webseiten sollten immer mit dem selben URL erreicht bzw. verlinkt werden. Manche Benutzer geben beim Aufrufen der Seite www.blogix.net ein, andere nur blogix.net ein, was bei Verlinkungen auf die Seite ohne Eingriff des Webmasters zu unterschiedlichen URLs führt. Damit das nicht der Fall ist, sollte man “falsche” Besucher auf den “korrekten” URL weiterleiten. Weiterlesen »
Feb 19
Wie unter Webseite kann mit Google nicht mehr gefunden werden beschrieben, kann es sehr leicht passieren, dass eine Webseite aus dem Google Index entfernt wird, wenn die “Richtlinien für Webmaster” nicht mehr befolgt werden, nachdem man seine Seite einem Suchmaschinenoptimierer anvertraut hat. Weiterlesen »
Jan 27
In “Der gläserne Mensch” habe ich bereits eine Suchmaschine vorgestellt, die es erlaubt nach personenbezogenen Daten zu suchen. Nun gibt es eine ähnliche Seite auch aus Österreich: “123 people“. Weiterlesen »
Recent Comments