Robots.txt zeigt Suchmaschinen den Weg
Machen Sie Spidern das Leben leicht (Foto: photocase.de/himbeertoni)
Wichtig dabei ist lediglich, dass der Quellcode möglichst fehlerfrei umgesetzt wird, um Suchmaschinen-Spidern die Arbeit nicht unnötig zu erschweren. Eine Validierung des Quellcodes gemäß diverser Webstandards (W3C) ist – entgegen einigen Blog- und Forenbeiträgen – nicht zwingend erforderlich.
Eine einzelne Textzeile kann darüber entscheiden, ob eine Seite indiziert wird oder nicht. Robots.txt gibt Suchmaschinen vor, wie und wo es langgeht. Insofern sollten Sie hier besonders aufmerksam sein.
Bei Robots.txt handelt es sich um eine kleine Textdatei, die in Ihrem Root-Verzeichnis auf dem Webserver abgelegt wird oder abgelegt werden soll und die Anweisungen für Suchmaschinbots enthält, welche Seiten und/oder Verzeichnisse nicht vom Spider besucht und/oder indiziert werden sollen. Da diese Datei von Suchmaschinen als Erstes überprüft wird, sollten Sie auch darauf achten, eine derartige Datei zu installieren und mit den richtigen Angaben zu versehen.
Sie können das Vorhandensein dieser Datei sehr einfach prüfen, indem Sie einfach folgende URL eintippen: www.ihreseite.de/robots.txt
O.D. Dawage am 08.02.2009
Grundlagen!!!
Ist es denn so schwer, den Titel zu interpretieren?
Da steht "Grundlagen" und nicht geheime "Blackhat-Tricks - exklusiv in der IWB"...
remblog.de am 06.02.2009
SEO-Experten?
Das man kein HTML mehr verwendet, ist schon bei allen angekommen.
Wenn keine neuen Tipps kommen würde ich die Serie einstampfen. Ist Zeitverschwendung für den Redakteur und den Leser.
Es kann natürlich sein das INW eine andere Zielgruppe damit ansprechen will. SEO-Experten erreicht Ihr damit nicht.
Grüße
remblog.de