Sitemaps – Damit Suchmaschinen richtig suchen können

Nor­ma­ler­wei­se indi­zie­ren die Such­ma­schi­nen eine Web­site, indem sie eine Sei­te auf­ru­fen und dann allen Links fol­gen, die dort zu fin­den sind – zumin­dest bis in eine gewis­se Link-Tie­fe. Was genau gefun­den wird und wie die Ergeb­nis­se zu gewich­ten sich, kann man bei die­ser Metho­de lei­der nicht beein­flus­sen. Im Juni 2005 führ­te Goog­le Site­maps ein, die Abhil­fe schaf­fen soll­ten. Mitt­ler­wei­le ist die­sen For­mat ein Qua­si-Stan­dard und auch von MSN, Yahoo und Ask.com aner­kannt.Bei einer sol­chen Site­map han­delt es sich um eine XML Datei, die alle rele­van­ten Links einer Web­site ent­hal­ten soll. Zusätz­lich kann jeder Link mit Meta­da­ten ver­se­hen werden.

Meta­da­ten
Die­se Meta­da­ten ver­ra­ten der Such­ma­schi­ne, wie wich­tig eine Sei­te im Ver­gleich zu den ande­ren ist, wann sie zuletzt geän­dert wur­de und wie oft die Such­ma­schi­ne nach Updates suchen soll.

Auf einer Site, auf der es News in ver­schie­de­nen Kate­go­rien gibt, ist es zum Bei­spiel inter­es­sant, die Such­ma­schi­ne die Über­sichts­sei­ten häu­fi­ger über­prü­fen zu las­sen, als die ein­zel­nen Arti­kel, die sich dann doch eher sel­ten ändern. Ein Forum dage­gen ändert sich auch häu­fi­ger. Je nach Akti­vi­tät kann sich hier eine häu­fi­ge­re Indi­zie­rung lohnen.

Tech­ni­sche Umsetzung
Für „mein“ CMS Post­nu­ke gibt es ein Modul, das auto­ma­tisch aktu­el­le Site­maps gene­riert. Außer­dem bie­tet Goog­le ein Python Tool an, das Site­maps erzeu­gen kann. Natür­lich lässt sich die XML-Datei auch von Hand anle­gen. Bei klei­ne­ren Sites ist das viel­leicht auch noch eine Möglichkeit. 

Such­ma­schi­nen
Goog­le unter­stützt natür­lich immer noch die Site­maps – seit Novem­ber 2006 hat sich Goog­le aber mit MSN und Yahoo auf einen gemein­sa­men Stan­dard geei­nigt: Site­maps 0.9 – der aber bis­her nur von Goog­le und von Ask.com unter­stützt wird. 

Damit die Such­ma­schi­nen die Site­map fin­den, gibt es drei Methoden:
1. Goog­le bie­tet die Mög­lich­keit die Site­map in den Web­Mas­ter Tools bekannt zu machen. Davon hat aller­dings nur Goog­le etwas.
2. Es gibt die eher theo­re­ti­sche Mög­lich­keit den Such­ma­schi­nen die URL per Ping bekannt zu machen: [searchengine_URL]/ping?sitemap=sitemap_url – das funk­tio­niert wie­der­um bis­her nur mit Ask.com – und da auch nicht mit die­ser spe­zi­fi­zier­ten, son­dern unter einer abwei­chen­den URL.
3. Am ein­fachs­ten und am wir­kungs­volls­ten soll­te die Bekannt­ma­chung per robots.txt sein. Dort fügt man ein­fach zusätz­lich eine Zei­le in der Art von Site­map: [sitemap_​location] ein. Das kann dann jede Such­ma­schi­ne selbst fin­den und nut­zen, wenn sie es denn unterstützt.

Wei­te­re Infos gibt es auf sitemaps.org.

Links:
sitemaps.org
Site­map Validator