PDA

Archiv verlassen und diese Seite im Standarddesign anzeigen : Datenwust/Probleme für Suchroboter mit dynamischen Seiten


hr66
22.07.2007, 18:01
Hallo,
wir haben unsere Seite mit freefind (www.freefind.com (http://www.freefind.com)) durchsuchen lassen.
Freefind ist eine Suchmaschine, die auf die eigene Seite losgelassen werden kann, damit man einen Überblick erhält, wie sie von Suchmaschinen wahrgenommen wird.
Dabei stellte sich heraus, daß die Seite sehr groß ist, obwohl die Seite erst am Anfang steht, d.h. kaum Daten hinterlegt sind.
Bei Freefind besteht die Möglichkeit die dortige Suche so einzustellen, daß vbulletin-Seiten gut gecrawlt werden können, allerdings kann das Problem ja auch bei anderen Suchmaschinen auftauchen.
Kann man v-Bulletin so einstellen, daß nicht eine übermäßige Datenmenge für die Suchmaschinen entsteht?
Mfg
HR