Yahoo-Suche kann URL-Parameter ausfiltern

Yahoo hat eine neue Lösung für das alte Problem vorgestellt, das Suchmaschinen mit dynamischen Websites haben: Um zu verhindern, dass die Robots Abermillionen fast gleicher Seiten indexieren, die sich beispielsweise nur durch eine Session-ID in der URL unterscheiden, kann der Website-Eigentümer den Yahoo-Crawler anweisen, bestimmte URL-Parameter zu ignorieren. Außerdem kann er feste Werte für die Parameter setzen, die dem Yahoo-Bot den Zugriff auf die Seiten in jedem Fall ermöglichen, beispielsweise mit einer festen Session-ID.

Um das Dynamic URL Rewriting zu benutzen, müssen die Webmaster ihre Site beim Yahoo Site Explorer unter My Sites eintragen und ihren Besitzanspruch durch eine kleine Schlüsseldatei manifestieren. Ist die Eigentumsfrage geklärt, bietet "My Sites" einen Eintrag für die individuellen Einstellungen der dynamischen URLs.