Suchmaschinen setzten Spider / Crawler ein. Das sind Programme, die automatsich Webseiten nach deren Inhalten durchsuchen und relevante Informationen über die Seiten speichern. Crawlern darf man keine Steine in den Weg legen. Diese Roboter der Suchmaschinen sollten alle Inhalte ohne probleme durchstöbern können. Diese Roboter folgen einem Link zum nächsten Link.

Viele Websites sind gut in Yahoo und MSN Search platziert ist, aber nicht bei Google. Warum ist das so? Was können Sie dagegen tun? Es dauert einige Zeit, momentan 2 bis 3 monate, bis Google neue Websites in den Ergebnissen zeigt. Wenn Ihre Seite auf einmal nicht mehr gelistet wird, kann es sein, dass Sie in die so genannte Sandbox verwiesen wurden. Dann müssen Sie zusehen wie sie hier wieder rauskommen. Wenn sie einen unnatürlichen Linkausbau betreiben oder in irgend einer Form gegen die Regeln der Suchmaschinen verstoßen, fleigen Sie raus! Also halten Sie sich an die Regeln! Versuchen Sie nicht, die Suchmaschinen zu täuschen. Dieser Schuss kann nach hinten losgehen.