Slurp

Der Begriff Slurp findet heute in dieser Form nur noch wenig Anwendung. Ursprünglich handelte es sich dabei um einen Spider der Suchmaschine Inktomi. Bereits im Jahr 2003 wurde der Suchmaschinen Betreiber Inktomi jedoch von Yahoo gekauft. Aufgrund dieser Tatsache wurde der Slurp bereits im Februar 2004 umbenannt und heißt seit dem Yahoo Slurp. Es wird vermutet, dass dieser Spider die Grundlage der neuen Suchmaschine von Yahoo bildet. Zudem heißt es, dass der Yahoo Slurp auf zukünftige Techniken von der Suchmaschine einen großen Einfluss haben soll. Im Gegensatz zum Googlebot crawled (Durchsuchung des Internets nach aktualisierten und neuen Inhalten) der Yahoo Slurp gleichmäßiger das Web. Der Googlebot dagegen hat unterschiedliche Crawlfrequenzen in der Zeit. Man kann davon ausgehen, das die Dokumente, die vom Yahoo Slurp eingelesen wurden, auch sehr schnell in den Suchmaschinen Index aufgenommen werden. Wichtig ist natürlich, dass die Seite auch vom Yahoo Slurp gefunden werden kann, sonst kann sie natürlich auch nicht in das Index aufgenommen werden.