De search engines van het nieuwe millennium

Zoeken we voortaan op elkaars harde schijven?

02 januari 2001 | Jan van den Hemel Napster is langzaamaan voor internetstandaarden een grijsaard geworden en de jonge bengels die het heeft voortgebracht zijn waarschijnlijk net zo rebels. Het bestanduitwisselingsprogramma, oorspronkelijk ontwikkeld door Shawn Fanning, veranderde op radicale wijze de manier waarop muziek wordt gedistribueerd. De tweede generatie peer-to-peer (gebruiker naar gebruiker) programma's zou wel eens op een gelijkaardige wijze de manier waarop mensen op het Internet zoeken kunnen veranderen.

Dezelfde P2P-software waarmee gebruikers naar hartenlust MP3-bestanden kunnen delen, is de grondlegger van een hele reeks nieuwe search engines die dit jaar hun opkomst gaan maken. Van deze nieuwe generatie engines wordt verwacht dat ze op de harde schijven van een Napster-achtig netwerk van gebruikers zoekt naar meer dan MP3's. Het zoekt naar alle bestanden die je je maar kunt wensen. Een paar van dit soort zoeksites zijn reeds actief. Netscape-medeoprichter Marc Andreessen beschrijft één zo'n site, Pointera, als: "Een verandering zo groot als de uitvinding van de browser." Dit is de eerste van de zogenaamde 'gedistribueerde search engines'. Pointera, gelanceerd omstreeks juni 2000, is de eerste site waarop gebruikers via een standaardbrowser bestanden kunnen delen.

Een andere P2P-engine momenteel in ontwikkeling is die van Gonesilent, de nieuwe naam voor het bedrijf van Gnutella-ontwikkelaar Gene Kan. Hij werkt aan een search engine gebaseerd op Gnutella, een alternatief muziekdeelprogramma gelijkaardig aan Napster. Een eerste versie van de zoeksite staat al on line. Het verschil tussen traditionele zoeksites en de nieuwe generatie hiervan ligt in wat en hoeveel er toegankelijk is. Sites zoals AltaVista of Google missen volgens sommigen ongeveer de helft van de informatie die op het Internet te vinden valt, waarvoor ze ook nog eens hun tijd nemen. Het categoriseren van sites kan van 24 uur tot, in sommige gevallen, een maand duren. Bij P2P-zoektochten wordt er onmiddellijk gevonden wat er op de harde schijven staat van de gebruikers die op dat moment on line zijn.

Niet iedereen is wild over het idee, uiteraard. "Er is veel hoop door het succes van Napster", zegt Danny Sullivan, redacteur van Search Engine Watch. "Maar ik zie peer-to-peer de traditionele search engines niet vervangen". Volgens hem wordt elke search engine overspoeld door spam - gerichte rommel - aangezien de meeste informatie over sites komt van individuele gebruikers. Er is een hele industrie die probeert om die dingen te manipuleren, zodat je bijvoorbeeld bij hun pornosite belandt.

"Vooral bij een peer-to-peer-netwerk zie ik veel ruimte voor manipulatie", legt hij uit. Zo ontdekte AltaVista dat ongeveer een miljoen pagina's vals waren. En dat was toen er nog maar relatief weinig - twintig miljoen - pagina's geïndexeerd waren voor AltaVista-gebruikers. "Iemand smeet een 20ste van hun inventaris vol met rotzooi", zegt Sullivan. "Als je geen beveiliging installeert tegen dit soort zaken ga je je systeem openstellen aan een hoop problemen". Lees meer artikels over : spinfrenzy, gonesilent

bron: ZDNet