Un motore di ricerca è un programma per computer che agisce come un modo di recuperare informazioni da un database, sulla base di determinati criteri definiti dall'utente. Motori moderni database di ricerca di ricerca che contengono enormi quantità di dati, raccolti dal World Wide Web, newsgroup, e progetti di directory. L'evoluzione del motore di ricerca è stata piuttosto rapida, con il motore prima vera ricerca appaiono all'inizio degli anni 1990, e il primo motore di ricerca in stile moderno che figurano nel 1995.

Prima che il World Wide Web esistito, ma dopo l'avvento di Internet e la sua popolarità che ne derivano nel circuito universitario, il primo motore di ricerca è stato creato. A questo punto della storia-la fine degli anni 1980 ei primi anni 1990-uno dei principali protocolli utilizzati su Internet è stato il protocollo di trasferimento file (FTP). Server FTP esisteva in tutto il mondo, di solito nei campus universitari, strutture di ricerca, o agenzie governative. Alcuni studenti della McGill University di Montreal ha deciso che una banca dati centralizzata dei file disponibili sui vari popolari server FTP che consentono di risparmiare tempo e di offrire un grande servizio per gli altri. Questo è stato l'origine del motore di ricerca Archie.

Archie, che è stato breve per l'archivio, è un motore di ricerca che regolarmente effettuato l'accesso al server FTP nella sua lista, e di fatto un indice dei file che sono stati sul server. Perché il tempo del processore e la larghezza di banda era ancora un prodotto abbastanza valido, Archie verificata solo per gli aggiornamenti ogni mese o giù di lì. In un primo momento l'indice che Archie costruita doveva essere controllato utilizzando il comando Unix grep , ma un utente migliore interfaccia è stata sviluppata per consentire presto per la ricerca dell'indice facile. A seguito di Archie, una manciata di motori di ricerca sorsero per cercare il protocollo Gopher simili-due dei più famosi è il Jughead e motori di ricerca Veronica. Archie è diventato relativamente obsolete con l'avvento del World Wide Web e dei motori di ricerca successive, ma i server Archie esistono ancora.

Nel 1993, non molto tempo dopo la creazione del World Wide Web, Matthew Grey sviluppati del mondo Wide Web Errante, che è stato il primo robot web. Il World Wide Web Wanderer indicizzati tutti i siti web che esisteva in Internet da parte di catturare la loro URL, ma non ha alcuna traccia del contenuto effettivo dei siti web. L'indice associato con l'Errante, che era una sorta di motore di ricerca iniziale, è stato chiamato Wandex.

A pochi altri piccoli progetti è cresciuto dopo l'Errante, che ha cominciato ad avvicinarsi al moderno motore di ricerca. Tra queste, la World Wide Web Worm, il Repository-Based Software Engineering (RBSE) ragno, e JumpStation. Tutti questi tre motori di ricerca hanno utilizzato i dati raccolti da robot web per restituire le informazioni agli utenti. Ancora, l'informazione era appena tornato non filtrato per la maggior parte, anche se RBSE ha tentato di classificare il valore delle pagine.

Nel 1993 una società fondata da alcuni studenti di Stanford, di nome Excite, pubblicato quello che è probabilmente la prima ricerca motore effettivamente incorporare l'analisi del contenuto della pagina. Questa offerta iniziale era concepito per la ricerca all'interno di un sito, tuttavia, non la ricerca sul Web nel suo insieme.

Nel 1994, però, il mondo del motore di ricerca ha avuto un importante passo avanti. Una compagnia chiamata WebCrawler andò a vivere con un motore di ricerca che non solo conquistò il titolo e l'intestazione delle pagine su Internet, ma ha afferrato tutti i contenuti pure. WebCrawler ebbe un enorme successo-un successo tale che una grande quantità di tempo che non poteva nemmeno essere utilizzata perché le sue risorse di sistema sono stati tutti utilizzati.

Un po 'più tardi che Lycos anni è stato rilasciato, anche molte delle stesse caratteristiche WebCrawler, e costruire su di essi. Lycos classifica i risultati in base alla pertinenza, e ha permesso che l'utente di modificare una serie di impostazioni per ottenere risultati che si adattano meglio. Lycos è stato enorme-all'interno di esso anno, essa ha oltre un milione di siti web archiviati, ed entro due anni aveva raggiunto i 60 milioni.

Il primo motore di ricerca sarebbe più esattamente essere Archie. Tuttavia, la maggior parte, quando si parla di un motore di ricerca, significa qualcosa di completamente diverso da quello che ha fatto Archie. Anche il più tardi i motori di ricerca WWW non soddisfa i nostri criteri moderni, fino all'avvento di WebCrawler e Lycos, il primo motore di ricerca veramente moderna.