Non sottovalutare mai quanta potenza di calcolo può essere applicata a un problema.
Un web crawler tipicamente tira giù l'intera pagina web e tutte le pagine collegate o incluse e crea indici e classifiche diverse volte la dimensione originale della pagina web. Da qualche parte, mantiene anche una copia dell'intera pagina. Google è noto per avere il più grande backup delle pagine web "profonde" per ricerche oscure.
Per eseguire una ricerca a testo integrale, un servizio più veloce generalmente esegue una ricerca senza virgolette e quindi filtra i risultati. Non troverà tutti i riscontri, ma gli utenti di solito sono contenti se uno dei primi due risultati è pertinente. In alcuni casi, i risultati sono un po 'più lenti poiché il filtro elimina molte risposte.
Quindi potere. E barare.