People commonly refer to the "deep web" as the class of websites that
can't be found through the major search engines. They use really
convoluted URLs that don't make any sense at face value,
Stai confondendo un paio di idee qui. Puoi leggere Clearing Up Confusion - Deep Web vs. Dark Web .
Il "deep web" è costituito da quelle pagine Web che non sono indicizzate nei motori di ricerca. Devi sapere come arrivarci per ottenerli, o seguire i link in una pagina web. Questo è più semplicemente causato dalla convenzione dei robot, come sottolinea @OscarAkaElvis.
Notare la somiglianza tra "deep web" e "deep linking": deep linking significa fornire collegamenti diretti a pagine sepolte all'interno della gerarchia di un altro server; il server di hosting potrebbe avere robot bloccati per guidare il traffico attraverso le loro prime pagine (e gli annunci, di solito). I "link diretti" consentono alle persone di ignorare tale flusso e ci sono state azioni legali avanti e indietro a proposito facendolo.
Il "dark web" è costituito da pagine web che sono ulteriormente sepolte e, sì, si basano in una certa misura sugli indirizzi di servizi nascosti di Tor ("URL contorti che non hanno alcun senso"). Questi sono anche probabilmente protetti da robot, ma poiché i robot sono un protocollo volontario, possono essere ignorati da chiunque lo desideri. Google e Bing non avranno buoni dati di ricerca sui siti "dark web", perché rispettano i robot. L'FBI e la DEA, d'altra parte, probabilmente hanno un motore di ricerca molto completo che non rispetta i robot.
C'è un eccellente articolo chiamato È ancora più facile nascondersi su the Dark Web che parla dei servizi nascosti Tor, di come non sono nascosti e di come la prossima generazione di servizi nascosti diventerà ancora più complicata:
The next generation of hidden services will use a clever method to
protect the secrecy of those addresses. Instead of declaring their
.onion address to hidden service directories, they’ll instead derive a
unique cryptographic key from that address, and give that key to Tor’s
hidden service directories. Any Tor user looking for a certain hidden
service can perform that same derivation to check the key and route
themselves to the correct darknet site. But the hidden service
directory can’t derive the .onion address from the key, preventing
snoops from discovering any secret darknet address. “The Tor network
isn’t going to give you any way to learn about an onion address you
don’t already know,” says Mathewson.