A ver, sin ánimo de ofender y sin acritud, pero has pasado de preguntarme que es la deep web a preguntarme el funcionamiento interno de los crawlers de los búscadores. Te lo repito una última vez, la Deep Web es la parte de internet a la que no puedes acceder sin un programa especial (Tor/Tails) o sin una cuenta de usuario registrado (Mensajes privados de reddit, Facebook, etc...)
Y intentando mascarlo un poco, sin mis credenciales tu puedes acceder a mis mensajes privados de ForoParalelo? No verdad? Se pueden encontrar mis mensajes en google de alguna manera? A qué no? Pues eso es una parte de la deep web, que es un concepto MUY AMPLIO.
Otro ejemplo, tienes correo electrónico? Cuando entras a gmail.com no te aparece una ventana de login? Pues bien, una vez pasas esa ventana TODO es deep web, y repetimos que porque no podemos acceder de forma normal.
Traslademos estos ejemplos a lo que algunos individuos consideran que es la deep web, la red Tor (que es Deep Web porque necesitas un protocolo especial para acceder a esa parte de la web)
Para que lo veas más claro, intenta acceder a esta URL de la red tor. ¿A qué no puedes? Pues eso es Deep Web
http://3g2upl4pq6kufc4m.onion/
Espero que ya lo tengas más claro, yo no me puedo explicar mejor