Deep web adalah bagian dari Internet yang berada di luar metode pencarian standar. Mesin pencari standar menemukan halaman web dengan membuka satu halaman dan mengklik semua tautan. Ini memungkinkan mereka untuk keluar dari satu halaman seperti jaring laba-laba raksasa, menemukan halaman demi halaman melalui tautan. Proses ini hanya menangkap sebagian kecil dari halaman yang ada di Internet; sejumlah besar data benar-benar tidak diklasifikasikan karena salah satu dari banyak alasan. Halaman-halaman ini tidak akan pernah muncul di mesin pencari standar dan, oleh karena itu, tidak terlihat oleh sebagian besar pengguna web.
Web permukaan adalah bagian dari Internet yang sebagian besar pengguna kenal. Bagian ini berisi halaman web standar dan layanan web yang diketahui sebagian besar pengguna. Deep web terdiri dari informasi yang hanya diketahui atau diakses oleh sebagian pengguna Internet tertentu. Deep web sangat besar dibandingkan dengan surface web; pada tahun 2000, itu hampir 50 kali lebih besar dari jaring permukaan.
Alasan adanya web dalam terutama karena keterbatasan mesin pencari. Saat mesin pencari melihat melalui tautan, mereka tidak dapat mengakses jenis halaman web tertentu. Halaman-halaman ini tidak pernah memasuki sistem dan, oleh karena itu, tidak pernah diindeks. Ketika pengguna mencari salah satu halaman ini, dia tidak akan pernah menemukannya, karena mesin pencari tidak mencatat keberadaannya atau kegagalannya untuk mengaksesnya.
Ada sejumlah jenis halaman berbeda yang sulit atau tidak mungkin diindeks oleh mesin pencari. Laman web dinamis dan berbasis basis data praktis tidak mungkin, karena memerlukan input khusus untuk ada. Halaman web ini dibuat di tempat, seringkali melalui input pengguna. Karena halaman dinamis tidak ada sampai dibutuhkan, mesin pencari melewatkannya karena mereka tidak tahu apa yang harus diminta.
Halaman web pribadi atau terjaga keamanannya merupakan bagian besar lain dari web dalam. Karena halaman ini memerlukan kredensial atau informasi login dan mesin pencari tidak memiliki keduanya, halaman ini diblokir untuk mengakses informasi di sisi lain login. Bahkan dengan masalah ini, beberapa situs berbasis login adalah bagian dari web permukaan. Situs web membuat ketentuan khusus untuk memungkinkan mesin mencari halamannya. Ini biasa terjadi di antara halaman yang memiliki pendaftaran terbuka dan ingin menghasilkan lalu lintas tambahan.
Sebagian besar web dalam lainnya terbuat dari situs web yang tidak ditautkan atau dibatasi. Halaman-halaman ini tidak memiliki tautan apa pun ke sumber luar atau secara aktif memblokir tautan yang ada. Ini mencegah mesin pencari menemukan halaman, sehingga tidak pernah ditambahkan ke daftar apa pun. Ini dulunya umum di antara halaman web pribadi, tetapi perubahan dalam penggunaan web modern telah membuat sebagian besar halaman pribadi ditautkan dan diindeks.