Den djupa webben är den del av Internet som ligger utanför vanliga sökmetoder. En vanlig sökmotor hittar webbsidor genom att ta fram en enda sida och klicka på alla länkar. Detta gör att de kan sträcka sig ut från en enda sida som ett gigantiskt spindelnät och hitta sida efter sida genom länkning. Denna process fångar bara en bråkdel av de sidor som finns på Internet; enorma mängder data är helt oklassificerade av en av många anledningar. Dessa sidor kommer aldrig att dyka upp i en vanlig sökmotor och är därför osynliga för de flesta webbanvändare.
Ytwebben är den del av Internet som de flesta användare är bekanta med. Den här delen innehåller standardwebbsidor och webbtjänster som de flesta användare känner till. Den djupa webben består av information som endast vissa delar av Internetanvändare känner till eller också har tillgång till. Den djupa banan är enorm jämfört med ytbanan; år 2000 var den nästan 50 gånger större än ytväven.
Anledningen till att den djupa webben finns beror främst på begränsningar på sökmotorer. När sökmotorer tittar igenom länkar kan de inte komma åt vissa typer av webbsidor. Dessa sidor kommer aldrig in i systemet och indexeras därför aldrig. När en användare söker efter en av dessa sidor kommer han eller hon aldrig att hitta den, eftersom sökmotorn inte registrerar dess existens eller misslyckande med att komma åt den.
Det finns ett antal olika sidtyper som är svåra eller omöjliga för en sökmotor att indexera. Dynamiska och databasbaserade webbsidor är praktiskt taget omöjliga, eftersom de kräver specifik input för att existera. Dessa webbsidor skapas på plats, ofta genom användarinput. Eftersom en dynamisk sida inte existerar förrän den behövs hoppar sökmotorer över dem eftersom de inte vet vad de ska fråga om.
Privata eller gated webbsidor utgör en annan stor del av den djupa webben. Eftersom dessa sidor kräver inloggningsuppgifter eller inloggningsinformation och sökmotorn inte har någondera, är den blockerad från att komma åt information på andra sidan av inloggningen. Även med detta problem är vissa inloggningsbaserade webbplatser en del av ytan på webben. Webbplatsen ställer upp särskilda bestämmelser för att tillåta motorer att söka på dess sidor. Detta är vanligt bland sidor som har öppen registrering och vill generera ytterligare trafik.
En annan stor del av den djupa webben består av olänkade eller begränsade webbplatser. Dessa sidor har inga länkar till externa resurser eller blockerar aktivt befintliga länkar. Detta förhindrar att sökmotorerna någonsin snubblar på sidan, så den läggs aldrig till i några listor. Detta var tidigare vanligt bland personliga webbsidor, men förändringar i modern webbanvändning har gjort att de flesta personliga sidor har länkats och indexerats.