-
Afbeelding 1 vantwee
Wanneer Google zoveel miljarden webpagina's indexeert dat het niet eens meer de moeite neemt om het aantal op te sommen, is het moeilijk voor te stellen dat er veel buiten zijn verreikende tentakels ligt.
Daaronder ligt echter een online wereld waarvan maar weinigen weten dat die bestaat. Het is een rijk van enorme, onaangeboorde reserves aan waardevolle informatie met uitgestrekte databases, verborgen websites en duistere forums. Het is een wereld waar academici en onderzoekers de gegevens kunnen vinden die nodig zijn om enkele van de grootste problemen van de mensheid op te lossen, maar ook waar criminele syndicaten actief zijn en waar terroristische handboeken en kinderpornografie vrijelijk worden verspreid.
kun je kisten krijgen van aram
Verdwijnen in het dark web
Er zijn veel geldige redenen waarom u misschien niet wilt dat uw online exploits doorzoekbaar zijn. Ontdek hoe u van internet kunt verdwijnen
Tegelijkertijd is het ondergrondse web de beste hoop voor diegenen die willen ontsnappen aan de banden van totalitaire staatscensuur en hun ideeën of ervaringen willen delen met de buitenwereld.
Geïnteresseerd? Je bent niet alleen. Het deep web en zijn darknets zijn een nieuw slagveld voor degenen die het recht op privacy online willen verdedigen, en voor degenen die vinden dat rechten moeten worden opgeofferd voor de veiligheid van de samenleving. Het deep web is ook de nieuwe grens voor diegenen die Google willen evenaren op het gebied van zoeken. Reis met ons mee naar de andere kant van het internet.
Deep webs, het dark web en darknets
Het eerste dat u moet begrijpen, is dat, hoewel de elementen waaruit dit andere web bestaat, aspecten gemeen hebben, we het niet hebben over één enkele, verenigde entiteit. Degenen met kennis van zaken zullen vaak praten in termen van het diepe of onzichtbare web, darknets en het donkere web, en je zou kunnen denken dat dit allemaal hetzelfde is. In feite zijn het afzonderlijke fenomenen, zij het verbonden door gemeenschappelijke thema's, eigenschappen of interesses.
Het deep web is niet half zo vreemd of sinister als het klinkt. In computerwetenschappelijke termen verwijst het naar die delen van het web die, om welke reden dan ook, onzichtbaar waren voor conventionele zoekmachines zoals Google.
Het grootste deel van dit deep web bestaat uit dynamisch gemaakte pagina's en database-items die alleen toegankelijk zijn door handmatig een HTML-formulier in te vullen
Het grootste deel van dit deep web bestaat uit dynamisch gemaakte pagina's en database-items die alleen toegankelijk zijn door handmatig een HTML-formulier in te vullen. Een kleiner deel is per ongeluk of met opzet ontoegankelijk gemaakt voor de crawlers van Google, terwijl andere gebieden zich achter wachtwoordbeveiligde of abonnementssites bevinden.
Vergis je niet, het deep web is enorm. Michael Bergmans baanbrekende studie uit 2001, The Deep Web: Surfacing Hidden Value, schatte dat het goed was voor 7.500 TB aan gegevens in een tijd dat zoekmachines er slechts 19 konden indexeren.
Zelfs de meer conservatieve schattingen in een paper uit 2007, geschreven door Jayant Madhavan, Alon Halevy en collega's van Google, suggereren dat er meer dan 25 miljoen verschillende bronnen van deep web-inhoud zijn, waarvan vele enorme opslagplaatsen zijn.
In de databasegemeenschap heerst het gevoel dat we de boot hebben gemist met het WWW, concludeerde de Google-paper. De overkoepelende boodschap van dit artikel is dat er een tweede boot is, met duizelingwekkende hoeveelheden gestructureerde gegevens, en die boot zou van ons moeten zijn.
Schatten van de diepte
Er is veel legitieme en waardevolle inhoud op het deep web, zei dr. Juliana Freire, de leider van een project van de University of Utah, DeepPeep, dat tot doel heeft deep web-inhoud toegankelijker te maken.
Zo zijn er verschillende wetenschappelijke datasets (zoals de Sloan Digital Sky Survey en het Centre for Coastal Margin Observation & Prediction), documenten en databases, die maatschappelijk nuttig zijn en veel belangrijke toepassingen hebben.
Volgende bladzijde
