Tου Alex Wright, αρχικά δημοσιευμένο στο site www.nytimes.com στις 22/9/2009. Μπορείς να διαβάσεις το πλήρες άρθρο κάνοντας κλικ εδώ.

Μια γενιά νέων τεχνολογιών διαμορφώνεται έτσι που θα επεκτείνει απεριόριστα τις δυνατότητες των μηχανών αναζήτησης πληροφοριών. Όταν αυτό συμβεί, δεν θα καλυτερεύσει μόνο την ποιότητα των αποτελεσμάτων αλλά θα επαναπροσδιορίσει τον τρόπο με τον οποίο οι εταιρείες επιχειρούν ηλεκτρονικά.

Οι μηχανές αναζήτησης πληροφοριών για να εξάγουν  πληροφορίες με νόημα, χρειάζεται να αναλύσουν τους όρους αναζήτησης του χρήστη και να βρουν πώς  θα κατευθύνουν  αυτές τις  ερωτήσεις σε συγκεκριμένες βάσεις δεδομένων. π.χ. αν κάποιος γράψει «Ρέμπραντ», η μηχανή αναζήτησης πρέπει να γνωρίζει ποιές βάσεις δεδομένων είναι πιο πιθανό να περιέχουν πληροφορίες για την τέχνη (ας πούμε για π.χ. καταλόγους μουσείων ή οίκοι δημοπρασίας και τι είδους ερωτήσεων οι συγκεκριμένες βάσεις δεδομένων δέχονται.

Αυτή η προσέγγιση μπορεί να ακούγεται πολύ λογική στη θεωρία, αλλά στη πράξη  οι αναρίθμητες δομές βάσεων που υπάρχουν και οι πιθανοί  όροι ψαξίματος παρουσιάζουν μια δισεπίλυτη υπολογιστική πρόκληση. Η καθ.  Juliana Freire του πανεπιστημίου της Utah δουλεύει πάνω σε ένα φιλόδοξο πρόγραμμα που ονομάζεται «DeepPeep» («Απέραντη Ματιά») και το οποίο στο τέλος θα μπορεί να ανασύρει και να κατηγοριοποιεί κάθε δημόσια διαδικτυακή βάση δεδομένων. Το να εξάγεις τα περιεχόμενα από τόσο απομακρυσμένες βάσεις δεδομένων απαιτεί ένα εξελιγμένο είδος υπολογιστικού παιχνιδιού που να μπορεί μαντεύει.

Οι τεχνολογίες αυτές τελικά μπορεί να επιτρέψουν στις εταιρείες  να χρησιμοποιήσουν τα δεδομένα με νέους τρόπους. π.χ.  ένας διαδικτυακός τόπος υγείας θα μπορούσε να διασταυρώνει δεδομένα από φαρμακευτικές εταιρείες με τα τελευταία αποτελέσματα από ιατρικούς ερευνητές, ή  ένα τοπικό site ειδήσεων θα μπορούσε να επεκταθεί επιτρέποντας στους χρήστες τους να αντλούν πληροφορίες από δημόσια αρχεία που είναι αποθηκευμένα σε κυβερνητικές βάσεις δεδομένων.

Ο Mike Bergman, επιστήμονας πληροφορικής και σύμβουλος, καθώς και ο εφευρέτης του όρου «Deep Web»,  πιστεύει ότι τα μακροπρόθεσμα αποτελέσματα των νέων τεχνολογιών έχουν περισσότερο να κάνουν με την αναδιαμόρφωση των εταιρειών και λιγότερο με την ικανοποίηση των απαιτήσεων των διαδικτυακών χρηστών.