Πλέον η AI έχει μπει για τα καλά στη ζωή μας και δεν έχει αλλάξει μόνο τον τρόπο που αναζητούμε πληροφορίες, αλλά επηρεάζει ακόμα και τη διατήρηση της ιστορίας του διαδικτύου.
Ο λόγος για τις προκλήσεις που αντιμετωπίζει το Internet Archive, ο μη κερδοσκοπικός οργανισμός που βρίσκεται πίσω από το Wayback Machine, το οποίο επιτρέπει στους χρήστες να εντοπίζουν παλαιότερες εκδόσεις ιστοσελίδων ή ακόμη και περιεχόμενο που έχει πλέον διαγραφεί από την αρχική του πηγή.
Ποιο είναι το πρόβλημα
Το πρόβλημα, σύμφωνα με έρευνα του Nieman Lab, είναι ότι αρκετοί εκδότες και ιστότοποι θεωρούν πλέον πως τα προγράμματα ανίχνευσης του Internet Archive μπορεί να λειτουργούν έμμεσα ως δίοδος για τις εταιρείες AI, οι οποίες αναζητούν τεράστιους όγκους περιεχομένου για την εκπαίδευση των μοντέλων τους. Έτσι, αντί να στοχοποιούν μόνο τα καθαρά AI bots, ορισμένοι αποκλείουν και τους crawlers που χρησιμοποιούνται για λόγους αρχειοθέτησης.
Η έρευνα αναφέρει ότι 241 ειδησεογραφικοί ιστότοποι από εννέα χώρες είχαν μπλοκάρει τουλάχιστον ένα από τα bots του Internet Archive μέσω των αρχείων robots.txt. Ανάμεσά τους βρίσκονται γνωστά ονόματα όπως οι Financial Times, The New York Times, The Athletic και The Guardian. Το robots.txt είναι το αρχείο που καθοδηγεί τα bots σχετικά με το ποια τμήματα ενός site μπορούν να ανιχνευθούν και ποια όχι.
Κίνδυνος για τη πρόσβαση στο ιστορικό περιεχόμενο
Έντον ανησυχία προκαλεί η εξέλιξη αυτή, καθώς μπορεί να περιορίσει δραστικά τη δημόσια πρόσβαση σε ιστορικό υλικό. Αν το Internet Archive δεν μπορεί να καταγράφει συστηματικά το περιεχόμενο του ιστού, τότε στο μέλλον θα είναι δυσκολότερο να ανακτηθούν διαγραμμένα άρθρα, παλιές αναρτήσεις ή σημαντικές δημόσιες πληροφορίες που κάποτε ήταν διαθέσιμες online.
Μάλιστα, ο ιδρυτής του Internet Archive, Brewster Kahle, προειδοποίησε ότι αν οι εκδότες περιορίσουν βιβλιοθήκες όπως το Internet Archive, τότε το κοινό θα έχει λιγότερη πρόσβαση στο ιστορικό αρχείο.
