Η πλατφόρμα φιλοξενίας θέλει οι ιστότοποι να έχουν περισσότερο έλεγχο στον τρόπο με τον οποίο οι εταιρείες τεχνητής νοημοσύνης χρησιμοποιούν το περιεχόμενό τους.
Cloudflare ανακοίνωσε σχέδια Για να αποκλείσετε αυτόματα προγράμματα ανίχνευσης ιστού μικτής χρήσης που ευρετηριάζουν ιστότοπους για μηχανές αναζήτησης και ενεργούν ταυτόχρονα ως πράκτορες και εκπαιδευτές τεχνητής νοημοσύνης. Η εταιρεία πρόσφερε προηγουμένως στους πελάτες της την προαιρετική δυνατότητα να αποτρέπουν τα προγράμματα ανίχνευσης από το να σκαρώνουν τους ιστότοπούς τους για chatbots AI, αλλά τώρα η θέση του Cloudflare γίνεται πιο αμυντική από προεπιλογή.
«Τώρα που η πλειονότητα της επισκεψιμότητας στο Διαδίκτυο δεν είναι ανθρώπινη, πρέπει να προχωρήσουμε περισσότερο και να δράσουμε πιο γρήγορα για να δημιουργήσουμε ένα βιώσιμο οικοσύστημα», δήλωσε ο Μάθιου Πρινς, Διευθύνων Σύμβουλος και συνιδρυτής του CloudFlare σε μια δήλωση. “Τα νέα εργαλεία και συνεργασίες του CloudFlare αυξάνουν την προβολή και τις εμπορικές ευκαιρίες για τους ιδιοκτήτες ιστότοπων και ωφελούν εταιρείες τεχνητής νοημοσύνης που διαθέτουν bots με σαφή και διαφανή πρόθεση. Ελπίζουμε ότι οι προτεινόμενες προεπιλεγμένες αλλαγές θα ενθαρρύνουν τους ανιχνευτές μικτής χρήσης να διαχωρίσουν την αναζήτηση από τη χρήση πρακτόρων και την εκπαίδευση.”
Η επισκεψιμότητα στον Ιστό χρησιμοποιείται για να υποδείξει ότι οι άνθρωποι βλέπουν τις διαφημίσεις ενός ιστότοπου ή πληρώνουν για τη συνδρομή του, αλλά η δημοτικότητα των μοντέλων τεχνητής νοημοσύνης που μπορούν να επισκέπτονται ιστότοπους για να αντλούν ενημερωμένες πληροφορίες από τους χρήστες έχει ενισχύσει το σύστημα. Η νέα προσέγγιση του Cloudflare είναι μια προσπάθεια εξισορρόπησης της σχέσης με τρόπο δίκαιο τόσο για την εταιρεία τεχνητής νοημοσύνης όσο και για τον ιστότοπο που τη διαχειρίζεται.
Από τις 15 Σεπτεμβρίου 2026, οι υπάρχοντες πελάτες CloudFlare νέοι πελάτες και νέοι ιστότοποι θα “επιτρέπουν την αναζήτηση αλλά αποκλείουν την εκπαίδευση και τη χρήση αντιπροσώπων για σελίδες με διαφημίσεις”. Τα προγράμματα ανίχνευσης μικτής χρήσης που δεν δίνουν στους κατόχους ιστότοπων την επιλογή να επιλέξουν εάν ο ιστότοπός τους θα χρησιμοποιείται για τεχνητή νοημοσύνη θα αποκλείουν επίσης σελίδες με διαφημίσεις από προεπιλογή. Σύμφωνα με την εταιρεία, οι χρήστες δωρεάν λογαριασμών θα στραφούν σε αυτές τις προεπιλογές εκτός και αν εξαιρεθούν πριν από την προθεσμία της 15ης Σεπτεμβρίου.
Ως μέρος αυτών των αλλαγών, το Cloudflare κυκλοφορεί επίσης μια νέα έκδοση της δυνατότητας Pay Per Crawl που εισήγαγε το 2025, η οποία επιτρέπει στους ιστότοπους να αποκλείουν τους ανιχνευτές ιστού τεχνητής νοημοσύνης από προεπιλογή, εκτός εάν οι εταιρείες πληρώσουν για να διαγράψουν το περιεχόμενό τους. Η δυνατότητα ονομάζεται πλέον πληρωμή ανά χρήση και αντί για μια βασική πληρωμή που βασίζεται στο αν ανιχνεύεται ή όχι μια ιστοσελίδα, το Cloudflare λέει ότι οι ιδιοκτήτες ιστότοπων θα πληρώνονται όταν το περιεχόμενό τους εμφανίζεται σε απαντήσεις από το chatbot AI. Η ανακοίνωση ανέφερε μόνο συνεργασίες με το Ceramic.AI και το You.com, αλλά η Cloudflare πιθανότατα αναμένει από άλλες εταιρείες τεχνητής νοημοσύνης να συμμετάσχουν όπως επιλέγουν οι πελάτες της.
Εκτός από την προσπάθεια να κάνουμε τη σχέση μεταξύ ιστοτόπων και εταιρειών τεχνητής νοημοσύνης πιο δίκαιη γενικά, ως TechCrunch ΣημείωμαΤο Cloudflare φαίνεται επίσης να στοχεύει έμμεσα την Google. Η ανακοίνωση της εταιρείας σημείωσε ότι «οι μεγαλύτερες μηχανές αναζήτησης έχουν πρόσβαση σε σχεδόν 2 φορές περισσότερες πληροφορίες από τις κορυφαίες εταιρείες τεχνητής νοημοσύνης, επειδή καθιστούν πιο δύσκολο για τους καταναλωτές να παραμείνουν ανιχνεύσιμοι χωρίς τη χρήση τεχνητής νοημοσύνης». Ο κύριος ανιχνευτής της Google, το Googlebot, ευρετηριάζει ιστοτόπους για τις διάφορες μηχανές αναζήτησης της εταιρείας και συλλέγει δεδομένα για να εκπαιδεύσει το Gemini και να τροφοδοτήσει λειτουργίες τεχνητής νοημοσύνης όπως η Επισκόπηση AI και η Λειτουργία AI. Η Google επιτρέπει στους ιστότοπους να συμμετέχουν σε ένα ξεχωριστό πρόγραμμα ανίχνευσης που ονομάζεται Google-Extended που ανιχνεύει μόνο ιστότοπους για παραδοσιακά αποτελέσματα αναζήτησης, αλλά εάν ένας εκδότης θέλει να συμπεριλάβει τη λειτουργία AI στα αποτελέσματα, αλλά δεν θέλει να εκπαιδεύσει τα μοντέλα της Google στο περιεχόμενό τους, δεν έχει άλλη επιλογή. Η νέα πολιτική του CloudFlare είναι μια προσπάθεια να αναγκάσει την Google και άλλες εταιρείες με ανιχνευτές μικτής χρήσης να αλλάξουν τη στρατηγική τους.
