Detailed view of a server rack with a focus on technology and data storage.

Cloudflare: OpenAI płaci za sygnały o zmianach stron dla crawlera

Cloudflare: OpenAI płaci za informacje o zmianach stron, a agenci AI mogą zapłacić mniej za wyjaśnienie celu wizyty. Firma nie podała kwot.

Dyrektor generalny Cloudflare podczas rozmowy o wynikach za trzeci kwartał powiedział, że OpenAI płaci za sygnały informujące jego crawler o zmianach na stronach. Firma nie podała kwoty ani daty rozpoczęcia płatności. Według Cloudflare właściciele witryn mogą też w przyszłości otrzymywać zniżki za dostęp agentów AI, jeśli ci wyjaśnią cel swojej wizyty.

Najważniejsze

  • OpenAI płaci Cloudflare za informacje o tym, kiedy strona się zmieniła. Dzięki temu crawler nie pobiera ponownie niezmienionych podstron.
  • Cloudflare uzyskało pierwsze przychody z produktów nazywanych Act 4, ale nie podało ich wysokości.
  • Firma opisuje wybór dla właścicieli stron: przyciągać agentów AI albo je blokować.
  • Produkty do płatności za dostęp agentów, Monetization Gateway i Pay Per Use, weszły w fazę beta 30 września.

Przychody z Act 4 i model z OpenAI

Cloudflare określa jako Act 4 produkty, które mają tworzyć nowy model biznesowy dla internetu. Na rozmowie z analitykami firma podała, że zaczęła rozpoznawać znaczące przychody z tego obszaru. Nie podano jednak żadnej kwoty, a wynik kwartalny, który wyniósł 782,5 mln dolarów (wzrost o 39% rok do roku), nie rozbija przychodów z Act 4.

Najkonkretniejszym przykładem jest współpraca z OpenAI. Cloudflare przekazuje OpenAI informacje o tym, kiedy dana strona została zaktualizowana, na przykład po zmianie cennika w restauracji. Crawler OpenAI nie musi więc co jakiś czas ponownie pobierać tej samej podstrony. Firma wskazała, że płacą za to OpenAI i że spodziewa się podobnych umów z innymi firmami AI. Komunikat nie wyjaśnia, czy właściciele stron z pilotażu otrzymują jakikolwiek udział w tych płatnościach.

Harmonogram ogłoszeń

Poniższa tabela zestawia publiczne etapy sprawy, na podstawie informacji podanych w komunikacie.

DataCo się wydarzyło
8 lipcaCloudflare ogłosiło badawczy pilotaż, w którym wykorzystuje sygnały z uczestniczących serwisów, takie jak świeżość treści i zmiany stron.
SierpieńNa rozmowie o wynikach opisano partnerstwo z OpenAI.
15 październikaCloudflare napisało, że nadal pracuje z OpenAI nad tym, jak lepsze wykrywanie treści może przełożyć się na wyniki biznesowe.
30 wrześniaMonetization Gateway, pozwalający pobierać opłaty od agentów AI za każde żądanie, oraz Pay Per Use, wypłacający wydawcom środki za zgłoszone użycia, weszły w fazę beta.

Blokować czy przyciągać agentów

Dyrektor generalny Cloudflare podkreślił, że odpowiedź zależy od klienta. Jedni chcą, aby agentów było jak najwięcej. Inni traktują je jako zagrożenie i chcą je odciąć. Cloudflare pomaga pierwszej grupie obsłużyć większy ruch w sposób efektywny. Klientom, którzy agentów nie chcą, zapewnia blokadę, a za ten ruch nie są obciążani.

Jako przykład podano agenta, który pobiera menu z tysiąca stron restauracji, aby odpowiedzieć na pytanie użytkownika. Użytkownik wybiera jedną restaurację, a pozostałe 999 ponosi koszt obsługi wizyty bez korzyści. Według Cloudflare taki ruch może w ciągu pięciu lat osiągnąć nawet tysiąckrotność ruchu ludzkiego, a w ostatniej rozmowie firma sugerowała, że może to nastąpić szybciej.

Płatności za dostęp i wyjaśnianie celu wizyty

Cloudflare spodziewa się, że dostęp agentów będzie rozliczany mikropłatnościami. Im więcej agent powie stronie o celu wizyty, tym chętniej strona może obniżyć cenę dostępu. Przykład: agent planujący rodzinny urlop na Hawajach może dostać bezpłatny dostęp, bo zapytanie otwiera możliwości reklamowe. Komunikat nie podaje, po jakim czasie takie modele mogą stać się istotnym źródłem przychodów. Dyrektor generalny ocenił, że w perspektywie dziesięciu lat może to być największa część działalności firmy.

Co to oznacza w praktyce

Dla polskich witryn i firm najważniejsze jest sprawdzenie, czy ich ruch przechodzi przez Cloudflare. Jeśli tak, w panelu warto przejrzeć ustawienia AI Crawl Control i zdecydować dla każdego crawlera AI, czy zezwalać na dostęp, czy go odmawiać. Decyzję warto oprzeć na danych z logów serwera, a nie na przypuszczeniach.

  • Sprawdzić, które crawlery AI odwiedzają serwis i jak często pobierają te same adresy.
  • Upewnić się, że strony poprawnie zwracają daty ostatniej modyfikacji, ponieważ właśnie zmiany na stronach są sygnałem, o którym mówi Cloudflare.
  • Jeśli serwis ma być dostępny dla agentów, zdecydować, jakie informacje o usługach, cenach i godzinach są w nim najważniejsze, bo to one będą pobierane w pierwszej kolejności.
  • Śledzić, czy inne firmy AI zaczną podobne płatności. Komunikat nie podaje żadnych terminów.

Komunikat nie wskazuje, jakie usługi Cloudflare oferuje do optymalizacji stron pod ruch agentów. Dyrektor generalny nie wymienił takiej usługi podczas rozmowy.

Decyzja o dostępie botów AI przestaje być wyłącznie kwestią techniczną, a staje się elementem strategii SEO. Zanim zablokujesz lub otworzysz dostęp, sprawdź w logach, które agenty faktycznie odwiedzają Twoją witrynę.

Komentarz redakcji Info24

Czytaj także

Najczęstsze pytania

Czy OpenAI płaci Cloudflare za dostęp do stron?

Komunikat mówi, że OpenAI płaci Cloudflare za sygnały informujące crawler o zmianach na stronach. Dzięki nim crawler nie musi ponownie pobierać tych samych podstron. Kwota i termin rozpoczęcia płatności nie zostały podane.

Co Cloudflare rozumie pod pojęciem nowego SEO dla agentów AI?

Cloudflare określiło to jako pomoc klientom, którzy chcą, aby agenci AI częściej odwiedzali ich strony. Firma wskazała, że część klientów woli takie wizyty blokować, a wtedy ruch nie jest przez nich płatny. Komunikat nie opisuje szczegółowo, jakie usługi wchodzą w skład tej pomocy.

Czy można zablokować crawlery AI w Cloudflare?

Tak, funkcja AI Crawl Control jest dostępna na każdym planie i pozwala zezwalać lub odmawiać dostępu poszczególnym crawlerom AI. Opcja Pay Per Crawl jest w dokumentacji opisana jako prywatna beta.