Cloudflare wprowadza nowatorski podział AI crawlerów

Cloudflare ogłosił nową funkcję, która pozwala właścicielom stron internetowych klasyfikować boty AI w trzy różne kategorie: Search, Agent oraz Training. Dzięki temu rozwiązaniu możliwe jest zarządzanie dostępem tych crawlerów do treści witryn w sposób bardziej precyzyjny, co umożliwia blokowanie lub zezwalanie na ich działanie w zależności od ich funkcji. Co ciekawe, zmiany te dotyczą nawet użytkowników korzystających z darmowego planu, co zwiększa dostępność tej innowacji dla szerokiego grona użytkowników. Nowy system kategoryzacji crawlerów ma na celu ułatwienie właścicielom stron zarządzanie ruchem automatycznym oraz ochronę ich treści przed niepożądanym wykorzystaniem. Należy jednak pamiętać, że wprowadzone zmiany mogą wpłynąć na różne mechanizmy indeksowania, takie jak Googlebot, co może prowadzić do nieprzewidzianych skutków. To istotne dla przedsiębiorców oraz marketerów, którzy powinni zapoznać się z nowymi możliwościami, jakie oferuje Cloudflare.