Weby využívajúce Cloudflare môžu od 15. septembra 2026 zaznamenať problémy s indexovaním a viditeľnosťou vo vyhľadávačoch. Nové predvolené nastavenia totiž môžu zablokovať aj roboty služieb Google, Bing alebo Apple.

Cloudflare začne robotov rozdeľovať podľa toho, na čo obsah webu používajú. Samostatne bude posudzovať roboty určené na klasické vyhľadávanie, AI asistentov a roboty, ktoré zbierajú dáta na trénovanie modelov.

Na stránkach zobrazujúcich reklamu zostane vyhľadávanie predvolene povolené. AI agenti a trénovacie roboty však budú zablokované. Zmena sa dotkne najmä nových webov, nových zákazníkov a používateľov bezplatného programu, ktorí si nastavenia do 15. septembra manuálne neupravia.

Najväčšie riziko predstavujú takzvané viacúčelové roboty. Medzi ne môžu patriť aj Googlebot, BingBot či Applebot. Tieto roboty sa totiž nemusia používať len na klasické prehľadávanie a zaraďovanie stránok do vyhľadávača. Môžu slúžiť aj na AI účely alebo na trénovanie modelov.

Ak Cloudflare zaradí jedného robota do viacerých kategórií, použije naň najprísnejšie pravidlo. Ak má teda web zablokované používanie obsahu na trénovanie AI, Cloudflare môže robota komplexne zablokovať. To sa môže týkať aj jeho funkcie, ktorá zabezpečuje prehľadávanie a indexovanie webu.

Cloudflare týmto krokom tlačí na technologické spoločnosti, aby oddelili roboty určené na vyhľadávanie od robotov používaných na AI a trénovanie. Majitelia webov by si preto mali ešte pred 15. septembrom skontrolovať nastavenia botov a overiť, či zostávajú Googlebot, BingBot a ďalšie vyhľadávacie roboty povolené.