Sledování robotů na webu: PHP skript pro Google Analytics 4

Marek Lecián připravil PHP skript pro měření robotů na webu v Google Analytics 4. Sleduje, jak vyhledávače procházejí váš web. Umožňuje analyzovat indexaci obsahu, odhalovat pasti na crawlery, sledovat pokusy o útoky a ověřovat funkčnost pravidel v robots.txt.

Skript je určen pro uživatele se základními znalostmi PHP, kteří mohou výstupy exportovat do Google BigQuery pro detailní analýzu. Skript nezpomaluje web a je účinný pro měření stránek s HTTP status kódy 200 a 404. Jednoduché řešení, které usnadní správu indexace webu.

(Obrázek z upoutávky: Edho Pratama z Unsplash)