The Crawler Zoo

Mira qué bots visitan una web ahora mismo, de GPTBot a Googlebot, y aprende a bloquearlos. Gratis y sin registro.

web toolsnetwork toolsvisualizationseducationsecurity
Platforms
Web
Pricing Free

The Crawler Zoo es un panel en vivo de los rastreadores y bots que visitan su propio sitio, presentado como un zoológico. Un contador de entradas muestra cuántos visitantes automáticos han llegado hoy, ordenados según su trato con el robots.txt: los que lo respetan, los que lo leyeron y lo incumplieron, y los que lo incumplieron sin leerlo. Una lista muestra las llegadas nuevas a medida que se producen.

Los bots se agrupan en recintos como la Sabana de los Buscadores, la Pajarera de la IA, el Pantano SEO y el Zoo de Contacto de vistas previas de enlaces, y cada uno enumera especies como Googlebot, GPTBot y ClaudeBot. Hay una clasificación y una Sala Trampa que registra los bots atrapados en una ruta prohibida; también puedes seguir a un bot por un laberinto sin fin. La sección Tools incluye un generador de robots.txt y una página para bloquear rastreadores de IA, además de una guía de visitantes.

Se visita gratis y no pide cuenta. La página está en inglés y la llevan unos cuidadores anónimos.