WebiBot. Un analizador educado.
WebiBot es el robot de Webi que mide la tecnología, la velocidad y el SEO básico de las webs españolas para nuestro análisis público.
Qué hace. Y qué no.
Se identifica siempre
Su agente de usuario es «Mozilla/5.0 (compatible; WebiBot/1.0; +https://webi.es/bot)».
Respeta robots.txt
Antes de nada lee tu robots.txt. Si nos lo impides, no visita tu web.
Hace muy pocas peticiones
Una petición al robots.txt y otra a la página de inicio. Nunca recorre el resto de la web.
Solo guarda datos técnicos
Tecnologías detectadas, tiempos de respuesta, peso y etiquetas básicas de SEO. No copia tus textos ni tus imágenes.
Datos públicos
Todo lo que mide es visible para cualquier visitante de tu web.
Excluir tu web.
Añade estas líneas a tu robots.txt. En el siguiente análisis tu web desaparecerá del índice y de las cifras:
User-agent: WebiBot Disallow: /
Si prefieres que la retiremos ya, escríbenos indicando el dominio y la eliminamos en menos de 72 horas.