Cómo comprobamos los sitios web
Up’n’Top comprueba los sitios según un calendario, despacio y con cortesía. Aquí verá exactamente qué comprobamos, con qué frecuencia y cómo reconocer nuestro bot.
Qué páginas comprobamos y con qué frecuencia lo decide nuestro propio algoritmo: las páginas más importantes se comprueban más a menudo.
Con qué frecuencia
| Qué | Frecuencia |
|---|---|
| Si el sitio está activo (página de inicio) | cada 5 minutos, o cada 15 si lo prefiere; cada minuto en los planes Pro y Agency una vez que confirme que el sitio es suyo |
| Página de inicio y páginas clave que usted elija | cada hora de forma predeterminada; cada 15 o 30 minutos si lo prefiere |
| Certificado SSL | dos veces al día |
| Registro del dominio | cada semana; cada día durante los últimos 30 días |
| Registros DNS | cada 6 horas |
| robots.txt | cada hora |
| Páginas de cada tipo | una muestra cada día |
| Todas las demás páginas | aproximadamente cada 8 días; las páginas importantes y las páginas con errores, más a menudo |
| Páginas cerradas a los buscadores (noindex) | cada 30 días |
| Páginas nuevas | un rastreo completo cada 30 días |
| Comprobaciones de todo el sitio | cada día: etiquetas de analítica, scripts, feeds, páginas legales; cada semana: archivos expuestos, vulnerabilidades de plugins; cada mes: cookies antes del consentimiento |
Antes de considerar algo un problema
- Sitio caído: tras la primera comprobación fallida, volvemos a intentarlo a los 20 segundos y luego cada minuto. Solo informamos de que el sitio está caído tras dos fallos seguidos y al menos 3 minutos, y solo si las comprobaciones desde otras ubicaciones tampoco lo ven funcionando.
- Página rota: el error debe durar al menos 4 horas y repetirse en una comprobación realizada 4 horas después. Si fallan muchas páginas a la vez, esperamos 8 horas: suele tratarse de un problema de todo el servidor.
Alertas
- Los problemas urgentes (el sitio está caído, el certificado SSL caduca en 3 días, el dominio en 7 días) se envían al instante.
- Todo lo demás se agrupa de forma predeterminada en un solo resumen cada 15 minutos, así que diez páginas rotas son un mensaje, no diez.
- Canales: correo electrónico, Telegram, Slack y webhooks.
Cuidadosos con su servidor
- Como máximo 2 solicitudes por segundo a un mismo sitio, una solicitud cada vez.
- Si el servidor responde 429, o 503 con una cabecera Retry-After, hacemos una pausa de hasta 60 segundos y reducimos el ritmo paso a paso, hasta una solicitud cada 5 segundos como máximo.
- Las páginas nuevas que descubrimos solo se visitan si robots.txt lo permite. Las páginas que usted añade a la monitorización se comprueban porque nos lo ha pedido.
Nuestro bot
- Monitorización:
Mozilla/5.0 (compatible; UpntopBot/1.0; +https://upntop.com/bot) - Comprobador de sitios web gratuito:
UpntopCheck/1.0 (+https://upntop.com/bot) - Comprobaciones en un navegador:
Chrome/… UpntopBot/1.0 (+https://upntop.com/bot) - Una vez a la semana, una comprobación de si su CDN o su cortafuegos deja pasar a los bots de búsqueda añade
ai-access-check/<name>a nuestro User-Agent, donde el nombre es OAI-SearchBot, PerplexityBot o Claude-SearchBot. Nunca enviamos nombres de bots de otras empresas como nuestro propio User-Agent. - Para bloquearlo, añada
User-agent: UpntopBot / Disallow: /a robots.txt o escriba a support@upntop.com y dejaremos de comprobar su sitio.
Qué comprobamos
115 comprobaciones en ocho áreas: disponibilidad, seguridad, SEO, velocidad, contenido, accesibilidad, configuración del correo y respuestas de búsqueda.