Näin tarkistamme sivustot
Up’n’Top tarkistaa sivustoja aikataulun mukaan, rauhallisesti ja kohteliaasti. Tässä kerromme tarkalleen, mitä tarkistamme, kuinka usein ja miten tunnistat bottimme.
Sen, mitkä sivut tarkistamme ja kuinka usein, ratkaisee oma algoritmimme: tärkeämmät sivut tarkistetaan useammin.
Kuinka usein
| Mitä | Kuinka usein |
|---|---|
| Onko sivusto toiminnassa (etusivu) | 5 minuutin välein tai halutessasi 15 minuutin välein; Pro- ja Agency-paketeissa minuutin välein, kun olet vahvistanut sivuston omaksesi |
| Etusivu ja valitsemasi avainsivut | oletuksena kerran tunnissa; halutessasi 15 tai 30 minuutin välein |
| SSL-varmenne | kaksi kertaa päivässä |
| Verkkotunnuksen rekisteröinti | kerran viikossa; viimeisten 30 päivän aikana joka päivä |
| DNS-tietueet | 6 tunnin välein |
| robots.txt | kerran tunnissa |
| Kunkin tyypin sivut | otos joka päivä |
| Kaikki muut sivut | noin 8 päivän välein; tärkeät sivut ja virheelliset sivut useammin |
| Hakukoneilta suljetut sivut (noindex) | 30 päivän välein |
| Uudet sivut | täysi läpikäynti 30 päivän välein |
| Koko sivuston tarkistukset | joka päivä: analytiikkatagit, skriptit, syötteet, juridiset sivut; joka viikko: julkisesti näkyvät tiedostot, lisäosien haavoittuvuudet; joka kuukausi: evästeet ennen suostumusta |
Ennen kuin kutsumme jotain ongelmaksi
- Sivusto ei toimi: ensimmäisen epäonnistuneen tarkistuksen jälkeen yritämme uudelleen 20 sekunnin päästä ja sitten minuutin välein. Ilmoitamme sivuston olevan alhaalla vasta kahden peräkkäisen epäonnistumisen ja vähintään 3 minuutin jälkeen, ja vain jos muista sijainneista tehdyt tarkistukset eivät myöskään näe sen toimivan.
- Rikkinäinen sivu: virheen on kestettävä vähintään 4 tuntia ja toistuttava 4 tuntia myöhemmin tehdyssä tarkistuksessa. Jos monet sivut epäonnistuvat yhtä aikaa, odotamme 8 tuntia – yleensä kyse on koko palvelimen ongelmasta.
Hälytykset
- Kiireelliset ongelmat – sivusto ei toimi, SSL-varmenne vanhenee 3 päivän päästä, verkkotunnus 7 päivän päästä – lähetetään heti.
- Kaikki muu kootaan oletuksena yhteen yhteenvetoon 15 minuutin välein, joten kymmenestä rikkinäisestä sivusta tulee yksi viesti, ei kymmentä.
- Kanavat: sähköposti, Telegram, Slack ja webhookit.
Hellävarainen palvelimellesi
- Enintään 2 pyyntöä sekunnissa yhdelle sivustolle, yksi pyyntö kerrallaan.
- Jos palvelin vastaa 429 tai 503 ja Retry-After-otsakkeen, pidämme enintään 60 sekunnin tauon ja hidastamme vaiheittain, enimmillään yhteen pyyntöön 5 sekunnin välein.
- Löytämillemme uusille sivuille mennään vain, jos robots.txt sallii sen. Valvontaan lisäämäsi sivut tarkistetaan, koska pyysit sitä.
Bottimme
- Valvonta:
Mozilla/5.0 (compatible; UpntopBot/1.0; +https://upntop.com/bot) - Ilmainen sivustotarkistus:
UpntopCheck/1.0 (+https://upntop.com/bot) - Tarkistukset selaimessa:
Chrome/… UpntopBot/1.0 (+https://upntop.com/bot) - Kerran viikossa tarkistus siitä, päästääkö CDN tai palomuurisi hakubotit läpi, lisää User-Agentiimme
ai-access-check/<name>, jossa nimi on OAI-SearchBot, PerplexityBot tai Claude-SearchBot. Emme koskaan lähetä muiden yritysten bottien nimiä omana User-Agentinamme. - Voit estää sen lisäämällä robots.txt-tiedostoon
User-agent: UpntopBot / Disallow: /tai kirjoittamalla osoitteeseen support@upntop.com, niin lopetamme sivustosi tarkistamisen.
Mitä tarkistamme
115 tarkistusta kahdeksalla alueella: saatavuus, tietoturva, SEO, nopeus, sisältö, esteettömyys, sähköpostin asetukset ja hakuvastaukset.