English
Deutsch
Dansk
Svenska
Nederlands
EspañolMorningscore Bot
Apžvalga
Šis Morningscore Bot yra automatizuotas tikrintuvas, kurį valdo Morningscore, SEO platforma, padedanti svetainių savininkams stebėti pozicijas, analizuoti vidinį SEO ir gerinti matomumą paieškos sistemose.
Botas atlieka vidinio SEO analizę Morningscore klientų vardu. Tikrinimai pradedami tik tada, kai klientas prideda svetainę prie savo Morningscore paskyros. Botas analizuoja puslapio struktūrą, metaduomenis, nuorodas ir turinį, kad pateiktų SEO rekomendacijas.
User-Agent
Morningscore Bot identifikuoja save naudodamas šią User-Agent eilutę.
Tikslus formatas
User-Agent visada prasideda nuo:
Mozilla/5.0 (Morningscore Bot/1.0)
Po šio prefikso gali sekti į naršyklę panašūs priesagiai (pvz., AppleWebKit/537.36 (KHTML, like Gecko) Chrome/... Safari/...).
Nuoseklus identifikatorius yra Morningscore Bot/1.0.
Atitikties šablonai identifikavimui
Svetainių savininkai ir saugumo sistemos gali atpažinti Morningscore Bot srautą naudodami:
| Metodas | Šablonas |
|---|---|
| Poilutė | Morningscore Bot/1.0 |
| Regex | Mozilla/5.0 (Morningscore Bot/1.0) |
| robots.txt User-agent | Morningscore Bot |
Paslaugos tikslas
Morningscore Bot nuskaito svetaines dėl Paieškos sistemų optimizavimo (SEO) analizės. Jis:
- Analizuoja puslapio struktūrą, meta žymas, antraštes ir turinį
- Aptinka neveikiančias nuorodas ir nuskaitymo problemas
- Ištraukia svetainių žemėlapius ir nuorodų struktūrą
- Pateikia rekomendacijas, kaip pagerinti matomumą paieškos sistemose
Nuskaitymai atliekami tik toms svetainėms, kurios buvo aiškiai pridėtos prie Morningscore kliento paskyros. Botas nenuskaito svetainių be kliento leidimo. Tačiau prieš nuskaitydami mes netikriname domeno nuosavybės.
Nuskaitymo etiketas
robots.txt laikymasis
Morningscore Bot gerbia robots.txt:
- Paima ir išanalizuoja
robots.txtprieš nuskaitydamas - Identifikuoja save kaip
Morningscore BotUser-agent specifinėms taisyklėms - Laikosi visų
AllowirDisallowdirektyvų - Gerbia
Crawl-delaykai nurodyta (apribota iki 60 sekundžių tarp užklausų) - Nenuskaito kelių, kurie aiškiai uždrausti
Morningscore Botarba*
Nuskaitymo greitis
- Kai svetainė nurodo
Crawl-delayMorningscore Bot, botas atitinkamai apriboja užklausas (iki 60 sekundžių tarp užklausų) - Kai nenurodytas nuskaitymo vėlavimas, botas naudoja adaptyvų lygiagretumą (paprastai 2–20 lygiagrečių užklausų vienam domenui), kad išvengtų serverių perkrovos
- Botas nebando nuskaityti tokiu greičiu, kuris galėtų būti palaikytas DDoS ataka
Vengiami keliai
Botas vengia nuskaityti:
- Paveikslėlius:
.png,.jpg,.jpeg,.gif,.svg,.webp,.avif,.heic,.ico,.bmp,.tiff - Dvejetainiai ir medijos failai:
.pdf,.zip,.mp4,.mp3,.exe,.dmg, ir kiti įprasti ne HTML failų plėtiniai - Kalendoriaus nuorodos: URL adresai, kuriuose yra
?ical=,&ical=, arbaical=1 - Protokolo nuorodos:
tel:irmailto:nuorodos - robots.txt neleidžiami keliai: Bet koks kelias, kurio neleidžiama
Morningscore Botarba*robots.txt faile
Botas sutelkia dėmesį į HTML puslapius ir XML svetainių žemėlapius, susijusius su SEO analize.
Jautrūs keliai
Botas nėra sukurtas taikytis į jautrius ar privačius kelius. Jis laikosi robots.txt ir nuskaito tik tuos URL, kurie randami svetainių žemėlapiuose arba nuorodose puslapiuose, kuriuos klientas leido analizuoti.