Pro provozovatele webů
Náš robot
Stránky prochází robot DohledejtoBot (kontakt je v jeho hlavičce User-Agent). Na jeden web posílá nejvýš jeden požadavek najednou s pauzou, respektuje Crawl-delay a při chybách 429/503 zpomalí.
Jak omezit, co ukládáme a ukazujeme
| Chcete | Použijte |
|---|---|
| Vůbec neprocházet | robots.txt: User-agent: DohledejtoBot + Disallow: / |
| Stránku nemít ve výsledcích | <meta name="robots" content="noindex"> nebo hlavička X-Robots-Tag: noindex |
| Bez úryvku (jen titulek) | nosnippet v meta robots nebo X-Robots-Tag |
| Kratší úryvek | max-snippet:50 (počet znaků) |
| Jen pro náš robot | <meta name="dohledejtobot" …> nebo X-Robots-Tag: DohledejtoBot: nosnippet |
| Vyhradit si vytěžování textu | <meta name="tdm-reservation" content="1">, hlavička tdm-reservation: 1, soubor /.well-known/tdmrep.json (W3C TDMRep) nebo noai |
Při vyhrazení vytěžování uložíme jen titulek a popis stránky, žádný text. Změny se projeví při další návštěvě robota.
Zpravodajské weby
U zpravodajských webů ukazujeme jen velmi krátký úryvek (nejvýš 12 slov) a vždy odkaz na celý článek. Delší úryvky jen s vaším souhlasem – napište nám na e-mail kontakt@tomasart.cz.
Hodnocení důvěryhodnosti
Počítá se automaticky podle zveřejněných pravidel, stejně pro všechny weby. Když si myslíte, že je hodnocení vašeho webu chybné (například nevidíme vaši tiráž), podejte námitku. Odstranění konkrétní stránky: žádost o odstranění.