Robots.txt

Pomocí robots.txt lze výrazně omezovat procházení robotů, neboli crawlerů. I když soubor robots.txt není povinný, osobně jej doporučuji mít, abyste mohli řídit procházení crawlerů.

V tomto mini toolu získate informace o souboru robots.txt, respektive direktivy, které v tomto souboru jsou.

Stačí zadat URL hlavní stránky a tento nástroj robots.txt sám vyhledá.

Nástroj zobrazí direktivy v souboru robots.txt a případně i vyhledá sitemapu.

Tento nástroj otestuje průchodnost webu na základě direktiv v souboru robots.txt a ukáže, zda je konkrétní URL indexovatelná (na základě <meta name=“robots“ content=“noindex“>). Nástroj pracuje s vyhledávači Google a Bing.




65+ spokojených klientů | 6 let praxe

Hodnocení Smuton.cz na Google

Kontaktujte mě

Kontaktujte mě pomocí formuláře napravo nebo mi zavolejte ve Vámi vybraný termín.

Rád jsem efektivní a proto se snažím konkrétně pomoci. Proto je ideálním prvotním kontaktem e-mailová zpráva či zpráva pomocí formuláře vpravo. Rád si s Vámi ovšem i zavolám nebo se potkám na videohovoru v termínu, který Vám bude nejvíce vyhovovat.

Termín hovoru či videohovoru si můžete rezervovat zde.

Nástroje pro efektivní práci: StreakClickUp a Freelo.

 

3 + 7 =