Robots.txt-generaattori
Rakenna siisti, standardien mukainen robots.txt-tiedosto muutamassa klikkauksessa. Ohjaa hakukoneiden indeksointia oikein.
Asetukset
Valmis robots.txt
Tallenna tiedosto domainin juureen: https://sivustosi.fi/robots.txt
Mikä robots.txt on?
Robots.txt on tekstitiedosto sivustosi juuressa, joka kertoo hakukoneroboteille, mitä osia sivustosta saa indeksoida ja mitä ei. Oikein laadittu robots.txt ohjaa indeksointibudjettia tärkeille sivuille ja pitää esimerkiksi hallintapaneelit ja ostoskorit pois hakutuloksista.
Varo kuitenkin estämästä vahingossa tärkeitä sivuja – väärä robots.txt voi pudottaa koko sivuston Googlesta. Älä myöskään käytä robots.txt:ää arkaluontoisen sisällön piilottamiseen, sillä tiedosto on julkinen. Käytä siihen tarvittaessa noindex-tagia tai salasanasuojausta.
- Estä hallinta-, ostoskori- ja hakutulossivut indeksoinnilta.
- Lisää aina sitemap-osoite, jotta Google löytää kaikki sivut.
- Testaa tiedosto Google Search Consolen robots.txt-testerillä.
Haluatko varmistaa, että tekninen SEO on kunnossa? Tutustu tekniseen SEO-palveluumme tai pyydä ilmainen auditointi.
