Robots.txt failas nurodo paieškos sistemoms (google, yahoo, bing) kokius failus reikia indeksuoti ir kokius ne. Jei yra įdiegtas šis failas robotas, prieš apsilankydamas jūsų tinklaraštyje, atsisiunčia šį
failą ir laikosi jame aprašytų indeksavimo taisyklių. Svarbiausia yra suprasti tai, kad pirma robotas nuskaito jūsų robots.txt failą ir tik po to nuskaito ir indeksuoja tinklalapį. Kad, gauti jūsų tinklaraščio robots.txt failą apsilankykite robots.txt generator svetainėje. Norint įdiegti sugeneruotą kodą reikės.
failą ir laikosi jame aprašytų indeksavimo taisyklių. Svarbiausia yra suprasti tai, kad pirma robotas nuskaito jūsų robots.txt failą ir tik po to nuskaito ir indeksuoja tinklalapį. Kad, gauti jūsų tinklaraščio robots.txt failą apsilankykite robots.txt generator svetainėje. Norint įdiegti sugeneruotą kodą reikės.
Nuostatos >> Paieškos nuostatos >> Tinkintas „robots.txt“ >> Redaguoti >> Taip įdedam kodą ir išsaugom.
User-agent: * Disallow: /search Allow: / Sitemap: https://jūsų-blogas.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500
Disallow: / search paieškos "vorui" lieps nevaikščioti po search
Sitemap: rodo kiek poslapių bus indeksuota (šiuo atveju 500)
Sekantis veiksmas einame į Tinkintos robotų antraščių žymos ir pažymime šiuos langelius.
Spaudžiame Redaguoti ir pažymime keletą tuščių langelių, bet darome viską teisingai, priešingu atveju paieškos sistemos ignoruos tinklaraštį.
Komentarų nėra:
Rašyti komentarą