Hakurobotit indeksoivat säännöllisesti kunkin sivuston sivut, jotka käsittelevät sivuston tietoja siten, että ne ovat saatavilla hakukoneiden käyttäjien pyynnöstä. Hakukoneiden vierailijoiden vierailuilla on positiivinen vaikutus sivustoliikenteeseen ja ne stimuloivat resurssin kehitystä. Mutta jos sivustossa on sivuja, joiden tietoja ei ole tarkoitettu Internet-yleisölle (esimerkiksi käyttäjien henkilökohtaiset sivut tai rekisteröintisivu), siirtymistä hakukoneista tällaisiin sivuihin ei tarvita ja on parempi kieltää näiden tietojen indeksointi.
Tarpeellinen
- - sinulla on oma verkkosivusto
- - tietää linkit sivuille, joiden indeksointi on kiellettävä.
- - sinulla on vähintään perustiedot HTML: stä
Ohjeet
Vaihe 1
Jos haluat estää hakurobottia indeksoimasta tiettyjä sivuston sivuja, sinun on tehtävä muutokset robots.txt-tiedostoon, jos se on jo sivustollasi, tai luot tämän tiedoston.
Vaihe 2
Jos robots.txt-tiedosto on jo ladattu sivustolle ja tätä tiedostoa on mahdollista muokata suoraan resurssin ohjauspaneelista, avaa robots.txt-tiedosto verkkopalvelun kautta muokkausta varten.
Vaihe 3
Jos haluttua tiedostoa ei voida muuttaa suoraan ohjauspaneelista, avaa robots.txt selaimessa napsauttamalla tämän tiedoston linkkiä. Kopioi kaikki tiedot avautuvalta sivulta ja liitä se Muistiossa olevalle arkille.
Vaihe 4
Jos sivustossa ei ole robots.txt-tiedostoa, avaa Muistio-ohjelma, jonka uudessa asiakirjassa sinun on annettava tarvittava koodi.
Vaihe 5
Kirjoita tyhjä tekstidokumentin arkin ensimmäinen vaadittu rivi:
Käyttäjä agentti: *
Vaihe 6
Siirry sitten seuraavalle riville painamalla Enter-näppäintä ja kirjoita seuraava koodi:
Disallow: / index / page3Disallow: tarkoittaa, että hakemistoja ei ole, ja / index / page3 on linkki sivulle, jota ei tarvitse indeksoida. Lisää linkin / hakemisto / sivu3 sijaan linkki sivustosi sivulle, jonka haluat estää käsittelemästä robotteja.
Vaihe 7
Huomaa, että verkkotunnus itsessään puuttuu linkin alusta; sen esiintyminen merkinnässä tarkoittaa eteenpäin viivaa. Kun indeksoidaan sivustoa, hakurobotti lisää verkkotunnuksen tällaisiin linkkeihin. Kirjoita siksi linkit tarvittaville sivuille tällä tavalla.
Vaihe 8
Hylkäämisen jälkeen: voit sijoittaa linkin tietylle sivulle paitsi linkin mihin tahansa sivuston osioon tai hakemistoon. Vastaavasti voit kieltää haluamasi sivuston indeksoinnin.
Vaihe 9
Jos on välttämätöntä kieltää resurssien useiden eri osien robottien suorittama käsittely, kirjoita linkki kuhunkin osioon tai sivulle uudelle riville, jonka alkuun älä unohda laittaa Disallow: -merkintää.
Vaihe 10
Viimeistele robots.txt-tiedoston muuttaminen napsauttamalla Tallenna-painiketta muokatessasi tiedostoa ohjauspaneelissa tai tallentamalla tekstidokumentti merkinnöillä nimellä robots.txt ja lataamalla tämä tiedosto sivustolle.
