Az egyes webhelyek oldalait kereső robotok rendszeresen feltérképezik, amelyek a webhelyen található információkat úgy dolgozzák fel, hogy azok elérhetőek legyenek a felhasználók keresőmotorok kérésére. A keresőmotorok látogatóinak látogatása pozitív hatással van a webhely forgalmára, és ösztönzi az erőforrás fejlesztését. De ha vannak olyan oldalak a webhelyen, amelyek információit nem az internet közönségének szánják (például a felhasználók személyes oldalai vagy a regisztrációs oldal), akkor a keresőmotorokról az ilyen oldalakra való átmenet nem szükséges, és jobb, ha megtiltja ezen információk indexelését.
Szükséges
- - legyen saját weboldala
- - megismerni az oldalakra mutató linkeket, amelyek indexelését meg kell tiltani.
- - rendelkezzen legalább alapvető HTML-ismeretekkel
Utasítás
1. lépés
Annak megakadályozása érdekében, hogy a kereső robot indexelje a webhely bizonyos oldalait, módosítania kell a robots.txt fájlt, ha az már szerepel a webhelyén, vagy létre kell hoznia ezt a fájlt.
2. lépés
Ha a robots.txt fájl már fel van töltve a webhelyre, és ezt a fájlt közvetlenül az erőforrás-vezérlőpultról szerkesztheti, akkor szerkesztés céljából nyissa meg a robots.txt fájlt a webszolgáltatáson keresztül.
3. lépés
Ha a kívánt fájlt közvetlenül a kezelőpanelről nem lehet módosítani, akkor nyissa meg a robots.txt fájlt a böngészőben a fájlra mutató linkre kattintva. Másolja át az összes adatot a megnyíló oldalról, és illessze be a Jegyzettömb lapra.
4. lépés
Ha a webhelyen nincs robots.txt fájl, nyissa meg a "Jegyzettömb" programot, amelynek új dokumentumában meg kell adnia a szükséges kódot.
5. lépés
Írjon egy üres dokumentumlapra az első szükséges sort:
Felhasználó-ügynök: *
6. lépés
Ezután az Enter billentyű lenyomásával lépjen a következő sorra, és írja be a következő kódot:
Disallow: / index / page3Disallow: azt jelzi, hogy nincs indexelés, és / index / page3 egy hivatkozás olyan oldalra, amelyet nem kell indexelni. A link / index / page3 helyett írjon be egy hivatkozást a webhely azon oldalára, amelyet le akar tiltani robotok általi feldolgozásra.
7. lépés
Ne feledje, hogy maga a tartománynév hiányzik a hivatkozás elején; a bejegyzésben való jelenléte magában foglalja az előre mutató perjelet. Webhely feltérképezésekor egy kereső robot automatikusan beilleszt egy domain nevet az ilyen linkekbe. Ezért ilyen módon írjon linkeket a szükséges oldalakra.
8. lépés
Letiltás után: nemcsak egy adott oldalra mutató hivatkozást helyezhet el, hanem a webhely bármely szakaszára vagy könyvtárára mutató hivatkozást is. Hasonlóképpen megtilthatja a webhely kívánt részének indexelését.
9. lépés
Ha meg kell tiltani az erőforrás több különböző szakaszának robotok általi feldolgozását, írjon egy linket minden szakaszhoz vagy oldalhoz egy új sorban, amelynek elején ne felejtse el feltenni a Disallow: bejegyzést.
10. lépés
A robots.txt módosításának befejezéséhez kattintson a "Mentés" gombra a fájl szerkesztése közben a vezérlőpulton, vagy mentse el a robots.txt néven szereplő bejegyzésekkel ellátott szöveges dokumentumot, és töltse fel ezt a fájlt a webhelyre.
