Szinte minden webmester megpróbálja optimalizálni a webhelye oldalait oly módon, hogy minél több indexelt elemhez jusson. Bizonyos esetekben éppen ellenkezőleg, el kell rejtenie néhány oldalt, például egy űrlapot a regisztrációs adatok megadásához, a jelszavak helyreállításához stb.
Szükséges
A Robots.txt fájl szerkesztése
Utasítás
1. lépés
Több szakasz vagy egy adott teljes webhely indexelésének legegyszerűbb módja a megfelelő bejegyzések beírása a robots.txt fájlba. Útmutatóként szolgál a keresőmotorok számára. A webhely oldalainak belépésekor a kereső robot erre a fájlra hivatkozik, ha nincs, a teljes webhelyet indexeli, ellenkező esetben az ebben a fájlban megadott ajánlásokat követi.
2. lépés
Ha saját maga hozta létre webhelyét, és még nem rendelkezik ilyen alkalmazással, a tiltásokat jelző szöveges dokumentum formájában könnyen létrehozhatja saját maga. Nyisson meg egy új szöveges dokumentumot, például a Jegyzettömb program segítségével. Helyezze a következő sorokat a dokumentum törzsébe: User-agent: * Disallow: /file.htmlDisallow: / directory /
3. lépés
Most találjuk ki, mit kért a keresőmotortól feladatként. A "*" jel a User-ágenssel szemben azt jelenti, hogy ezt az utasítást abszolút minden fájlrendszernek végre kell hajtania. Például, ha „*” helyett „Yandex” -et ír, akkor ezt a fellebbezést csak a Yandex kereső robotja olvassa el. A Disallow utasítások tiltják egy adott szakasz (könyvtár) vagy fájl (.html fájl) indexelését.
4. lépés
A robots.txt fájl összeállítása után közvetlenül a webhely oldalain található szövegekhez léphet. Mint tudják, a keresőmotorok nem szeretik, ha az oldalain 3-nál több külső aktív link található. Mi van, ha orrvérzésre van szükséged, de tegyen közzé legalább 5 linket. Ezekben az esetekben használhat attribútumot vagy címkét.
5. lépés
A Google keresőmotor általi indexeléssel kapcsolatos linkek bezárásához a linket a következő formába kell hoznia: horgonyhivatkozások. Az attribútum törzsét be kell illeszteni a hivatkozás bármely részébe, ne felejtsük el elkülöníteni egy szóközzel, azaz. az attribútum elhelyezhető "a" és "href" között, vagy a link és annak horgonya között.
6. lépés
A Yandex keresőmotor általi indexelésből származó linkek bezárásához a linket a következő formába kell hoznia: horgony link. A címke a link elején és végén helyezkedik el. Ne felejtsük el, hogy ez a címke párosítva van: a második rész az elsőtől eltérően "/" jellel rendelkezik.
