Az egyes oldalak vagy a teljes webhely keresőmotorokból való eltávolításának feladatával a webmester szembesül, amikor információt változtat, tartományt vált, több erőforrást kombinál és számos egyéb okot. A kívánt eredménytől függően többféle módon lehet megoldani a problémát.
Utasítás
1. lépés
Törölje az indexelendő oldalt, hogy a kiszolgáló hibaüzenetet jelenítsen meg, amikor megpróbál navigálni a kiválasztott HTTP / 1.1 weboldalra. 404 Nem található. A kiválasztott változtatások alkalmazásához meg kell várni, amíg a robot újra hozzáfér a szükséges oldalhoz.
2. lépés
A robot robots.txt gyökérfájljával zárhatja ki a kiválasztott szakaszokat vagy oldalakat a keresőmotor indexeléséből. Az admin panel megjelenítésének megakadályozásához a keresőben használja a következő parancsot: User-Agent: * Diaallow: / admin / Vagy a kiválasztott oldal indexelésből való kizárásához írja be az értéket: User-Agent: * Disallow: / selected_page.html # A változtatások alkalmazásához a robotnak újra meg kell látogatnia a kiválasztott oldalt.
3. lépés
A metacímkézési módszer segítségével hozzáadhat egy HTML-kódban megadott szabályt az összes szükséges oldalhoz: Erre azért van szükség, hogy kizárja a nem kívánt oldalakat a keresőből.
4. lépés
Válasszon egy módszert az X-Robots-Tag létrehozására olyan parancsok beviteléhez a http-fejlécbe, amelyek nem jelennek meg az oldalkódban: X-Robots-Tag: noindex, nofollow Ez a módszer a leghasznosabb a kiválasztott oldalak vagy szakaszok kizárásához az külföldi keresőmotorok.
5. lépés
Használjon egy speciális webmester-ellenőrző oldalt a Yandex-ben: https://webmaster.yandex.ru/deluri.xml vagy a Google-ban: https://www.google.com/webmasters/tools. Ez a kívánt fájl megjelenítésének megtiltására szolgál. oldal, szakasz vagy teljes webhely a kiválasztott keresőben.
