Néha a webmesternek el kell távolítania az egyik indexelt oldalt a keresőből. Leggyakrabban ezt a műveletet alkalmazzák, miután tévesen beírták az oldal címét a webhelytérkép általános listájába. Egy időben a Megafon cég szakemberei találkoztak ezzel a hibával (sms üzenetek a Yandex keresőmotor bármely felhasználója számára elérhetővé váltak).
Szükséges
Személyes oldal
Utasítás
1. lépés
Az egyik legegyszerűbb módszer a saját weboldal eltávolítására a keresőmotorok archívumából, ha fizikailag törli, megváltoztatja a helycímet és hamisan törli (be kell állítania a törölt oldal attribútumát). Az oldal átalakítása után a kereső robot a következő sort fogja látni a tartalom helyett: HTTP / 1.1 404 Nem található. Ne felejtsük el azonban, hogy a kereső robotok 3 óránként, és talán 2-3 naponta egyszer is ellátogathatnak a webhelyre. Ezért várnia kell egy ideig az eredmény eléréséhez.
2. lépés
A következő módszer a robots.txt fájl szerkesztése, amely meghatározza a bejáró útját, amint az a webhelyére kerül. Ennek a szöveges dokumentumnak mindig egy helye van - a webhely gyökere. Az első bekezdésben általában a Yandex robot indexelési paramétereit jelölik (ez jelentősen eltér a többi robottól), a második bekezdésben az összes többi keresőmotort.
3. lépés
A bekezdés elején meg kell adnia az "User-Agent: *" ügynök címét és az elrejtendő oldalak címét - "Disallow: /wp-content/foto/fotojaba.html". Ugyanígy meg kell adnia azoknak az oldalaknak vagy szakaszoknak a címét, amelyeket be akar zárni az indexelés alól. Felhívjuk figyelmét, hogy ez a módszer nem nyújt gyors eredményeket. Ha webhelyének aktivitása alacsony, és a híreket nem közvetítik a közösségi hálózatokon, az új adatok feldolgozása több napos időszakot is igénybe vehet. Ezenkívül törölnie kell ezen oldalak verzióit a keresési szolgáltatás archívumából.
4. lépés
A linkek beállításának alternatív módja a robots.txt fájlban az azonos nevű meta robot címke használata. A címke szintaxisa a következő: a párosított [head] és [/head] címkék közé kell helyezni. A robotok értékét a meta névcímkébe kell helyezni. Egy példa így nézne ki:.