Katras vietnes lapas regulāri pārmeklē meklēšanas roboti, kas apstrādā vietnē esošo informāciju tā, lai tā būtu pieejama pēc lietotāju pieprasījuma meklētājprogrammās. Apmeklētāju apmeklējumi no meklētājprogrammām pozitīvi ietekmē vietnes datplūsmu un stimulē resursa attīstību. Bet, ja vietnē ir lapas, kuru informācija nav paredzēta interneta auditorijai (piemēram, lietotāju personīgās lapas vai reģistrācijas lapa), tad pāreja no meklētājprogrammām uz šādām lapām nav nepieciešama un labāk aizliegt indeksēt šo informāciju.
Nepieciešams
- - ir sava vietne
- - zināt saites uz lapām, kuru indeksēšana būtu jāaizliedz.
- - ir vismaz pamata zināšanas par HTML
Instrukcijas
1. solis
Lai novērstu, ka meklēšanas robots indeksē noteiktas vietnes lapas, jāveic izmaiņas failā robots.txt, ja tas jau atrodas jūsu vietnē, vai jāizveido šis fails.
2. solis
Ja robots.txt fails jau ir augšupielādēts vietnē un ir iespējams rediģēt šo failu tieši no resursu vadības paneļa, tad rediģēšanai atveriet robots.txt, izmantojot tīmekļa pakalpojumu.
3. solis
Ja nav iespējas veikt izmaiņas vajadzīgajā failā tieši no vadības paneļa, pēc tam pārlūkprogrammā atveriet robots.txt, noklikšķinot uz saites uz šo failu. Kopējiet visus datus no lapas, kas tiek atvērta, un ielīmējiet tos lapā Notepad.
4. solis
Ja vietnē nav robots.txt, atveriet programmu "Notepad", kuras jaunajā dokumentā jums būs jāievada nepieciešamais kods.
5. solis
Uz tukšas teksta dokumenta lapas ierakstiet pirmo nepieciešamo rindu:
Lietotāja aģents: *
6. solis
Pēc tam pārejiet uz nākamo rindu, nospiežot taustiņu Enter un ierakstiet šādu kodu:
Disallow: / index / page3Disallow: norāda, ka indeksēšana nav nepieciešama, un / index / page3 ir saite uz lapu, kas nav jāindeksē. Saites / index / page3 vietā ievietojiet saiti uz savas vietnes lapu, kuru vēlaties bloķēt apstrādei robotiem.
7. solis
Ņemiet vērā, ka saites sākumā trūkst paša domēna nosaukuma; tā klātbūtne ierakstā nozīmē slīpsvītru uz priekšu. Pārmeklējot vietni, meklēšanas robots automātiski ievieto domēna vārdu šādās saitēs. Tāpēc šādā veidā uzrakstiet saites uz nepieciešamajām lapām.
8. solis
Pēc neatļaut: varat ievietot ne tikai saiti uz noteiktu lapu, bet arī saiti uz jebkuru vietnes sadaļu vai direktoriju. Tāpat jūs varat aizliegt indeksēt vēlamo vietnes daļu.
9. solis
Ja ir jāaizliedz vairāku dažādu resursa sadaļu apstrāde ar robotiem, uzrakstiet saiti uz katru sadaļu vai lapu jaunā rindā, kuras sākumā neaizmirstiet ievietot ierakstu Disallow:.
10. solis
Lai pabeigtu robots.txt mainīšanu, rediģējot failu vadības panelī, noklikšķiniet uz pogas Saglabāt vai saglabājiet teksta dokumentu ar ierakstiem zem nosaukuma robots.txt un augšupielādējiet šo failu vietnē.