Faqet e secilës sit janë zvarritur rregullisht nga robotët e kërkimit, të cilët përpunojnë informacionin në sit në mënyrë që të jetë i disponueshëm me kërkesë të përdoruesve në motorët e kërkimit. Vizitat e vizitorëve nga motorët e kërkimit kanë një efekt pozitiv në trafikun e faqes dhe stimulojnë zhvillimin e burimit. Por, nëse ka faqe në sit, informacioni mbi të cilin nuk është i destinuar për audiencën e internetit (për shembull, faqet personale të përdoruesve ose faqja e regjistrimit), atëherë kalimi nga motorët e kërkimit në faqe të tilla nuk është i nevojshëm dhe është më mirë të ndalohet indeksimi i këtij informacioni.
E nevojshme
- - keni faqen tuaj te internetit
- - të njohësh lidhjet për faqet, indeksimi i të cilave duhet të ndalohet.
- - të ketë të paktën njohuri themelore të HTML
Udhëzimet
Hapi 1
Në mënyrë që të mos lejoni që roboti i kërkimit të indeksojë faqe të caktuara të faqes, duhet të bëni ndryshime në skedarin robots.txt, nëse është tashmë në faqen tuaj, ose ta krijoni këtë skedar.
Hapi 2
Nëse skedari robots.txt është ngarkuar tashmë në sit dhe është e mundur të redaktoni këtë skedar direkt nga paneli i kontrollit të burimeve, atëherë hapni robots.txt përmes shërbimit të internetit për redaktim.
Hapi 3
Nëse nuk ka asnjë mënyrë për të bërë ndryshime në skedarin e dëshiruar direkt nga paneli i kontrollit, atëherë hapni robots.txt në një shfletues duke klikuar në lidhjen për këtë skedar. Kopjoni të gjitha të dhënat nga faqja që hapet dhe ngjisni ato në fletë në Notepad.
Hapi 4
Nëse nuk ka robots.txt në faqe, hapni programin "Notepad", në dokumentin e ri të të cilit do t'ju duhet të futni kodin e nevojshëm.
Hapi 5
Në një fletë bosh të dokumentit të tekstit, shkruani rreshtin e parë të kërkuar:
Përdoruesi-agjent: *
Hapi 6
Pastaj shkoni në rreshtin tjetër duke shtypur butonin Enter dhe shkruani kodin e mëposhtëm:
Disallow: / index / page3Disallow: nuk tregon indeksim dhe / index / page3 është një lidhje për një faqe që nuk ka nevojë të indeksohet. Në vend të lidhjes / indeksit / page3, futni një lidhje në faqen e faqes tuaj që dëshironi të bllokoni për përpunim nga robotët.
Hapi 7
Vini re se vetë emri i domain-it mungon në fillim të lidhjes; prania e tij në hyrje nënkupton prerjen përpara. Kur zvarritet një sit, një robot kërkimi fut automatikisht një emër domain në lidhje të tilla. Prandaj, shkruani lidhje në faqet e nevojshme në këtë mënyrë.
Hapi 8
Pas Disallow: mund të vendosni jo vetëm një lidhje në një faqe të veçantë, por edhe një lidhje në çdo seksion ose direktori të faqes. Në mënyrë të ngjashme, ju mund të ndaloni indeksimin e pjesës së dëshiruar të faqes.
Hapi 9
Nëse është e nevojshme të ndaloni përpunimin nga robotë të disa seksioneve të ndryshme të burimit, shkruani një lidhje për secilën seksion ose faqe në një rresht të ri, në fillim të së cilës mos harroni të vendosni hyrjen Disallow:
Hapi 10
Për të përfunduar ndryshimin e robots.txt, klikoni në butonin "Ruaj" gjatë redaktimit të skedarit në panelin e kontrollit, ose ruani një dokument teksti me shënime nën emrin robots.txt dhe ngarkoni këtë skedar në sit.