Crearea fișierului
Robots.txt - un fișier cu instrucțiuni pentru roboții motoarelor de căutare. Acesta este creat în rădăcina site-ului. Puteți să-l creați acum pe desktop-ul cu ajutorul notebook-ului, cum de a crea un fișier text.
Pentru a face acest lucru, faceți clic dreapta pe un spațiu gol și selectați New - Document text (nu Word). Acesta se va deschide cu un notebook obișnuit. Numiți-roboți, expansiune a avut deja în mod corect - txt. Este tot ceea ce-a face cu crearea fișierului.
Crearea robots.txt
Acum rămâne să umple instrucțiunile de fișier dorite. De fapt, echipele pentru boti simple de sintaxă este mult mai ușor decât în orice limbaj de programare. În general, pentru a umple un fișier în două moduri:
Vezi de la un alt site, copiați și schimba structura proiectului.
Deci, în orice caz, este util să se cunoască sintaxa de bază de instrucțiuni pentru roboți, sunteți acum și analizați.
Cum de a scrie tău instrucțiuni pentru roboți?
Primul lucru pe care începe fișierul este de a indica exact ceea ce motoarele de căutare se confruntă cu instrucțiuni. Acest lucru se face după cum urmează:
Excelent. Cu referire la roboți care le-am înțeles. Este ușor. Vă puteți imagina un exemplu simplu. Ai trei frați mai mici, John, Peter și Dima, și sunteți responsabil. Părinții au plecat și ai spus că urmăriți-le.
Toate cele trei dintre ele cer ceva de la tine. Imaginați-vă că trebuie să le dea un răspuns ca și cum ai scrie instrucțiuni crawlerele. Se va arata ceva de genul:
Astfel, Bob dantele fericit adidași, Dima cu capul uită pe fereastră la fratele lui, care este deja gândesc cât de multe goluri va astazi (Dima a primit o comandă pentru a nu permite, de exemplu, ban). Ei bine, Peter este trimis la film.
De exemplu, am un site.ru. site El este pe WordPress motor. Am început instrucțiuni de scris:
În primul rând, am apelat la toți roboții. În al doilea rând, a pus o interdicție privind indexarea dosarul motorului, dar a deschis accesul robotului la dosarul cu descărcarea. Există, de obicei, sunt stocate toate imaginile, și ei, de obicei, nu sunt aproape de indexare, în cazul în care aveți de gând pentru a obține de trafic de căutare pentru imagini.
Ei bine, amintiți-vă, am spus mai devreme în articol care poate fi mai cataloage? Le puteți crea pe cont propriu pentru scopuri diferite. De exemplu, pe unul dintre site-urile mele au dosar flash, în cazul în care am arunca un joc flash, apoi pentru a le rula pe site. Orice sursă - în acest dosar poate stoca fișierele care sunt disponibile pentru utilizatorii să descarce.
În general, este absolut nu este important ce numele dosarului. În cazul în care trebuie să fie închis în jos, specificați calea către acesta, și faceți clic pe Disallow.
Se lasă echipa avea nevoie doar pentru faptul că deja în secțiunile închise deschide unele părți. Într-adevăr, în mod implicit, dacă nu aveți un fișier robots.txt, întregul site-ul va fi disponibil pentru indexare. Acest lucru este atât de bun (cu siguranță, ceva important nu se închide din greșeală), și în același timp rău (se va deschide fișiere și foldere care nu ar trebui să fie în cauză).
După cum puteți vedea, în primul rând am pus o interdicție privind indexarea tuturor director-wp conținut. Se stochează toate șabloanele, plug-in-uri, dar există și imagini. Este evident că este posibil și se deschid. Iar pentru aceasta avem nevoie de o echipă Permiteți.
Mai multe opțiuni de căutare
Aceste echipe - nu este singurul lucru care poate fi observat în fișierul. De asemenea, există: Host - indică locul oglinzii principale. Cine nu a știut, la orice site-ul implicit, există două modalități de a scrie domeniul său: domain.com și www.domain.com.
Pentru a evita problemele, este necesar să se specifice ca oglindă primară orice opțiune unul. Acest lucru se poate face în instrumente pentru webmasteri, la fel ca în fișierul robots.txt. Pentru a face acest lucru, scrie: Realizator: domain.com
Ce da? Dacă cineva încearcă să intre în site-ul astfel: www.domain.com - sa răspândit în mod automat la versiunea fara www, deoarece el va fi recunoscut ca oglinda principală.
Din nou, puteți descărca hartă și Yandex.Webmaster, deoarece poate fi specificată în robots.txt, robotul pentru a citi această linie și să înțeleagă în mod clar în cazul în care să caute o hartă a site. Robot sitemap este la fel de important ca și pentru Vasya - mingea cu care va merge la fotbal. E ca si cum, el te întreabă (ca fratele mai mare), în cazul în care mingea este. Și să-i spui:
Acum, că știi cum să configurați și să modifice robots.txt pentru Yandex și în general orice alt motor de căutare pentru a se potrivi nevoilor dumneavoastră.
Ceea ce dă selectat fișierul?
Aceasta este ceea ce am mai spus înainte, dar o voi spune din nou. Datorită fișierelor bine personalizate cu comenzi pentru robotul vă puteți odihni mai ușor, știind că robotul nu se urca în secțiunea de deșeuri și să nu ia pagini inutile în index.
De asemenea, am spus că configurația robots.txt nu salvează totul. În special, aceasta nu împiedică dubluri, care rezultă din faptul că motoarele nu sunt perfecte. la fel ca oamenii. Apoi vi se permite să Vasya să meargă la fotbal, dar nu și faptul că el face not'll același lucru și Dima. Și astfel cu dublu: echipa poate da, dar cu siguranță nu poate fi sigur că ceva în plus nu ajunge până la index, poziția rasfatul.
Cum pot obține un robots.txt normală, dacă eu nu înțeleg nimic?
În final, crearea unui robots.txt - acest lucru nu este crearea site-ului. Într-un fel mai ușor, astfel încât să puteți copia destul de banal conținutul fișierului în orice blogger mai puțin succes. Desigur, dacă aveți un site pe WordPress. Dacă este pe un alt motor, atunci și site-urile trebuie să te uiți la aceleași CMS. Cum de a vedea conținutul unui fișier de pe un alt site am spus deja: Domain.com/robots.txt
Cred că nu mai este ceva pentru a vorbi despre, pentru că nu este necesar să se facă instrucțiuni de redactare pentru robotul obiectivul pentru anul. Aceasta este o sarcină efectua sub chiar un novice timp de 30-60 minute, și profesioniști, în general, doar câteva minute. Tot ce se poate obține, iar acest lucru este nici o îndoială.
Iar pentru a afla alte piese utile și importante pentru dezvoltarea și promovarea blogului, puteți vedea cursul nostru unic de promovare și site-ul de generare de bani. Dacă utilizați în 50-100% din recomandări, aceasta va fi în măsură să promoveze cu succes orice site în viitor.
Cele mai multe știri IT si dezvoltare web pe canalul nostru-Telegram
