fișier robots.txt - un fișier text care conține instrucțiunile pentru roboți de căutare. Este posibil să se înregistreze o interdicție privind indexarea o anumită pagină. Mai mult decât atât, interdicția va fi limitată doar de motorul de căutare selectat tine.
Numele acestui fișier, robots.txt. trebuie menționat în litere mici. Robots.txt sau Robots.txt - este o greșeală de scriere a numelui fișierului.
Fișierul în sine trebuie să fie în directorul rădăcină al serverului.
Utilizator - Agent - este numele bot pentru regimul de scutire descrise în fișierul robots.txt. Este posibil ca rândurile de utilizator va agent apartinand fi mai multe, ele trebuie să se înregistreze fiecare linie nouă.
Utilizator - Agent: Yandex
Utilizator - Agent: Googlebot
caracterul „*“ este folosit pentru a descrie regulile de boti de indexare, pentru care fișierul robots.txt nu face o intrare separată. Fișierul robots.txt poate fi doar o singură înregistrare cu această opțiune.
Utilizator - Agent: *
Disallow:
Botham toate motoarele de căutare sunt permise pentru a indexa toate fișierele, pagini, etc.
Disallow - acest câmp este prescris calea parțială sau completă la locația de pe site-ul, care nu este permis să viziteze roboții motoarelor de căutare.
În cazul în care interdicțiile și excepții puține, este necesar să se descrie fiecare linie nouă. În orice fișier robots.txt. orice ar fi fost, trebuie să fie întotdeauna cel puțin o Disallow de intrare.
Reguli de bază ale robots.txt
- nume de fișier robots.txt cu o literă mică. fișier text, îl puteți crea folosind Windows Notepad.
- Situat în directorul principal al serverului.
- Trebuie să conțină cel puțin un utilizator de intrare - agent și cel puțin o intrare Disallow.
- Cutie de utilizare - agent nu ar trebui să rămână goale.
Unele sisteme suporta un câmp suplimentar pentru robots.txt, cum ar fi gazdă. Yandex, pentru a determina locul oglinzii principale.
Harta site-ului - o formă de navigație complementare. Cu acesta, utilizatorul se poate deplasa în jurul valorii de site-ul, nu utilizați navigarea pe site.
Harta site-ului (Sitemap) - numai de ajutor „pierdut“ vizitatorului, structura modelului a site-ului este conținut în întregime pe o singură pagină.
Cum să se înregistreze sitemap în robots.txt
Aici, de asemenea, a permis tuturor roboților de motoarele de căutare să indexeze toate fișierele, folderele și pagini. În plus, specifică locația sitemap-ului (sitemap) în format .xml.
Raportul web-masterat sitemap-cele mai diverse. Unii cred că fără ea indexul motoarelor de căutare pe site-ul slab. alții cred că are o hartă site are un impact negativ asupra indexare.
Se poate crea fie prin ea însăși sau de a folosi serviciul gratuit. care sa bazat pe un site existent, veți crea un sitemap. inclusiv - și în format .xml.
Proiectare si producere de memorii flash si brichete personalizate. Materiale folosite - cupru si alama. memorii flash Modding se realizează în Steampunk (Steampunk) styling.
Pentru toate întrebările dumneavoastră puteți să mă contactați Vkontakte
Promovarea interogările de joasă frecvență. LF, MF, HF cereri.
AGS 30. Site-urile algoritm de filtrare de la Yandex.
Viral marketing. Teoria de promovare rapidă.
Snezhinsk. Lucrul cu un nou algoritm de căutare Yandex.
Sfaturi pentru optimizarea imaginilor.
'Noindex' și 'nofollow'. Caracteristici de utilizare