În plus față de robots.txt există acorduri alți domni pentru roboți - de exemplu, nu ar trebui să facă mai mult decât una dintr-o conexiune la canal să înscrie și să dea posibilitatea altor utilizatori de rețea pentru a comunica cu acest server.
Pentru motorul de căutare Yandex.Ru a robotului este format din mai multe module de indexare, de codificare de detecție (dacă pagina conține limba rusă) și pentru a determina unicitatea documentului.
1. Cum invata Yandex.Ru despre noi resurse
2. Reguli de indexare în Yandex.Ru
3. Cum să aflați dacă resursele sunt indexate
4. Configurați serverul după cum urmează. astfel încât să afișeze corect data fișierelor și codarea limbii ruse.
Resursa din sistem este descrisă incorect. Cum pot remedia asta?
Primim scrisori de multe ori ca „eu nu apar în sistemul dvs., viața mea, și este descris în mod corect. Cum pot rezolva lucrurile?“ În general vorbind, resursa, dacă există, nu pot fi înregistrate în mod corespunzător. Dacă este secret, refuzați accesul la el în robots.txt. În cazul în care nu se uita la cuvintele pe care le-ar dori sa, sau nu este în prim plan, rețineți că, de fapt, scris pe paginile site-ului.
Yandex.Ru este un motor de căutare cu text integral, astfel că paginile se vor baza pe cuvinte scrise pe ele și nu pe acele cuvinte cheie pe care le-ați descris această resursă. Rețineți, de asemenea, că Yandex lucrează numai cu texte și nu poate recunoaște imaginile grafice. Prin urmare, dacă numele este tras, atunci ar trebui repetat undeva pur și simplu cu text. Sugestiile Yandex cu privire la "cum să faci pagina ta să găsești cei care au nevoie de ea" sunt descrise în "Sfaturi pentru Webmaster"
Luat de pe www.codeguru.com.ua