Există mai multe modalități de a ajuta roboții motoarelor de căutare să evalueze cât mai multe pagini ale site-ului și chiar să accelereze procesul. Eficacitatea metodelor este diferită, deci în acest articol vom analiza ce trebuie făcut fără întârziere și ce tehnologii ar trebui evitate.
Pregătirea site-ului pentru indexare
Înainte de a atrage motorul de căutare într-un fel sau altul, trebuie să pregătiți site-ul pentru sosirea lui. Pentru a face acest lucru, fișierul robots.txt ar trebui să specifice normele de indexare stabilite pentru acest site. Principalele directive sunt următoarele:
- Blocare specifică ce pagini sau partiții nu ar trebui indexate (partiții de serviciu, pagini cu informații personale despre utilizatori etc.);
- Crawl Delay stabilește intervalul de timp al accesului robotului la server pentru a reduce încărcarea (actual pentru site-urile care au gazde instabilă);
- Clean Param este necesar pentru site-urile cu pagini url care se modifică dinamic, de exemplu, utilizând ID-urile sesiunilor; Robotul trebuie să precizeze că nu este necesar să indice fiecare url;
- Gazdă indică care site este oglinda principală.
Dacă totul este configurat corect, robotul de căutare al Yandex va găsi numai paginile destinate acestuia. Deci, indexarea va fi mai rapidă. Din păcate, robots.txt nu contează pentru Google, deci trebuie să ascundeți conținutul de la roboți, indicând noindex și nofollow în meta tag-ul roboților pentru conținut ().
Apoi, verificați paginile duplicate și eliminați-le sau marcați-le cu atributul rel = "canonical". Acest lucru este necesar pentru ca robotul să indexeze doar o pagină, fără a acorda atenție clonelor sale. Desigur, este mai bine să ștergeți duplicate, dar dacă acest lucru nu este posibil, redirecționarea 301 va veni și la salvare.
În cele din urmă, în sitemap (sitemap.html și / sau sitemap.xml), ar trebui să afișați toate paginile care sunt deschise pentru indexare. Puteți plasa harta într-un fișier robots.txt.
Yandex și Google oferă o oportunitate de a verifica corectitudinea încărcării fișierelor robots.txt (Yandex.Webmaster), asigurați-vă că există un sitemap și verificați în acest moment numărul de pagini indexate. Aceste instrumente ar trebui să fie folosite pentru a monitoriza procesul de dating dating engines cu site-ul. Dacă totul este în ordine, rămâne doar să aștepți sosirea robotului de căutare. Să vedem cum puteți aduce acest eveniment mai aproape.
Linkuri, directoare și adăugați url
Noul site, desigur, trebuie înregistrat în serviciile Yandex și Google. În acest fel, proprietarul site-ului arată că a apărut o nouă resursă pe suprafețele rețelei, care merită atenție. După 1-2 săptămâni, motoarele de căutare vor indexa, cel mai probabil, numai o parte din pagini, însă începutul va fi făcut.
Adăugarea unui site la toate directoarele existente a fost mult timp o metodă nu numai inutilă, dar adesea chiar dăunătoare. Motoarele de căutare monitorizează cu atenție calitatea legăturilor, iar listele de directoare pentru "alergare" automată lasă mult de dorit.
Puteți încerca să adăugați site-ul la directoarele Yandex și Google (Yandex.Directory, DMOZ). Dar motoarele de căutare pentru o lungă perioadă de timp verifica fiecare site-ul, așa că așteptați efect imediat nu este meritat. Această metodă este mai bine analizată într-un complex de lucrări privind promovarea site-ului.
Motoarele de căutare oferă ele însele astfel de instrumente pentru a accelera indexarea, dar puteți utiliza servicii suplimentare. De exemplu, pentru site-urile WordPress, această funcție este instalată în mod prestabilit, trebuie doar să specificați serviciile necesare în setări. Este mai bine să limitați cele mai mari de la Yandex și Google și, dacă este necesar, cele tematice.
Servicii de accelerare a indexării și "lovirea boturilor"
Modurile de automatizare a atracției roboților de căutare sunt căutate de mult timp, deși în această direcție nu a existat încă nicio activitate de succes. Până în prezent, serviciile care funcționează cu adevărat și nu încalcă regulile motoarelor de căutare nu au loc.
În majoritatea cazurilor, pentru a accelera indexarea paginilor noi, este suficient să adăugați o nouă adresă URL în serviciile corespunzătoare Yandex și Google și să așteptați un pic. Dacă site-ul este pregătit tehnic pentru sosirea robotului și gazdele funcționează fără eșec, indexarea în timp va fi efectuată mai rapid și mai rapid. O plasare și distribuirea de conținut ar trebui să se desfășoare în primul rând pentru oameni. La urma urmei, însăși faptul de indexare nu înseamnă obținerea unor poziții înalte în extrădare.
