El se uită la site-uri cu totul altfel decât oamenii care trăiesc. Există servicii speciale pe care le puteți vedea prin ochii lui. de exemplu, serviciul pr-cy.ru
Noi conducem locul de testare și apăsăm butonul "Verificați" și totul este vizibil mai jos.
Un alt exemplu. Extindeți site-ul și vedeți o bucată din pagină, care are o imagine
Dar aceeași piesă, dar ochii căutătorului:
Deci, ceea ce leagă robotul nu vede.
Sunt în formulare de abonament
Destul de des pe site-urile web există diferite forme de abonament, adică vizitatorului i se oferă o formă în care introduce informațiile necesare (de exemplu, Nume, Prenume etc.), apoi apasă butonul de abonament (trimiterea datelor introduse). În orice caz, orice informație introdusă în formulare este invizibilă pentru a căuta roboți. "Spider" nu poate "accesa cu crawlere" în interiorul formularului.
Iată formularul de abonament.
Notă: există zvonuri persistente că unele motoare de căutare văd deja ce se află în javascript.
Etichetele Meta sau robots.txt sunt blocate
Fișierul robots.txt permite proprietarului resursei să restricționeze accesul robotului de căutare la pagina web. Prin prescrierea anumitor metaetichete din acest fișier, puteți controla acțiunile robotului (interzicerea indexării paginii web, a partițiilor etc.).
Notă: blocarea în robots.txt, bineînțeles, este un lucru bun, dar garanția de 100% nu oferă doar recomandări pentru motorul de căutare, dar dacă este sau nu va fi efectuată este necunoscută.
Găsit în cadre
Din punct de vedere tehnic, legăturile din cadre (cadre) sunt vizibile pentru "păianjeni", dar, conform multor practicieni, ar trebui să evitați utilizarea cadrelor.
Legături în flash, java
Legături încorporate în flash, java și așa mai departe. tehnologiile nu sunt vizibile pentru a căuta roboți.
Linkuri pe pagini web cu sute de link-uri
Căutați roboți, de regulă, "accesați cu crawlere" numai în 100 de pagini și nu mai mult. pentru că Se presupune că o pagină cu un număr mare de linkuri este destinată exclusiv spamului.
Legăturile sunt situate în diagramă
Orice link sau orice text scris în imagini nu este vizibil pentru a căuta roboți.