La indexarea Yandex. Un blog despre setările pluginului WordPress și optimizarea motoarelor de căutare pentru webmasteri începători. Cum să verificați indexarea tuturor paginilor individual
Indexarea unui site este cel mai important, necesar și primar detaliu în optimizarea acestuia. La urma urmei, tocmai datorită prezenței indexului motoarele de căutare pot răspunde tuturor solicitărilor utilizatorilor extrem de rapid și precis.
Ce este indexarea site-urilor?
Indexarea site-ului este procesul de adăugare a informațiilor despre conținutul unui site la baza de date a motorului de căutare. Este indexul care este baza de date a motoarelor de căutare. Pentru ca site-ul să fie indexat și să apară în rezultatele căutării, un bot special de căutare ar trebui să îl viziteze. Întreaga resursă, pagină cu pagină, este examinată de un bot folosind un algoritm specific. Ca urmare, găsirea și indexarea link-urilor, imaginilor, articolelor etc. În același timp, acele site-uri a căror autoritate este mai mare decât restul vor fi mai sus în rezultatele căutării din listă.
Există 2 opțiuni pentru indexarea site-ului PS:
- Detectarea independentă de către robotul de căutare a paginilor noi sau a unei resurse create - această metodă bine dacă există link-uri active de la alte site-uri deja indexate către al tău. În caz contrar, puteți aștepta la nesfârșit un robot de căutare;
- Introducerea URL-ului către site în formularul motorului de căutare destinat acestui scop manual- această opțiune permite noului site să se „alinieze” pentru indexare, ceea ce va dura destul de mult pentru o lungă perioadă de timp. Metoda este simplă, gratuită și necesită introducerea adresei numai a paginii principale a resursei. Această procedură se poate face prin panoul de webmasteri Yandex și Google.
Cum să pregătiți un site pentru indexare?
Este demn de remarcat imediat că este extrem de nedorit să publicați un site web în stadiul de dezvoltare. Motoarele de căutare pot indexa pagini neterminate cu informații incorecte, greșeli de ortografie etc. Ca urmare, acest lucru va afecta negativ clasarea site-ului și furnizarea de informații din această resursă în căutări.
Acum să enumerăm punctele care nu ar trebui uitate în etapa de pregătire a unei resurse pentru indexare:
- pe fișiere flash se aplică restricții de indexare, deci este mai bine să creați un site folosind HTML;
- Acest tip de date, cum ar fi Java Script, nu sunt, de asemenea, indexate de roboții de căutare, prin urmare, navigarea pe site ar trebui să fie duplicată cu link-uri text și toate; informatii importante, care trebuie indexat, nu scriem în Java Script;
- trebuie să eliminați toate linkurile interne rupte, astfel încât fiecare link să conducă la pagina reală a resursei dvs.;
- structura site-ului ar trebui să vă permită să vă mutați cu ușurință de la paginile inferioare la pagina principală și înapoi;
- Este mai bine să mutați informațiile și blocurile inutile și neimportante în partea de jos a paginii și, de asemenea, să le ascundeți de roboții cu etichete speciale.
Cât de des are loc indexarea?
Indexarea unui site, în funcție de o serie de motive, poate dura de la câteva ore la câteva săptămâni, până la o lună întreagă. Actualizările de indexare sau actualizările motoarelor de căutare apar la intervale diferite. Conform statisticilor, în medie, Yandex indexează pagini și site-uri noi pentru o perioadă de la 1 până la 4 săptămâni, iar Google face față pentru o perioadă de până la 7 zile.
Dar cu dreapta pregătire prealabilă resursă creată, acești termeni pot fi redusi la minimum. La urma urmei, în esență, toți algoritmii de indexare PS și logica muncii lor se rezumă la a oferi cel mai precis și mai relevant răspuns la cererea utilizatorului. În consecință, cu cât conținutul de înaltă calitate apare mai regulat pe resursa dvs., cu atât va fi indexat mai repede.
Metode de accelerare a indexării
În primul rând, ar trebui să „anunțați” motoarele de căutare că ați creat o nouă resursă, așa cum este menționat în paragraful de mai sus. De asemenea, mulți recomandă adăugarea unui nou site în sistem marcajele sociale, dar eu nu fac asta. Acest lucru a făcut de fapt posibilă accelerarea indexării cu câțiva ani în urmă, de atunci roboți de căutare oamenii „vizitează” adesea astfel de resurse, dar, în opinia mea, acum este mai bine să pui un link de la unul popular rețelele sociale. În curând, ei vor observa linkul către resursa dvs. și îl vor indexa. Un efect similar poate fi obținut folosind link-uri directe către un site nou din resurse deja indexate.
După ce mai multe pagini au fost deja indexate și site-ul a început să se dezvolte, puteți încerca să „alimentați” botul de căutare pentru a accelera indexarea. Pentru a face acest lucru, trebuie să publicați periodic conținut nou la intervale aproximativ egale (de exemplu, 1-2 articole în fiecare zi). Desigur, conținutul trebuie să fie unic, de înaltă calitate, competent și să nu fie suprasaturat cu fraze cheie. Recomand, de asemenea, crearea unui sitemap XML, care va fi discutat mai jos, și adăugarea lui la panourile webmaster ale ambelor motoare de căutare.
Fișiere Robots.txt și Sitemap
Fișierul text robots txt include instrucțiuni pentru roboții motoarelor de căutare. În același timp, face posibilă interzicerea indexării paginilor selectate de site pentru un anumit motor de căutare. Dacă o faci manual, este important ca numele acest dosar a fost scris doar cu majuscule și a fost localizat în directorul rădăcină al site-ului, majoritatea CMS-ului îl generează independent sau folosind plugin-uri.
O hartă sau o hartă a site-ului este o pagină care conține un model complet al structurii site-ului pentru a ajuta „utilizatorii pierduți”. În acest caz, puteți trece de la o pagină la alta fără a utiliza navigarea pe site. Este recomandabil să creați o astfel de hartă în format XML pentru motoarele de căutare și să o introduceți în fișierul robots.txt pentru a îmbunătăți indexarea.
Puteți obține mai multe informații despre aceste fișiere informatii detaliateîn secțiunile relevante, urmând linkurile.
Cum să blochezi un site de la indexare?
Gestionați, inclusiv interziceți site-ul sau pagină separată pentru indexare, puteți folosi fișierul robots.txt deja menționat mai sus. Pentru a face acest lucru, creați pe computer document text cu acest nume, plasați-l în folderul rădăcină al site-ului și scrieți în fișierul din ce motor de căutare doriți să ascundeți site-ul. În plus, puteți ascunde conținutul site-ului de roboții Google sau Yandex folosind semnul *. Această instrucțiune din robots.txt va interzice indexarea de către toate motoarele de căutare.
Agent utilizator: * Nu permite: /
Pentru site-urile WordPress, puteți bloca indexarea site-ului prin panoul de control. Pentru a face acest lucru, în setările de vizibilitate a site-ului, trebuie să bifați caseta „Recomandați motoarele de căutare să nu indexeze site-ul”. În același timp, cel mai probabil Yandex vă va asculta dorințele, dar nu neapărat cu Google, dar pot apărea unele probleme.
Umplerea site-ului dvs informatii utile, mă gândeam constant cum aș putea să o fac indexare rapidă a site-ului, în special în Yandex. Și am rezolvat această problemă. Acum noile mele pagini de site sunt indexate de Yandex în 10 minute. Și acesta nu este o glumă, ci adevărul pur. Așa că în acest articol am decis să vă ofer informații pentru a lua măsuri care m-au ajutat să grăbesc indexarea site-ului.
De fapt, nu vă voi spune nimic complicat sau dincolo de natural, din moment ce mie nu prea îmi place. Mă străduiesc pentru simplitate și ușurință, dar în același timp mă străduiesc să-mi aduc acțiunile la o concluzie și un rezultat logic.
Da, poate că aceste rezultate nu au fost întotdeauna pozitive, dar au fost, ceea ce înseamnă că în viitor voi deveni mai inteligent, iar munca mea va deveni mai bună.
Te intrebi, despre ce vorbesc?
Vă spun asta dintr-un motiv, pentru că prin astfel de experimente am reușit indexare rapidă a site-urilor în Yandexîn 10 minute. Poate că nu pare real, dar este un fapt. Nu prea am timp să dau clic pe butoanele rețelei mele sociale înainte ca noua mea pagină de site să fie deja indexată de Yandex.
Din păcate, nu există un astfel de rezultat în Google, indiferent cât de mult aș încerca. Și înainte de 6 ore, noile mele pagini de site nu sunt indexate în Google. Dar voi continua să studiez și să lucrez în continuare la motorul de căutare Google.
Dar în acest articol vreau să vorbesc în mod specific despre Yandex, și anume cum se întâmplă pe site-ul meu în 10 minute.
Poate că multe dintre metodele pe care le voi oferi acum pentru indexarea rapidă a unui site sunt foarte cunoscute (acest lucru se aplică mai mult bloggerilor și webmasterilor mai experimentați), dar pentru începători aceste informații le vor fi utile.
Vă voi descrie acum punct cu punct toate acțiunile pe care le-am făcut pentru a accelera indexarea site-ului meu și care în cazul meu funcționează perfect. Și deci să începem.
Cum să indexați rapid un site web în Yandex.
1. În primul rând, după ce îmi public articolul pe Internet, îl adaug la webmasterul Yandex în secțiunea „Raportați un site nou”. Acesta este primul lucru pe care toată lumea ar trebui să-l facă pentru a accelera indexarea paginii lor de site. Asigurați-vă că vă înregistrați acolo și puneți acolo un link către fiecare articol nou. Desigur, acest lucru nu oferă o garanție de 100% a indexării rapide a site-ului în Yandex, dar nu ar fi de prisos să îi reamintiți lui Yandex despre un articol nou pe site-ul dvs.
2. Pe site-ul meu, la sfârșitul fiecărui articol există butoane pentru rețelele sociale pe care le folosesc. Dar nu folosesc toate rețelele sociale care există, ci doar câteva dintre ele. Îl adaug pe al meu noua pagina la rețele sociale precum: Twitter, Facebook, Ya.ru și Google Plus. Iată toate rețelele sociale principale pe care le folosesc. Dar înainte de asta trebuie să vă înregistrați în mod corespunzător în date rețelele sociale. Nu mai folosesc servicii pentru că cred că este suficient. Dacă aveți propriile conturi în altă parte, atunci acest lucru nu va fi de prisos.
4. Adaug noua mea pagină de site la programul Pingxpertfree, care distribuie linkul meu în baza de date a site-urilor de pe Internet. Se mai numesc și fluxuri rss.
5. Scriu în mod constant articole noi și unice pentru site-ul meu. Mai mult, le scriu cu o frecventa constanta de 1 articol la 3-4 zile, dar nu mai putin de 2 articole pe saptamana. În consecință, robotul Yandex vine pe site-ul meu la o anumită perioadă de timp și așteaptă postări noi și, de îndată ce apar, Yandex le introduce imediat în baza sa de date și, în consecință, site-ul este indexat rapid în Yandex.
Încercați să respectați un program pentru când apare un articol nou pe site-ul dvs. Antrenați robotul de căutare să vă viziteze în mod constant site-ul în ziua în care apare un nou articol pe site. Acest punct este unul dintre cele mai importante. Cel mai important lucru este să vă umpleți în mod constant site-ul cu informații proaspete, iar robotul vă va vizita constant site-ul.
6. Faceți linkuri interne competente și corecte ale site-ului. Esența sa este că toate articolele tale sunt interconectate prin link-uri. Acest lucru este necesar pentru ca robotul de căutare să nu părăsească pagina la care a ajuns, ci să treacă mai departe link-uri interne. Acest lucru este deosebit de bun pentru un site tânăr care tocmai a apărut pe Internet.
7. Încercați să creșteți masa de linkuri a site-ului dvs. Mai mult, este necesar ca link-urile să meargă nu numai la pagina de start, și pe toate paginile site-ului. Acest lucru va asigura o indexare mai rapidă și mai bună a site-ului dvs. în Yandex. Dar chiar la începutul creării unui site web sau blog, nu este nevoie să folosiți servicii pentru a crește masa de linkuri, în special cele măsurate în cantități mari în echivalentul miimii. În loc de „a alerga”, este mai bine să folosești un serviciu ca SeoPult, în care linkurile sunt achiziționate în mod natural, treptat și sunt selectați doar donatori de înaltă calitate care îndeplinesc cerințe stricte.
8. Trebuie să monitorizați în mod constant indexarea paginilor dvs. de pe Internet, în special motoarele de căutare Yandex și Google. Controlul asupra indexării este important deoarece cu cât articolul dvs. intră mai repede în rezultatele căutării, cu atât mai repede veți primi beneficiul pe care îl urmăriți în articolul dvs. De asemenea, este necesară indexarea rapidă a unui articol, astfel încât escrocii să nu vă fure conținutul și să-l indexeze mai rapid pe site-ul sau blogul lor. Uneori, paginile dvs., care au fost deja indexate în motoarele de căutare, pot cădea din căutare după ceva timp - aceasta poate fi o eroare a motoarelor de căutare și în curând articolele dvs. vor reveni înapoi la rezultatele căutării sau au fost descoperite unele probleme. cu site-ul sau paginile de blog și apoi va trebui să cauți motivul (motivele) pentru care s-a întâmplat acest lucru (pot fi multe motive).
Pentru a accelera procesul de monitorizare a indexării paginilor dvs., există serviciu gratuit https://serphunt.ru/indexing, care vă va permite să verificați rapid și gratuit indexarea noului dumneavoastră sau pagina veche V motoarele de căutare Yandex și Google. Acest serviciu vă permite să verificați simultan până la 50 de pagini ale unui site web sau blog. Iată cum arată site-ul în sine:
Acestea sunt toate metodele pe care le folosesc pentru noile mele articole scrise, astfel încât să existe indexare rapidă a site-urilor în Yandexîn 10 minute.
Dar nu vă ofer o garanție de 100% că va exista exact rezultatul pe care îl am, deoarece nu se știe cum va funcționa pe site-ul dvs. Indexarea este un lucru delicat și depinde de mulți factori pe care trebuie să-i cauți și să lucrezi pentru tine.
site în Yandex. Yandex este un motor de căutare cu caracter și trebuie ghicit.
- Este foarte important ca toate paginile site-ului dvs. să fie indexate în motoarele de căutare (Yandex, Google etc.). În primul rând, dacă pagina nu este în index, atunci oamenii nu o vor putea găsi și ai pierdut timp (și eventual bani) cu crearea, conținutul și designul ei.
- Fiecare pagină din index este o sursă de vizitatori.
- În al doilea rând, dacă o pagină nu este în index, acest lucru poate indica probleme tehnice pe site, cum ar fi conținut duplicat, site-uri sau erori de găzduire.
În al treilea rând, această pagină poate juca un rol tehnic, de exemplu, să participe la o schemă de legare (sau să conțină linkuri plătite pentru care nu vei fi plătit dacă pagina nu este în index). Lucrând cu clienții, am întâlnit în mod repetat faptul că din cauza problemelor de indexare au existat poziții proaste. Acest problema tehnica
, pe care o corectez de obicei în prima lună de cooperare, din cauza căreia deja din luna a 2-a se înregistrează o creștere notabilă a vizitatorilor și a pozițiilor. Mai jos voi lua în considerare modalități manuale și automate de a verifica indexarea paginilor în Yandex și Google. Îți voi arăta cum se verifică indexarea site-ului
în general și fiecare pagină separat.
Cum să aflați numărul de pagini de pe un site
Acest lucru se poate face în mai multe moduri:
Acum că știm numărul real de pagini, trebuie să verificăm câte dintre ele sunt indexate în Yandex și Google
Ne uităm la indexarea site-ului ca întreg Câte pagini ale site-ului sunt indexate în motorul de căutare?. Ce ne oferă asta? Cunoscând numărul real de pagini de pe site, putem compara dacă acesta corespunde cu numărul de pagini indexate. Și dacă se potrivește, atunci totul este în ordine, iar dacă nu, atunci trebuie să descoperiți problema și să aflați ce pagini lipsesc (sau ce pagini au duplicate).
Indexarea site-ului în Yandex
Mai multe moduri.
După cum puteți vedea, datele sunt ușor diferite. Acest lucru se datorează faptului că designul url:site-ul dvs. arată nu numai pagini, ci și alte tipuri de fișiere (doc, xls, jpg etc.). Webmasterul arată exact numărul de pagini.
Indexarea site-urilor pe Google
Aici, la fel ca Yandex, există 2 metode:
- Utilizarea manuală a site-ului: construcția site-ului dvs. Efectul va fi aproximativ același ca și în cazul Yandex.
- Utilizarea Instrumentelor Google pentru webmasteri https://www.google.com/webmasters/(analog cu Yandex.Webmaster)
metode automate
Ce urmează
Acum că știm câte dintre paginile reale sunt indexate, pot exista 3 situații:
- Numărul de pagini din motoarele de căutare și de pe site este același. Aceasta este o opțiune ideală, înseamnă că totul este în regulă cu site-ul.
- Numărul de pagini indexate este mai mic. Aceasta înseamnă că există probleme cu site-ul (cea mai populară problemă este conținutul neinformativ sau neunic)
- Numărul de pagini indexate este mai mare. Cel mai probabil aveți o problemă cu duplicarea paginilor, de ex. o pagină poate fi accesată la mai multe adrese. Acest lucru este rău pentru promovare, pentru că... Greutatea statică a paginii este neclară și în plus există multe pagini cu conținut repetat.
Pentru a diagnostica în continuare site-ul, va trebui să aflăm ce pagini sunt indexate corect și care nu sunt incluse în index.
Cum se verifică indexarea unei pagini
S-ar putea să avem nevoie de asta când vrem să verificăm pagina specifică pe site-ul dvs. (de exemplu, publicat recent) sau o pagină de pe site-ul altcuiva (de exemplu, de unde am cumpărat un link și așteptăm ca acesta să fie indexat)
Cum să verificați indexarea tuturor paginilor individual
În acest caz, vom verifica simultan toate paginile site-ului pentru indexare și ca urmare vom afla Ce pagini specifice nu sunt indexate în motorul de căutare?.
Aici trebuie să cunoaștem nu numai numărul de pagini reale de pe site, ci și lista de adrese ale acestor pagini (url-urile lor). Acesta este probabil cel mai dificil lucru din acest articol. Se pare că am primit o listă de pagini când am generat harta site-ului, dar adresele de acolo nu sunt conținute în formă pură și trebuie să poți lucra cu un fel de program de prelucrare a datelor pentru a le extrage. Prin urmare, vom folosi un alt program.
Cum să obțineți o listă cu toate paginile de pe un site
Înainte de a colecta link-uri, trebuie să configurați parametrul Exclude Patterns. Acest lucru se face pentru a exclude link-urile inutile atunci când colectăm, de exemplu, în cazul meu, când colectăm o mulțime de adrese, cum ar fi: https://site/prodvizhenie/kak-prodvigayut-sajjty.html? replytocom=324#respond, care indică un comentariu pe pagină. Și am nevoie doar de adresa paginii. Prin urmare, am configurat excluderea adreselor folosind masca *replytocom*:
În continuare, începem să colectăm adresele URL și când programul termină de colectat, mergeți la fila Yahoo Map / Text și copiați adresele de acolo (butonul de salvare nu funcționează, deoarece folosim versiune gratuită programe)
Acum avem adresele tuturor paginilor.
Cum se verifică automat indexarea paginii
Totul este simplu aici. După lansarea programului, adăugați lista de adrese URL ale site-ului dvs. colectate în ultimul pas și adăugați-le la lista de adrese URL sursă. Programul vă permite să verificați indexarea în Yandex, Google și Rambler, selectați motorul de căutare de care aveți nevoie și executați verificarea:
După ce ați primit o listă de pagini care nu au fost incluse în index, trebuie să înțelegeți de ce s-a întâmplat acest lucru. Dacă totul este în ordine cu pagina, atunci pentru ca aceasta să fie inclusă în index, puteți achiziționa linkuri către aceasta sau mai multe retweet-uri din conturile actualizate.
Concluzie
Abilitatea de a verifica indexarea paginilor site-ului dvs. vă va permite să lucrați mai productiv cu motoarele de căutare, precum și să calculați problemele existente cu site-ul.
Indexarea site-ului este procesul de căutare, colectare, procesare și adăugare de informații despre un site la o bază de date a unui motor de căutare.
Mai multe videoclipuri pe canalul nostru - învață marketingul pe internet cu SEMANTICA
Indexarea unui site înseamnă că un robot motor de căutare vizitează resursa și paginile acesteia, studiază conținutul și îl introduce în baza de date. Ulterior, aceste informații sunt returnate pe baza interogărilor cheie. Adică, utilizatorii rețelei introduc o interogare în bara de căutare și primesc un răspuns sub forma unei liste de pagini indexate.
Dacă vorbim într-un limbaj simplu, se dovedește cam așa: întregul Internet este o bibliotecă uriașă. Orice bibliotecă care se respectă are un catalog care facilitează căutarea informatiile necesare. La mijlocul anilor '90 ai secolului trecut, toată indexarea a fost redusă la o astfel de catalogare. găsite pe site-uri web cuvinte cheieși a format o bază de date din ei.
Astăzi, boții colectează și analizează informații pe baza mai multor parametri (erori, unicitate, utilitate, disponibilitate etc.) înainte de a le introduce în motorul de căutare.
Algoritmii roboților de căutare sunt actualizați în mod constant și devin mai complexi. Bazele de date conțin o cantitate imensă de informații, în ciuda acestui fapt, căutarea informațiilor necesare nu necesită mult timp. Acesta este un exemplu de indexare de înaltă calitate.
Dacă site-ul nu a fost indexat, atunci este posibil ca informațiile să nu ajungă la utilizatori.
Cum indexează site-urile Google și Yandex
Yandex și Google sunt probabil cele mai populare motoare de căutare din Rusia. Pentru ca motoarele de căutare să indexeze site-ul dvs., trebuie să îl raportați. Puteți face acest lucru în două moduri:
- Adăugați un site pentru indexare folosind link-uri pe alte resurse de pe Internet - această metodă este considerată optimă, deoarece paginile găsite astfel sunt considerate utile de către robot și sunt indexate mai rapid, de la 12 ore la două săptămâni.
- Trimiteți site-ul dvs. pentru indexare completând manual un formular special pentru motor de căutare folosind serviciile Yandex.Webmaster, Google Webmaster Tools, Bing Webmaster Tools etc.
A doua metodă este mai lentă; site-ul este pus la coadă și indexat timp de două săptămâni sau mai mult.
În medie, site-urile și paginile noi sunt indexate în 1-2 săptămâni.
Se crede că Google indexează site-urile mai repede. Acest lucru se întâmplă deoarece motorul de căutare sistemul Google indexează toate paginile - atât utile, cât și inutile. Cu toate acestea, doar conținutul de înaltă calitate este clasat.
Yandex funcționează mai lent, dar indexează materialele utile și exclude imediat toate paginile nedorite din căutare.
Indexarea unui site funcționează astfel:
- robotul de căutare găsește portalul și examinează conținutul acestuia;
- informațiile primite sunt introduse în baza de date;
- în aproximativ două săptămâni, materialul care a trecut cu succes de indexare va apărea în rezultatele căutării, la cerere.
Există 3 moduri de a verifica indexarea unui site și a paginilor sale în Google și Yandex:
- utilizarea instrumentelor pentru webmasteri - google.com/webmasters sau webmaster.yandex.ru;
- folosind intrarea echipe speciale V bara de căutare, comanda pentru Yandex va arăta astfel: gazdă: numele site-ului + domeniu de prim nivel; iar pentru Google - site: nume site + domeniu;
- folosind servicii speciale automate.
Verificarea indexării
Acest lucru se poate face folosind:
- operatorii motoarelor de căutare - caută în ajutor sau;
- servicii servicii speciale, de exemplu rds bar;
Cum să accelerezi indexarea site-ului
Viteza cu care apare materialul nou în rezultatele căutării depinde de cât de repede roboții efectuează indexarea și cu cât publicul țintă va ajunge mai repede pe site.
Pentru a accelera indexarea de către motoarele de căutare, trebuie să urmați mai multe recomandări.
- Adăugați un site la un motor de căutare.
- Umpleți în mod regulat proiectul cu conținut unic și util.
- Navigarea prin site ar trebui să fie convenabilă, accesul la pagini nu trebuie să depășească 3 clicuri din pagina principală.
- Plasați resursa pe găzduire rapidă și de încredere.
- Configurați corect robots.txt: eliminați restricțiile inutile, blocați paginile de servicii de la indexare.
- Verificați erorile, numărul de cuvinte cheie.
- Faceți linkuri interne (linkuri către alte pagini).
- Postați linkuri către articole pe rețelele sociale și marcaje sociale.
- Creați o hartă a site-ului, sau chiar două, una pentru vizitatori și una pentru roboți.
Cum să blochezi un site de la indexare
Blocați indexarea unui site - interziceți roboților de căutare accesul la site, la unele dintre paginile acestuia, la o parte din text sau imagine. Acest lucru se face de obicei pentru a vă ascunde de accesul public informatii secrete, pagini tehnice, site-uri la nivel de dezvoltare, pagini duplicate etc.
Puteți face acest lucru în mai multe moduri:
- Folosind robots.txt, puteți împiedica indexarea unui site sau a unei pagini. Pentru a face acest lucru, la rădăcina site-ului este creat un document text, care stabilește regulile pentru roboții motoarelor de căutare. Aceste reguli constau din două părți: prima parte (User-agent) indică destinatarul, iar a doua (Disallow) interzice indexarea oricărui obiect.
De exemplu, interzicerea indexării întregului site pentru toți roboții de căutare arată astfel:
Agent utilizator: *
Nu permite: /
- Folosind metaeticheta robots, care este considerată cea mai corectă modalitate de a bloca indexarea unei pagini. Folosind etichetele noindex și nofollow, puteți împiedica roboții oricăror motoare de căutare să indexeze un site, o pagină sau o parte a textului.
O intrare pentru a dezactiva indexarea unui întreg document ar arăta astfel:
Puteți crea o interdicție pentru un anumit robot:
Ce afectează indexarea în timpul promovării?
Datorită indexării, site-urile sunt incluse în motorul de căutare. Cu cât conținutul este actualizat mai des, cu atât se întâmplă mai repede, deoarece roboții vin mai des pe site. Acest lucru are ca rezultat un clasament de căutare mai ridicat.
Indexarea site-ului în motoarele de căutare oferă un aflux de vizitatori și contribuie la dezvoltarea proiectului.
Pe lângă conținut, roboții evaluează traficul și comportamentul vizitatorilor. Pe baza acestor factori, ei trag concluzii despre utilitatea resursei, vizitează site-ul mai des, ceea ce îl ridică pe o poziție superioară în rezultatele căutării. În consecință, traficul crește din nou.
Indexarea este proces important pentru a promova proiecte. Pentru ca indexarea să aibă succes, roboții de căutare trebuie să se asigure că informațiile sunt utile.
Algoritmii pe care ii folosesc motoarele de cautare se schimba constant si devin mai complexi. Scopul indexării este de a introduce informații în baza de date a motorului de căutare.
Din mai multe motive, motoarele de căutare nu indexează toate paginile unui site sau, dimpotrivă, le adaugă pe cele nedorite la index. Drept urmare, este aproape imposibil să găsești un site care să aibă același număr de pagini în Yandex și Google.
Dacă discrepanța nu depășește 10%, atunci nu toată lumea îi acordă atenție. Dar această poziție este valabilă pentru site-urile media și de informare, când pierderea unei mici părți din pagini nu afectează traficul total. Dar pentru magazinele online și alte site-uri comerciale, absența paginilor de produse în căutare (chiar și una din zece) reprezintă o pierdere de venit.
Prin urmare, este important să verificați indexarea paginilor din Yandex și Google cel puțin o dată pe lună, să comparați rezultatele, să identificați ce pagini lipsesc în căutare și să luați măsuri.
Problemă cu monitorizarea indexării
Vizualizarea paginilor indexate nu este dificilă. Acest lucru se poate face prin încărcarea rapoartelor în panouri pentru webmasteri:
- („Indexare” / „Pagini în căutare” / „Toate paginile” / „Descărcați tabel XLS / CSV”);
Capacitățile instrumentului:
- verificarea simultană a paginilor indexate în Yandex și Google (sau într-un singur PS);
- capacitatea de a verifica toate adresele URL ale site-ului simultan prin;
- Nu există limită pentru numărul de adrese URL.
Particularitati:
- lucrați „în cloud” - nu este nevoie să descărcați și să instalați software sau pluginuri;
- încărcarea rapoartelor în format XLSX;
- notificare prin e-mail despre încheierea colectării datelor;
- stocarea rapoartelor pentru un timp nelimitat pe serverul PromoPult.