Svaki webmaster zna da kako bi ljudi počeli posjećivati njegov resurs sa pretraživača, on mora biti indeksiran. O tome šta je indeksiranje sajtova, kako se sprovodi i šta je njegovo značenje, reći ćemo u ovom članku.
Šta je indeksiranje?
Dakle, riječ "indeksiranje" sama po sebi znači unošenje nečega u registar, popis materijala koji su dostupni. Isti princip vrijedi i za indeksiranje stranica. U stvari, ovaj proces se može nazvati i unosom informacija o Internet resursima u bazu podataka pretraživača.
Dakle, čim korisnik unese drugu frazu u Google polje za pretragu, skripta će mu vratiti rezultat, uključujući naslov vaše stranice i njen kratak opis, koji vidimo ispod.
Kako se vrši indeksiranje?
Samo indeksiranje ("Yandex" je, ili Google - ne igra ulogu) je prilično jednostavno. Čitav internet Interneta, fokusiran na bazu podataka ip adresa koje imaju pretraživači, skeniraju moćni roboti - "pauci" koji sakupljajuinformacije o vašem sajtu. Svaki od pretraživača ih ima ogroman broj, a rade automatski 24 sata dnevno. Njihov zadatak je da odu na vašu stranicu i "pročitaju" sav sadržaj na njoj, a pritom unose podatke u bazu podataka.
Shodno tome, u teoriji, indeksiranje sajta ne zavisi mnogo od vlasnika resursa. Odlučujući faktor ovdje je robot za pretraživanje koji dolazi na stranicu i istražuje je. Ovo je ono što utiče na to koliko se brzo vaša stranica pojavljuje u rezultatima pretraživanja.
Uslovi indeksiranja?
Naravno, za svakog webmastera je korisno da se njegov resurs pojavi u rezultatima pretrage što je prije moguće. To će uticati, prvo, na uslove dovođenja sajta na prve pozicije, i, drugo, kada počnu prve faze monetizacije sajta. Dakle, što prije robot za pretraživanje "pojede" sve stranice vašeg resursa, to bolje.
Svaki pretraživač ima sopstveni algoritam za unos podataka o sajtu u svoju bazu podataka. Na primjer, indeksiranje stranica u Yandexu provodi se u fazama: roboti neprestano skeniraju web stranice, a zatim slažu informacije, nakon čega dolazi do takozvanog „ažuriranja“, kada sve promjene stupe na snagu. Redovnost ovakvih događaja nije utvrđena od strane kompanije: održavaju se jednom svakih 5-7 dana (po pravilu), međutim, mogu se održati i 2 i 15 dana unaprijed.
U isto vrijeme, indeksiranje stranice u Google-u slijedi drugačiji model. U ovom pretraživaču se takva „ažuriranja“(baze ažuriranja) redovno odvijaju, stoga svaki put sačekajte dok roboti ne unesu podatke u bazu podataka, a zatimće se naručivati svakih nekoliko dana, nije potrebno.
Na osnovu navedenog možemo izvući sljedeći zaključak: stranice u Yandexu se dodaju nakon 1-2 "ažuriranja" (tj. u prosjeku za 7-20 dana), au Google-u se to može dogoditi mnogo brže - bukvalno za dan.
U isto vrijeme, naravno, svaki pretraživač ima svoje specifičnosti načina na koji se indeksira. Yandex, na primjer, ima takozvani "brzi bot" - robota koji može unijeti podatke u problem za nekoliko sati. Istina, nije ga lako natjerati da posjeti vaš resurs: to se uglavnom odnosi na vijesti i razne događaje visokog profila koji se razvijaju u realnom vremenu.
Kako ući u indeks?
Odgovor na pitanje kako indeksirati svoju web stranicu na pretraživačima je i jednostavan i složen. Indeksiranje stranica je prirodna pojava, a ako o tome i ne razmišljate, već samo, recimo, zadržite svoj blog, postepeno ga popunjavajući informacijama, pretraživači će vremenom savršeno "progutati" vaš sadržaj.
Druga stvar je kada trebate ubrzati indeksiranje stranica, na primjer, ako imate mrežu takozvanih "satelita" (stranice dizajnirane za prodaju linkova ili postavljanje oglasa, čija je kvaliteta obično lošija). U tom slučaju morate poduzeti mjere kako bi roboti primijetili vašu stranicu. Sljedeće se smatra uobičajenim: dodavanje URL-a web-mjesta u poseban obrazac (on se zove "AddUrl"); pokretanje adrese resursa kroz direktorije veza; dodati adresu u imenikebookmarks i još mnogo toga. Na SEO forumima postoje brojne rasprave o tome kako svaka od ovih metoda funkcionira. Kao što praksa pokazuje, svaki slučaj je jedinstven i teško je preciznije pronaći razloge zašto je jedna stranica indeksirana za 10 dana, a druga za 2 mjeseca.
Kako ubrzati ulazak u indeks?
Međutim, logika koja stoji iza bržeg ulaska stranice u indeks je zasnovana na povezivanju na nju. Konkretno, govorimo o postavljanju URL-ova na besplatnim i javnim sajtovima (bookmarks, direktorijumi, blogovi, forumi); o kupovini linkova na velikim i popularnim stranicama (pomoću Sape burze, na primjer); kao i dodavanje mape sajta u addURL obrazac. Možda postoje i druge metode, ali one koje su već navedene mogu se sa sigurnošću nazvati najpopularnijim. Podsjetimo, generalno, sve zavisi od stranice i sreće njenog vlasnika.
Koje stranice su indeksirane?
Prema zvaničnom stavu svih pretraživača, sajtovi koji prolaze kroz niz filtera ulaze u indeks. Niko ne zna koje zahtjeve sadrži potonji. Poznato je samo da se vremenom svi oni poboljšavaju na način da filtriraju pseudo-stranice stvorene za zaradu prodajom linkova i drugih resursa koji ne nose korisne informacije za korisnika. Naravno, za kreatore ovih stranica glavni je zadatak da indeksiraju stranice što je više moguće (da privuku posjetitelje, prodaju linkove itd.).sljedeći).
Koje resurse pretraživači zabranjuju?
Na osnovu prethodnih informacija, možemo zaključiti koje stranice najvjerovatnije neće ući u SERP. Istu informaciju iznose i zvanični predstavnici pretraživača. Prije svega, to su stranice koje sadrže neunikatan, automatski generiran sadržaj koji nije koristan za posjetitelje. Zatim slijede resursi u kojima postoji minimum informacija, kreirani za prodaju linkova i tako dalje.
Tačno, ako analizirate rezultate pretraživača, u njemu možete pronaći sve ove stranice. Stoga, ako govorimo o sajtovima koji neće biti prisutni u rezultatima pretrage, treba napomenuti ne samo neunikatan sadržaj, već i niz drugih faktora – mnogo linkova, nepravilno organizovanu strukturu i tako dalje.
Skrivanje sadržaja. Kako onemogućiti indeksiranje stranica?
Tražilice indeksiraju sav sadržaj na stranici. Međutim, postoji tehnika pomoću koje možete ograničiti pristup robotima za pretragu određenom dijelu. Ovo se radi pomoću datoteke robots.txt, na koju reaguju "pauci" pretraživača.
Ako se ova datoteka postavi u korijen stranice, indeksiranje stranica će se nastaviti prema skripti koja je u njoj napisana. Konkretno, možete onemogućiti indeksiranje pomoću jedne naredbe - Disallow. Osim toga, fajl može specificirati i dijelove stranice na koje će se primjenjivati ova zabrana. Na primjer, da biste zabranili indeks cijele stranice, dovoljno je navestijedna kosa crta "/"; a da biste isključili dio “shop” iz rezultata pretraživanja, dovoljno je navesti sljedeću karakteristiku u vašem fajlu: “/shop”. Kao što vidite, sve je logično i krajnje jednostavno. Indeksiranje stranica se vrlo lako zatvara. U isto vrijeme, roboti za pretraživanje posjećuju vašu stranicu, čitaju robots.txt i ne unose podatke u bazu podataka. Tako možete lako manipulirati da biste vidjeli određene karakteristike stranica u pretrazi. Sada razgovarajmo o tome kako se indeks provjerava.
Kako mogu provjeriti indeksiranje stranica?
Postoji nekoliko načina da saznate koliko i koje stranice su prisutne u Yandex ili Google bazi podataka. Prvi - najjednostavniji - je postaviti odgovarajući zahtjev u obrazac za pretragu. To izgleda ovako: site:domen.ru, gdje umjesto domen.ru pišete, odnosno adresu svoje stranice. Kada podnesete takav zahtjev, pretraživač će prikazati sve rezultate (stranice) koji se nalaze na navedenom URL-u. Štaviše, pored jednostavnog navođenja svih stranica, možete vidjeti i ukupan broj indeksiranih materijala (desno od fraze "Broj rezultata").
Drugi način je provjeriti indeksiranje stranica korištenjem specijalizovanih servisa. Sada ih ima veliki broj, a mogu se nazvati xseo.in i cy-pr.com. Na takvim resursima ne samo da možete vidjeti ukupan broj stranica, već i odrediti kvalitetu nekih od njih. Međutim, ovo vam je potrebno samo ako ste dublje razumjeli ovu temu. Po pravilu, ovo su profesionalni SEO alati.
O "prisilnom" indeksiranju
Želeo bih da napišem i malo o tzv"Prisilno" indeksiranje, kada osoba pokušava da svoju stranicu uvuče u indeks koristeći različite "agresivne" metode. Optimizatori ne preporučuju ovo da radite.
Tražilice, u najmanju ruku, primjećujući pretjeranu aktivnost povezane s novim resursom, mogu nametnuti neku vrstu sankcija koje negativno utiču na stanje stranice. Stoga je bolje učiniti sve kako bi indeksiranje stranica izgledalo što organskije, postepeno i glatko.
