Индексиране на страници. Бързо индексиране на сайта от търсачките "Google" и "Yandex"

Всеки уеб администратор знае, че за да може хората да започнат да идват от търсачките, индексирането му е необходимо. За какво представлява индексирането на сайта, как се провежда и какво е значението му, ще разгледаме тази статия.

Какво представлява индексирането?

Така че думата "индексация" само по себе си означава да влезете в регистъра на нещо, преброяване на наличните материали. Същият принцип се прилага и при индексирането на сайтове. Всъщност този процес може да се нарече и въвеждането на информация за интернет ресурси в базата данни на търсачките.

По този начин, веднага след като потребителят натисне следващата фраза в полето за търсене на Google, скриптът ще му върне резултата, включително заглавието на сайта Ви и краткото му описание, което виждаме по-долу.

Как се извършва индексирането?

Самата индексация ("Yandex" е, или Google - няма значение) е съвсем проста. Цялата мрежа от интернет, съсредоточена върху базата на IP адреси, която е търсачка, сканира мощни роботи - "паяци", които събират информация за вашия сайт. Всеки от тях има огромен брой търсачки и работи автоматично 24 часа в денонощието. Тяхната задача - да отидете на сайта си и да "прочетете" цялото съдържание на него, докато правите данните в базата данни.

Следователно, на теория, индексирането на сайт зависи малко от собственика на ресурса. Решаващ фактор тук е търсене робот, който идва на сайта и го изследва. Това влияе върху това колко бързо се показва сайтът Ви в резултатите от търсенето.

Условия за индексиране?

Разбира се, за всеки уеб администратор е полезно ресурсът му да се появи в резултатите от търсенето възможно най-скоро. Това ще засегне, първо, времето на оттеглянето на обекта до първите места и, второ, когато започват първите етапи на монетизация на сайта. По този начин, колкото по-рано търсещият робот "ухапе" всички страници от вашия ресурс, толкова по-добре.

всеки търсачката има собствен алгоритъм за въвеждане на данни в сайтове в своята база данни. Например, индексирането на страниците в Yandex се извършва на етапи: роботите непрекъснато сканират сайтовете, след което организират информацията, след което се извършва така наречената "актуализация", когато всички промени влязат в сила. Редовността на такива събития не се установява от компанията: те се провеждат на всеки 5-7 дни (по правило), но могат да бъдат извършени за 2 и 15 дни.

В този случай индексирането на сайта в Google върви по друг модел. В тази търсачка тези "актуализации" (актуализации на базата данни) се провеждат редовно, в този случай всеки път, когато роботите въвеждат информация в базата данни и след това се поръчват на всеки няколко дни, това не е необходимо.

Въз основа на гореизложеното можем да направим следното заключение: страниците в Yandex се добавят чрез 1-2 "актуализации" (т.е. за средно 7-20 дни), а в Google това може да се случи много по-бързо - буквално на ден.

В този случай, разбира се, всяка търсачка има свои особености за това как се извършва индексирането. "Yandex", например, има т.нар. "Fastboat" - робот, който може да изведе данните след няколко часа. Въпреки това, не е лесно да стигнете до ресурса си: тя се отнася предимно до новини и различни събития от висок профил, които се развиват в реално време.

Как да стигнем до индекса?

Отговорът на въпроса как да записвате сайта си в индекса на търсачката е едновременно прост и сложен. Индексиране на страници - е природен феномен, а ако дори не си мислиш за него, просто, да речем, стартирайте блога си, постепенно се пълни с информация - търсачките с течение на времето велик "поглъщат" съдържанието си.

Друго нещо е, когато трябва да ускорите индексирането на страниците, например ако имате мрежа от така наречените "спътници" (сайтове, които продават връзки или реклами, качеството на които обикновено е по-лошо). В този случай трябва да предприемете мерки, за да сте сигурни, че роботите са забелязали вашия сайт. Най-често срещаните са следните: добавяне на URL адрес към сайт в специален формуляр (наречен "AddUrl") - пускане на адреса на ресурса по референтни директории - добавяне на адрес за запаметяване на директории и много други. Относно как функционира всеки един от тези методи, има многобройни дискусии по форумите за SEO. Както показва практиката, всеки случай е уникален и е по-трудно да се открият причините защо един сайт е индексиран за 10 дни, а друг за 2 месеца е по-труден.

Как да ускорим удара в индекса?

Независимо от това, логиката, чрез която можете да го направите така, че сайтът да стигне до индекса по-бързо, се основава на разположението на връзката върху него. По-специално, ние говорим за Поставяне на URL към свободен и обществени обекти (отметки, директории, блогове, форуми) - Купи връзки на големи и популярни сайтове (с помощта на Sape Exchange, например) - както и добавянето на карта на сайта във формата addURL. Може би има други методи, но тези, които вече са изброени, могат да бъдат наречени безопасно най-популярни. Спомнете си, че всичко зависи от мястото и късмета на собственика му.

Какви сайтове попадат в индекса?

Според официалната позиция на всички търсачки индексът удря обекти, които преминават поредица от филтри. Какви изисквания се съдържат в последния, никой не знае. Известно е само, че с течение на времето всички от тях са подобрени по такъв начин, че да скриват псевдо-сайтове, създадени за печелене, за продажба на връзки и други ресурси, които не носят полезна информация за потребителя. Разбира се, за създателите на тези сайтове основната задача е да се индексират страниците колкото е възможно повече (за привличане на посетители, продажба на връзки и т.н.).

Какви ресурси са забранени търсачките?

Въз основа на предишна информация можем да заключим кои сайтове най-вероятно няма да бъдат включени в резултатите от търсенето. Същата информация се изразява от официалните представители на търсачките. На първо място, това са сайтове, съдържащи не-уникално, автоматично генерирано съдържание, което не е полезно за посетителите. Тогава следва ресурсите, в които се създава минималната информация за продажбата на връзки и така нататък.

Въпреки това, ако анализирате издаването на търсачки, можете да намерите всички тези сайтове в него. Ето защо, ако говорим за сайтове, които няма да присъстват в издаването, трябва да отбележим не само уникалното съдържание, но и редица други фактори - много връзки, неправилно организирана структура и т.н.

Скриване на съдържанието. Как да предотвратя индексирането на страница?

Търсачките сканират цялото съдържание на сайта. Има обаче техника, чрез която можете да ограничите достъпа на търсещите роботи до определена секция. Това става с помощта на файл robots.txt, на който отговарят "паяците" на търсачките.

Ако поставите този файл в корена на сайта, страниците ще бъдат индексирани според скрипта, който е регистриран в него. По-специално, можете да деактивирате индексирането чрез една команда - Disallow. В допълнение към него, файлът може да посочва и части от сайта, за които ще се прилага тази забрана. Например, за да се предотврати навлизането на целия сайт в индекса, достатъчно е да се укаже една наклонена черта "/" - и да се изключи секцията "shop" от проблема, достатъчно е да посочите такава характеристика във файла: "/ shop". Както можете да видите, всичко е логично и изключително просто. Индексирането на страниците се затваря много лесно. В тази търсачка отидете на страницата си, прочетете robots.txt и не допринасяйте за данни в базата данни. Така че е лесно да манипулирате, за да видите в търсенето тези или други характеристики на сайтовете. Сега нека поговорим за проверката на индекса.

Как мога да проверя индексирането на страница?

Има няколко начина да разберете колко и какви страници присъстват в базата данни "Yandex" или Google. Първата - най-простата - е да зададете съответната заявка във формуляра за търсене. Тя изглежда така: site: domen.ru, където вместо domain.ru предписвате съответно адреса на вашия сайт. Когато направите такова искане, търсачката ще покаже всички резултати (страници), намиращи се на посочения URL адрес. Освен това, в допълнение към простото изброяване на всички страници, можете също да видите общия брой индексирани материали (вдясно от фразата "Брой резултати").

Вторият начин е да проверите индексирането на страницата, като използвате специализирани услуги. Има много от тях сега, можете да го наречете xseo.in и cy-pr.com. На тези ресурси не само можете да видите общия брой страници, но и да определите качеството на някои от тях. Вие обаче имате нужда от това, само ако сте по-компетентни по тази тема. Като правило, това са професионални SEO инструменти.

За "принудителното" индексиране

Бих искал също да напиша малко за така наречената "принудена" индексация, когато човек с различни "агресивни" методи се опитва да насочи сайта си към индекса. Оптимизаторите не препоръчват това.

Търсачките поне като забелязват прекомерната активност, свързана с новия ресурс, могат да въведат в действие някои санкции, които оказват негативно влияние върху състоянието на сайта. Ето защо е по-добре да направите всичко по такъв начин, че индексирането на страниците да изглежда колкото е възможно по-органично, постепенно и гладко.