Какво влияе върху индексирането на даден сайт в търсачките

Анализ на наличността на ресурси
Ние настояваме всеки да започне пътуването си с оценка на цялостното представяне и функционалност на сайта. Ако търсачките или вашите посетители не получат достъп до ресурса или до някои части от него, това е алармен сигнал, че нещо се е объркало.
Ето какво първо проверяваме, за да избегнем такива точки на спиране.
Файлът robots.txt, обичан от всички нас, се използва за ограничаване на достъпа на роботи за търсене до секции от вашия сайт.
Доста лесно е да го проверите ръчно, като се уверите, че ограниченията са зададени правилно, без да отказвате достъп на всички и всички до важни раздели на сайта. Услуга Yandex - Уеб администраторът може да ви помогне с проверката на robots.txt.
За целта са ви необходими:
отидете по пътя "инструменти" - "robotstxt"
въведете изходния код на файла в прозореца, който се отваря
вземете данни за проверка и направете корекции

HTTP инспекция
Това е следващата стъпка в проверката на вашата наличност. И това е важно, защото няма по-лошо място за посетител или робот за търсене да не стигне до страница със злополучни грешки в диапазона 4xx и 5xx (например известната софтуерна грешка 404).
Ако по време на корекцията настроите пренасочване, не забравяйте това. Също така проверете два пъти кода на състоянието 301 HTTP, който е отговорен за преместването на URL адреса към нови местоположения. Адресът на новото местоположение на ресурса се посочва в полето Location (в заглавката на получения HTTP протоколен пакет). И ако сте го въвели правилно (и където е необходимо), роботът ще намери преместените променени URL адреси без никакви проблеми.

XML карта на сайта
XML Sitemap на вашия сайт предоставя роботи за търсенелогично и бързо движение през вашия ресурс. Това е важно, тъй като при закъснение оценката на състоянието на вашия сайт ще бъде много по-бавна, а това определено ще се отрази на класирането му.

Ето няколко важни въпроса, на които трябва да отговорите, за да разберете състоянието на вашата карта на сайта в момента:
Представен ли е като добре оформен XML документ?
Следва ли протокола Sitemap?
Можете ли да намерите сами, без карта на сайта, страници, които не се показват в нея по някаква причина?
Има ли страници във вашата карта на сайта, които не принадлежат към конкретен дъщерен раздел или подраздел?
Защо попитахме за това? Всичко е просто.
Роботите за търсене, проверяващи вашия сайт и неговата структура, предполагат определен модел на картата на сайта, без да намерят кой, те могат да се изгубят и да не успеят да проверят по правилния, познат и най-важното, пълноценен начин, след като са прегледали всички кътчета и кътчета.
Ако във вашата карта има страници, които нямат дъщерни секции, това са осиротели връзки, за които трябва да се погрижите. Струва си да им намерите място в архитектурата на сайта и да се уверите, че всеки има поне една вътрешна връзка.
Архитектура на сайта
Архитектурата на сайта определя бъдещата му структура надлъжно и напречно: вертикалната дълбочина (брой нива) и хоризонталната структура на ресурса.
Основният критерий за оценка на качеството на архитектурата е броят на кликванията, необходими за преминаване от главната страница към други важни секции.
Втората точка е оценката на йерархията на сайта. Тъй като най-важните страници задължително трябва да имат приоритет в архитектурата на целия сайт.
В идеалния случай трябва да се стремите към по-плоска архитектура на сайта, която използва както вертикални, така ихоризонтални строителни елементи.
Но дори най-добре структурираните ресурси могат да бъдат оценени негативно от роботите за търсене, ако доверието им е подкопано от навигационни елементи, които блокират достъпността на сайта. Сега говорим за Flash и Jvascript.
Изпълнение на сайта
Този работен блок не може да бъде пропуснат. Той трябва да финализира проверката за достъпност на вашия сайт, като ви каже кои показатели се нуждаят от подобрение.
Всички потребители са ограничени в количеството внимание, което са готови да отделят на един ресурс. И ако сайтът ви не се зарежда добре, тогава рискът от загуба на клиенти става максимален. Въпреки че роботите за търсене нямат човешката концепция за „търпение“, те също имат ограничено време за изследване на един ресурс в Интернет. Какво означава това - ако вашият ресурс се забави, има риск да загубите посетители и да проверявате от търсачките по-рядко.
Можете да оцените ефективността на даден сайт, като използвате десетки инструменти, писахме за това по-подробно в последната ни статия за самоанализ на сайтове. Можете да се обърнете, да речем, към ресурса Sitespeed или неговите аналози, но след проверка най-важното за вас ще бъде да оцените ситуацията и степента на нейното пренебрегване. И, разбира се, коригирайте това, което ви казват индикаторите

Анализ на индексирането на сайта в търсачките
команда "site:".
Повечето търсачки използват тази команда за търсене на съдържание в конкретен ресурс.
Можете да го използвате, за да получите груба оценка на броя страници, които са били индексирани от дадена търсачка. Например, ако търсим в Google оценка на seomoz.org, виждаме, че търсачката е индексирала приблизително 60 900 страници:
Разбира се, тази цифра е приблизителна. Но дори грубата оценка понякога може да бъде много ценна. В крайна сметка това ще ви даде разбиране за по-нататъшния сценарий, който може да бъде един от трите:
1. Индексът и действителните резултати са приблизително еквивалентни - това е идеален сценарий, показващ, че търсачките успешно индексират всички страници на вашия сайт.
2. Броят на индексите е значително по-малък от действителния брой страници - този сценарий ни казва, че търсачките по някаква причина не са индексирали цял куп от вашите страници. В този случай е важно да разберете дали сте идентифицирали проблема по време на проверката на наличността на сайта - и ако е така, тогава го коригирайте чрез получените данни за грешка. Ако не, тогава ще трябва да извършите цялостен одит на сайта, идентифицирайки проблема и спирайки точките при индексиране. И като начало, за да разберете дали определен брой страници са забранени или наказани от търсачките по някаква причина.
3. Броят на индексите е значително по-висок от действителния брой страници - в този случай, като правило, говорим за факта, че вашето съдържание се дублира (например една страница е достъпна през няколко входни точки или две страници имат много подобно съдържание).
Когато на вашия сайт се появи дублирано съдържание, ботовете за търсене се опитват да определят коя страница е оригиналният източник и коя е негов дубликат. И, уви, не може да направи това със 100% точност, така че често грешната страница, която е потенциално важна за вас, попада в резултатите от търсенето. Освен това, ако на вашия сайт има твърде много дубликати, роботът за търсене може скоро да спре да посещава сайта ви като цяло, без да оценява съдържанието му като уникално.
И разбира се, друг проблем с появата на дубликати може да бъде кражбата на вашето съдържание.(Надяваме се, че не е обратното). И ако потенциалният крадец има успешен ресурс от гледна точка на търсачките, тогава, уви, той може да стане номер едно, което допълнително ще повлияе на вашите позиции в резултатите от търсенето.
Как мога да намеря дубликати в моя ресурс?
Първо, винаги можете да се обърнете към Yandex.Webmaster или негов еквивалент в Google, следвайки прост път: „Оптимизация“ - „HTML оптимизация“.
Или използвайте лентата за търсене и командата "site:".
сайт: yoursite.ru - ще покаже страниците на сайта "yoursite.ru", които са в индекса на търсачката (общ индекс).
сайт: yourswit.ru/& - ще покаже страниците на сайта "yoursite.ru", участващи в търсенето (основен индекс).
По този начин ще можете да видите и идентифицирате неинформативни страници и частични дубликати, които не са включени в търсенето и може да попречат на страниците от основния индекс да се класират по-високо.
След като идентифицирате всички дублиращи се страници, можете да се отървете от тях, като промените двигателя на сайта или като добавите маркер „rel=canonical“ към заглавията на страниците си, като например: http://www.example.com/product.php?item=swedish-fish" />
Какво да направите, ако вашият сайт бъде наказан от търсачките?
Наистина се надяваме, че тази съдба ще ви подмине и ще имате време да извършите основен независим одит на вашия ресурс навреме или да потърсите помощ от специалисти, например нашия екип от анализатори и SEO специалисти.
Но ако изведнъж се сблъскате с факта, че вашият ресурс все пак е получил предупреждение или дори глоба, следвайте съветите по-долу.
Стъпка 1: Уверете се, че наистина сте били наказани
В повечето случаи вашето наказание и наказание ще бъдат очевидни. Вашите страници ще бъдат обществено достояние, но в същото времеда бъдат деиндексирани. И известие за полученото наказание ще бъде изпратено до вашия акаунт в Yandex или Google Webmaster. Друг начин да хванете наказанието е да забележите значителна загуба на трафик към сайта навреме.
Стъпка 2: Определете причината(ите) за наказанието
След като сте сигурни, че сайтът е санкциониран, трябва да определите причината за санкцията. Ако получите официално известие от търсачките, този етап може да се счита за преминат.
Но, за съжаление, ако вашият сайт е станал жертва на алгоритмична актуализация от робот за търсене, тогава ще трябва да играете на детектив. Тъй като в момента на промяна на алгоритъма на търсачките, много сайтове рискуват да бъдат наказани, без да знаят какво точно са сгрешили.
Стъпка 3: Коригирайте аномалиите на сайта
Разбира се, по-лесно е да се каже, отколкото да се направи. Тази стъпка е доста трудна, но не търпи отлагане.
След като определите защо вашият сайт е бил санкциониран, трябва методично да коригирате нежеланото поведение и грешките, които са причинили забраната ви. Може да има много причини, за съжаление не можем да ги опишем всички тук и сега, тъй като колко сайтове и грешки - толкова много произтичащи ситуации.
Но винаги сме готови да предложим нашата помощ при консултиране или коригиране на нарушения, ако осъзнаете, че не сте готови да преминете през това сами.
Стъпка 4: Изпратете заявка за преглед на присъдата
След като сте отстранили всички проблеми, трябва да поискате преглед от търсачките, за да премахнете наказанието. И го направете възможно най-бързо, за да не загубите още повече точки в класирането.
Въпреки това, бъдете внимателни: ако вашият сайт всъщност не е нарушил нищо, но, както предположихме, е станал жертва на актуализиране на алгоритмите на търсачката, тогаваискането за преразглеждане ще бъде неефективно, тъй като така или иначе ще трябва да изчакате края на актуализацията.
Обобщаване
Всеки елемент е важно звено в цялостната верига за SEO одит. Можете още веднъж да ги прегледате от и до в Азбуката на SEO или в Инструкциите за самостоятелна оптимизация на сайта, за да анализирате изчерпателно всички аспекти на оптимизацията.