Każdy webmaster wie, że aby ludzie mogli zacząć odwiedzać jego zasób z wyszukiwarek, musi on zostać zindeksowany. O tym, czym jest indeksowanie witryny, jak jest przeprowadzane i jakie jest jego znaczenie, powiemy w tym artykule.
Co to jest indeksowanie?
Tak więc samo słowo „indeksowanie” oznacza wprowadzenie czegoś do rejestru, spisu dostępnych materiałów. Ta sama zasada dotyczy indeksowania witryn. W rzeczywistości proces ten można również nazwać wprowadzaniem informacji o zasobach internetowych do bazy wyszukiwarek.
Tak więc, gdy tylko użytkownik wprowadzi kolejną frazę w polu wyszukiwania Google, skrypt zwróci mu wynik, w tym tytuł Twojej witryny i jej krótki opis, który widzimy poniżej.
Jak przebiega indeksowanie?
Sam indeksowanie ("Yandex" jest lub Google - nie odgrywa żadnej roli) jest dość proste. Cała sieć Internetu, skupiająca się na bazie adresów IP, które posiadają wyszukiwarki, jest skanowana przez potężne roboty - „pająki”, które zbierająinformacje o Twojej witrynie. Każda z wyszukiwarek ma ich ogromną liczbę i działają one automatycznie 24 godziny na dobę. Ich zadaniem jest przejście do Twojej witryny i „odczytanie” całej zawartej na niej treści, jednocześnie wprowadzając dane do bazy danych.
W konsekwencji teoretycznie indeksowanie witryny nie zależy w dużym stopniu od właściciela zasobu. Decydującym czynnikiem jest tutaj robot wyszukiwania, który wchodzi na stronę i ją eksploruje. To wpływa na szybkość wyświetlania witryny w wynikach wyszukiwania.
Indeksowanie terminów?
Oczywiście korzystne dla każdego webmastera jest, aby jego zasoby pojawiały się w wynikach wyszukiwania tak szybko, jak to możliwe. Będzie to miało wpływ, po pierwsze, na warunki doprowadzenia witryny na pierwsze pozycje, a po drugie, kiedy rozpoczną się pierwsze etapy monetyzacji witryny. Dlatego im szybciej robot wyszukiwania „zje” wszystkie strony Twojego zasobu, tym lepiej.
Każda wyszukiwarka ma własny algorytm wprowadzania danych witryny do swojej bazy danych. Na przykład indeksowanie stron w Yandex odbywa się etapami: roboty stale skanują witryny, a następnie porządkują informacje, po czym następuje tak zwana „aktualizacja”, gdy wszystkie zmiany zaczną obowiązywać. Firma nie ustala regularności takich wydarzeń: odbywają się one raz na 5-7 dni (z reguły), jednak mogą się odbywać zarówno z 2, jak i 15-dniowym wyprzedzeniem.
Jednocześnie indeksowanie witryny w Google przebiega według innego modelu. W tej wyszukiwarce takie „aktualizacje” (aktualizacje bazy) odbywają się regularnie, dlatego za każdym razem czekaj, aż roboty wprowadzą informacje do bazy, a następniebędą zamawiane co kilka dni, nie są potrzebne.
Na podstawie powyższego możemy wyciągnąć następujący wniosek: strony w Yandex są dodawane po 1-2 „aktualizacjach” (czyli średnio w ciągu 7-20 dni), a w Google może to nastąpić znacznie szybciej - dosłownie w dzień.
Jednocześnie, oczywiście, każda wyszukiwarka ma swoje cechy charakterystyczne dotyczące sposobu indeksowania. Yandex ma na przykład tak zwanego „szybkiego bota” – robota, który może wprowadzić dane do wydania w kilka godzin. To prawda, że nie jest łatwo zmusić go do odwiedzenia twojego zasobu: dotyczy to głównie wiadomości i różnych głośnych wydarzeń rozwijających się w czasie rzeczywistym.
Jak dostać się do indeksu?
Odpowiedź na pytanie, jak indeksować witrynę w wyszukiwarkach, jest zarówno prosta, jak i złożona. Indeksowanie stron jest naturalnym zjawiskiem i jeśli nawet o tym nie myślisz, ale po prostu, powiedzmy, utrzymuj swój blog, stopniowo wypełniając go informacjami, wyszukiwarki będą z czasem doskonale „połykać” Twoje treści.
Inną rzeczą jest, gdy trzeba przyspieszyć indeksowanie stron, na przykład, jeśli masz sieć tak zwanych „satelitów” (witryny przeznaczone do sprzedaży linków lub umieszczania reklam, których jakość jest zwykle gorsza). W takim przypadku musisz podjąć kroki, aby roboty zauważyły Twoją witrynę. Za powszechne uważa się: dodanie adresu URL witryny do specjalnego formularza (nazywa się to „AddUrl”); uruchamianie adresu zasobu przez katalogi linków; dodaj adres do katalogówzakładki i nie tylko. Na forach SEO toczy się wiele dyskusji na temat działania każdej z tych metod. Jak pokazuje praktyka, każdy przypadek jest wyjątkowy i trudno jest dokładniej znaleźć powody, dla których jedna witryna została zindeksowana w ciągu 10 dni, a druga w ciągu 2 miesięcy.
Jak przyspieszyć wchodzenie do indeksu?
Jednak logika szybszego umieszczania witryny w indeksie opiera się na łączeniu do niej. W szczególności mówimy o ustawianiu adresów URL w witrynach bezpłatnych i publicznych (zakładki, katalogi, blogi, fora); o kupowaniu linków w dużych i popularnych witrynach (np. za pomocą giełdy Sape); a także dodanie mapy witryny do formularza addURL. Być może istnieją inne metody, ale te, które zostały już wymienione, można śmiało nazwać najpopularniejszymi. Przypomnijmy, ogólnie wszystko zależy od strony i szczęścia jej właściciela.
Które witryny są indeksowane?
Zgodnie z oficjalnym stanowiskiem wszystkich wyszukiwarek witryny, które przechodzą przez szereg filtrów, trafiają do indeksu. Nikt nie wie, jakie wymagania zawierają te ostatnie. Wiadomo tylko, że z biegiem czasu wszystkie one poprawiają się w taki sposób, aby odfiltrować pseudo-strony stworzone w celu zarabiania na sprzedaży linków i innych zasobów, które nie niosą przydatnych dla użytkownika informacji. Oczywiście dla twórców tych witryn głównym zadaniem jest jak największe indeksowanie stron (przyciąganie odwiedzających, sprzedawanie linków itp.).dalej).
Jakie zasoby są blokowane przez wyszukiwarki?
Na podstawie poprzednich informacji możemy wywnioskować, które witryny najprawdopodobniej nie zostaną objęte SERP. Te same informacje wyrażają oficjalni przedstawiciele wyszukiwarek. Przede wszystkim są to witryny zawierające nieunikalne, automatycznie generowane treści, które nie są przydatne dla odwiedzających. Po nim następują zasoby, w których jest minimum informacji, stworzone do sprzedaży linków i tak dalej.
Prawda, jeśli przeanalizujesz wyniki wyszukiwarek, możesz znaleźć w nim wszystkie te witryny. Dlatego jeśli mówimy o witrynach, które nie pojawią się w wynikach wyszukiwania, należy zwrócić uwagę nie tylko na nieunikalną treść, ale także na szereg innych czynników – wiele linków, niewłaściwie zorganizowaną strukturę itd.
Ukrywanie treści. Jak wyłączyć indeksowanie stron?
Wyszukiwarki indeksują całą zawartość witryny. Istnieje jednak technika, dzięki której można ograniczyć dostęp robotów wyszukiwania do określonej sekcji. Odbywa się to za pomocą pliku robots.txt, na który reagują „pająki” wyszukiwarek.
Jeśli ten plik zostanie umieszczony w katalogu głównym witryny, indeksowanie stron będzie przebiegać zgodnie ze skryptem, który jest w nim napisany. W szczególności możesz wyłączyć indeksowanie za pomocą jednego polecenia - Disallow. Oprócz tego plik może również określać sekcje witryny, do których ten zakaz będzie miał zastosowanie. Na przykład, aby zabronić indeksowania całej witryny, wystarczy określićjeden ukośnik "/"; i aby wykluczyć sekcję „shop” z wyników wyszukiwania wystarczy podać w swoim pliku cechę: „/shop”. Jak widać, wszystko jest logiczne i niezwykle proste. Indeksowanie stron zamyka się bardzo łatwo. W tym samym czasie roboty wyszukujące odwiedzają Twoją stronę, czytają robots.txt i nie wprowadzają danych do bazy. Możesz więc łatwo manipulować, aby zobaczyć określone cechy witryn w wyszukiwaniu. Porozmawiajmy teraz o tym, jak sprawdzany jest indeks.
Jak mogę sprawdzić indeksowanie stron?
Istnieje kilka sposobów, aby dowiedzieć się, ile i które strony znajdują się w bazie danych Yandex lub Google. Pierwszym - najprostszym - jest ustawienie odpowiedniego zapytania w formularzu wyszukiwania. Wygląda to tak: site:domen.ru, gdzie zamiast domen.ru wpisujesz odpowiednio adres swojej witryny. Gdy złożysz takie żądanie, wyszukiwarka pokaże wszystkie wyniki (strony) znajdujące się pod określonym adresem URL. Co więcej, oprócz prostego wylistowania wszystkich stron, możesz również zobaczyć całkowitą liczbę zindeksowanych materiałów (po prawej stronie wyrażenia „Liczba wyników”).
Drugim sposobem jest sprawdzenie indeksowania stron za pomocą wyspecjalizowanych usług. Jest ich teraz bardzo dużo, od razu można je nazwać xseo.in i cy-pr.com. Na takich zasobach można nie tylko zobaczyć całkowitą liczbę stron, ale także określić jakość niektórych z nich. Jednak potrzebujesz tego tylko wtedy, gdy lepiej rozumiesz ten temat. Z reguły są to profesjonalne narzędzia SEO.
Informacje o „wymuszonym” indeksowaniu
Chciałabym też trochę napisać o tzw. Indeksowanie „wymuszone”, gdy dana osoba próbuje wprowadzić swoją witrynę do indeksu przy użyciu różnych „agresywnych” metod. Optymalizatory nie zalecają tego.
Wyszukiwarki, przynajmniej zauważając nadmierną aktywność związaną z nowym zasobem, mogą nałożyć pewnego rodzaju sankcje, które negatywnie wpływają na stan witryny. Dlatego lepiej zrobić wszystko, aby indeksowanie stron wyglądało jak najbardziej organiczne, stopniowe i płynne.
