Błędy indeksowania – jak naprawić?

Błędy indeksowania w kontekście stron internetowych to wszelkie przypadki wystąpienia jakichkolwiek problemów przy pobieraniu konkretnej podstrony serwisu internetowego przez robota wyszukiwarki (inne nazwy: crawler, Googlebot). Wyszukiwarka, aby mogła porównywać jakość i treść stron internetowych (co pozwala zwracać jej użytkownikom trafne wyniki wyszukiwania), musi je odwiedzić i zapisać w swojej pamięci aby mieć coś w rodzaju „podglądu Internetu”. Skąd bierze do nich adresy? – z linków umieszczonych na innych stronach internetowych oraz z linków wewnętrznych w obrębie tej samej witryny.

Podczas wizyt, które odbywają się w regularnych odstępach czasu (a ich częstotliwość jest uzależniona od popularności i wielkości witryny) następuje aktualizacja wszystkich treści i wykrywanie nowych za pomocą linków z atrybutami src i href – czynności te składają się na cały proces, który nazywamy indeksowaniem.

Jak sprawdzić, czy strona powoduje błędy indeksowania?

Błędy można podejrzeć w Google Search Console (dawniej: Narzędzia dla Webmasterów). Wybierając w menu „Pobieranie” można przejść do błędów indeksowania.

Wybierając tę opcję dla naszej aktywnej witryny, zostanie wyświetlony panel z błędami indeksowania. Jeżeli nasza strona posiada błędy indeksowania będzie to wyglądać mniej-więcej tak jak na poniższej ilustracji. Jak widać na mojej stronie mamy 10 pozornych błędów indeksowania i aż 83 błędy 404, które są konsekwencją nieprawidłowego wdrożenia nowej wersji strony z jesieni ubiegłego roku i kilku innych niedociągnięć.

W nowej wersji Google Search Console wygląda to tak:

Skąd się biorą błędy indeksowania?

Najczęstszym błędem indeksowania jest błąd nie znaleziono (kod 404), który jest konsekwencją

• usunięcia podstrony
• umieszczenia gdzieś nieprawidłowego linku do nieistniejącej strony
• zmianę adresu już zindeksowanej strony
• modernizację całej strony internetowej
• nieprawidłowe działania w utrzymaniu np. zmiana hostingu, domeny, wdrożenie SSL itp…
• nadużywania tagów i kategorii – taka praktyka powoduje problemy w utrzymaniu porządku a usunięte tagi powodują błędy 404
• źle napisanych aplikacji i CMSów(błąd przy routowaniu adresów URL)
• źle napisanych szablonów do WordPressa
• przekierowania na stronę 404, która nie zwraca nagłówka 404

Zapobieganie wystąpienia błędów indeksowania

Jak wiadomo „lepiej zapobiegać niż leczyć” dlatego:

1. Jeżeli nie znasz się na przekierowywaniu w .htaccess, zamiast usuwać podstronę / artykuł / produkt podmień treść na coś w rodzaju
   

   Ten artykuł jest już nieaktualny zapraszamy na aktualną wersję lub odpowiednik który znajdziesz pod tym linkiem

2. Jeżeli musisz usunąć podstronę, przekieruj ją do strony z odpowiednią kategorią bądź na inną, która jest najbardziej zbliżona tematycznie
3. Usuń wpis o nieistniejącej podstronie z map stron w tym z sitemap.xml, która jest odwiedzana przez robota
4. Usuwaj nieprawidłowe linki lub linki do nieaktualnych podstron ze swojej strony
5. Wklejając link do swojej strony na innej witrynie, która będzie widoczna publicznie, upewnij się czy nie popełniłeś literówki
6. Sprawdzaj swoją stronę w poszukiwaniu błędnych linków tzw. „dead links lub broken links” – i usuwaj wykryte nieprawidłowości (wpisz w wyszukiwarkę „broken link checker” lub coś w tym stylu)
7. Ostrożnie dokonuj migracji na nowe wersje strony internetowe i powierzaj usługi webmasterskie sprawdzonym specjalistom
8. Sprawdź, czy dopisanie przypadkowego ciągu znaków do adresu URL wybranej podstrony zwraca nagłówek 404, jeżeli nie, trzeba poprawić CMS (aby wyeliminować te „pozorne 404”)

Naprawianie błędów indeksowania

Jak wiadomo, każdemu może zdarzyć się zaniedbanie, dlatego jeżeli wyczerpiemy działania zapobiegawcze i błędy już pojawią się w konsoli, czas podjąć działania naprawcze:

1. Przekieruj nie istniejące strony na strony najbardziej zbliżone tematycznie, ewentualnie przekieruj do odpowiedniego tematycznie tagu lub kategorii
2. Odtwórz artykuły lub produkty na swoim sklepie internetowym, które zostały omyłkowo usunięte

Jak przekierować podstronę na inną podstronę?

Google podpowiada jakich stron brakuje, listując URLe strony pod wykresem ich ilości na osi czasu. Adresy można skopiować bądź wygenerować sobie listę w formacie CSV/XML. Teraz wystarczy dopisać przekierowania do pliku .htaccess (najlepiej na końcu) według schematu:

Redirect 301 względna/ścieżka/do-nieprawidłowego/adres-url.html https://domena.pl/prawidłowy/link.html

U mnie wyglądało to tak:

Redirect 301 /oferta/wielojezycznosc-i-tlumaczenia/ https://mansfeld.pl/oferta/seo-teksty-ux/
Redirect 301 /portfolio-view/xgate-2/ https://mansfeld.pl/realizacje/
Redirect 301 /portfolio-view/chateo/ https://mansfeld.pl/realizacje/

W pierwszej linii przekierowałem podstronę oferty (z poprzedniej wersji witryny) na odpowiednik w jej nowszej wersji. W dwóch następnych liniach przekierowuję ruch do powiązanej tematycznie ale nadrzędnej podstrony (z katalogiem portfolio) ze starych podstron konkretnych prac (które były prezentowane na w poprzedniej odsłonie mojej strony www). Jak widać odnieśliśmy sukces:

Jak dobierać przekierowania i dlaczego trzeba trzymać się „tematyki”

Odpowiedź jest prosta: dla uzyskania możliwie najwyższej jakości doświadczeń użytkownika. Na nic nam przekierowanie, które z powodu braku relewantności, ostatecznie i tak skończy się wyjściem użytkownika z naszej witryny. Takie zachowanie odnotowane przez wyszukiwarkę niekorzystnie wpływa na jej pozycję. Druga sprawa to jakość linku – im bardziej wyraźne powiązanie tematyczne pomiędzy stronami, tym bardziej link „się liczy” w pozycjonowaniu. Piałem o tym w poradniku jak pozyskiwać linki zwrotne.

Dlaczego błędy indeksowania są tak szkodliwe?

To można wydedukować z poprzedniego punktu. Przede wszystkim marnujemy potencjał strony internetowej – ktoś wchodząc na stronę natrafia na błąd, który prawdopodobnie skończy się wyjściem. Błędy indeksowania to także ujemny sygnał jakościowy – naprawienie ich poprawi pozycje w wyszukiwarce. Link prowadzący donikąd też nie przekazuje w całości swojej wartości do pozycjonowania. Jak szkodzi to na wiele sposobów.

Podsumowanie

Mam nadzieję, że wyjaśniłem czym są błędy indeksowania i na czym polega ich ujemny wpływ na jakość naszej strony www. Pamiętaj, że nieumiejętna edycja pliku .htaccess może wyrządzić wiele szkód i powinny się tym zająć osoby doświadczone. Jeżeli interesuje cię taka tematyka, czytaj więcej w mojej liście najczęstszych błędów w SEO.

Źródła:

https://support.google.com/webmasters/answer/35120?visit_id=1-636660460770167038-2703660974&rd=1#common_url_errors

https://support.google.com/webmasters/answer/2409443?ctx=MCE&ctx=S4