Wprowadzenie
W tym odcinku pokażę Wam jak zaplanować i wdrożyć strategię indeksowania Waszej strony w Google. Indeksowanie to jest jeden z pierwszych elementów skutecznego pozycjonowania. Jeżeli Google Was zwyczajnie nie indeksuje, to wszystkie rzeczy związane z SEO, które robicie, a o których czytacie i tak dalej, nie mają w ogóle sensu, bo wyszukiwarka po prostu nie będzie wiedziała o istnieniu tych stron, na których zmiany dokonujecie. Dlatego dziś opowiem Wam, jak do tego podejść, żeby wyszukiwarka wiedziała to, co trzeba i żeby to wpływało na pozytywną ocenę jakości całej Waszej strony, co będzie prowadzić do lepszego ruchu.
Jeżeli macie problemy z widocznością w Google, to jest spora szansa na to, że właśnie elementy związane z indeksowaniem powinny zostać poprawione w pierwszej kolejności. Dlatego zapraszam do części merytorycznej, gdzie rozpracujemy sobie ten temat.
W międzyczasie chciałbym Wam powiedzieć, że na moim kanale znajdziecie solidną dawkę wiedzy o budowaniu widoczności w Google przekazywanej z myślą o osobach odpowiedzialnych za pozyskiwanie klientów. Dlatego zachęcam Was do subskrybowania mojego kanału, bo znajdziecie tutaj sporo informacji o Google z perspektywy Waszych biznesów. A jeśli potrzebujecie pomocy, to zerknijcie do opisu, gdzie dowiecie się czy i jak jestem w stanie Wam pomóc.
Po co w ogóle zarządzać indeksowaniem?
Na starcie zastanówmy się, po co w ogóle zarządzać tym indeksowaniem. Bo teoretycznie to Google sam może sobie tym zarządzić i po części nawet zarządza. Natomiast z perspektywy strony pod kątem SEO to to jest strona, która ma najczęściej wiele podstron, bo na każdą potrzebę potrzebujemy jakiejś osobnej podstrony i tak dalej. Mówiłem o tym w innych odcinkach, możecie sobie to zobaczyć, natomiast tutaj musimy się skupić na tym.
Jeżeli strona ma cztery podstrony, bo takie też są, to oczywiście nie musicie o tym myśleć, ale najprawdopodobniej nie będziecie mieć też potrzeby pozycjonowania takiej strony, więc w ogóle ten temat Was nie dotyczy.
Tak, tam gdzie SEO ma miejsce, najczęściej jest więcej podstron: kilkanaście, kilkadziesiąt, kilkaset, kilka tysięcy i tak dalej. Czasami są to setki tysięcy podstron i tym jakoś trzeba zarządzić, żeby Google skupił się na właściwym miejscu.
I zobaczcie. Jeżeli popatrzymy sobie na taką podstawową strukturę strony, gdzie mamy np. Stronę główną, oznaczymy to strona główna. I tutaj w strukturze są różnego rodzaju podstrony. Oczywiście będzie ich więcej tutaj, to jest tylko taki przykład. I każda z tych stron generuje, powinna generować ruch z jakichś fraz kluczowych. Tak. Ta strona generuje powiedzmy 10 wejść miesięcznie. Ta strona generuje 75 miesięcznie, ta 60, ta, powiedzmy 9, bo to jest mniej ważna i tak dalej. I poszczególne podstrony będą generowały jakieś wejścia z konkretnych fraz kluczowych i ogólnie Google ocenia sobie jakość danej strony na bazie tego, jak strona generuje ruch, jakie fraz, czy te frazy są związane z tematyką strony, czy nie i tak dalej. I nam całej stronie zależy, żeby budować jak najlepszy autorytet domeny. A to robimy przez właśnie budowania widoczności na frazy, które nas interesują.
Które strony wykluczyć z indeksowania?
Niemniej jednak możemy mieć też strony, które są nam potrzebne z jakiegoś powodu, ale nie będą generować ruchu. Na przykład. Dodajemy sobie tutaj kolejną podstronę i niech to będzie po prostu polityka prywatności. Tak, ta strona… praktycznie każdy ją ma. Każdy biznes ma taką stronę. Ale ta strona co do zasady nie powinna generować ruchu. No bo co miałby szukać wasz klient, żeby trafić na waszą politykę prywatności? No nic, tak naprawdę nikt nie szuka polityki prywatności firmy X, a jeżeli szuka, to nie w kontekście biznesowym, więc może lepiej nie wyświetlać się na tą frazę.
Tak więc w ramach Waszego serwisu, Waszej struktury strony są pewnego rodzaju podstrony, które tak naprawdę nie mają szans, nie są widoczne i nie chcemy, żeby były widoczne na jakieś frazy kluczowe. Tak, jeżeli mamy jakiś wpis do portfolio, no to jakie frazy musiałby wpisać klient, żeby do nas trafić? Albo na przykład napisaliśmy artykuł Aktualności, że prezes kupił sobie nowe auto, tak? No i co tam doda? No nic. Albo że kupiliśmy nową maszynę, żeby nie było aż tak prześmiewczo. Albo że kupiliśmy sobie, zainwestowaliśmy w coś tam? Tak. I chodzi o to, że wasi klienci nie wpisują w Google, co teraz kupił sobie prezes, albo dlaczego firma X zrobiła to i to, albo że tutaj teraz jest Wigilia firmowa i tak dalej. Te informacje są zbędne z punktu widzenia Google i nie powinniśmy je pokazywać Google’owi, bo to pokazuje, że te, one nie są na temat waszego biznesu.
Tak więc jak patrzymy globalnie na waszą stronę internetową, to mamy taką sytuację, że pewnego rodzaju strony są indeksowane, chcemy, żeby się indeksowały, chcemy, żeby ludzie na nie trafiali. Strona główna oczywiście też. Pewnego rodzaju strony są na zielono. Chcemy, żeby ludzie na nie trafiały, żeby Google zaindeksował, pokazywał i tak dalej. Ale pewnego rodzaju strony będą też na czerwono. Czyli nie chcemy ich, tego, nie chcemy indeksować, tego nie chcemy indeksować, tego nie chcemy, tego nie chcemy, tak? Ewentualnie to chcemy, to chcemy, to chcemy, tak. I musimy tak naprawdę na poziomie takiego ogólnego planu zastanowić się, które strony chcemy, żeby ludzie odnajdywali, a które nie.
Prosta zasada jest taka, że jeżeli nie jesteśmy w stanie żadnej frazy kluczowej przypisać do danej strony, to oznaczamy ją na czerwono. Jeżeli jakaś fraza kluczowa związana z biznesem może reprezentować daną podstronę, to będziemy chcieli ją indeksować. I to jest najważniejsze.
I to pozwala nam budować autorytet domeny. Bo zobaczcie, każda strona generuje jakiś ruch. Ta będzie miała siedem wejść, ta 18, 90, 40, 2 i ogólnie rzecz biorąc te na czerwono teoretycznie będą generować zero ruchu, czasami jakieś tam pojedyncze wejścia. I teraz jak popatrzymy sobie na średnią, powiedzmy, że to oznacza jakość strony, no to średnia liczba wejść dla tej strony będzie mniejsza, jeżeli policzymy je wszystkie. Ale jeżeli te, które są na czerwono wykluczymy, to średnia się podwyższy. Jakość strony się podwyższa, jeżeli przestajemy pokazywać Google’owi rzeczy, które są mało wartościowe. Z perspektywy Google’a oczywiście, tak, bo czasami są strony, które dla nas bardzo ważne są biznesowo, ale nie będą w stanie generować ruchu, dla Google nie są wartościowe i możemy je pominąć w procesie indeksowania.
I o to w tym wszystkim chodzi, żeby tak zaplanować stronę, żeby z perspektywy użytkownika to się nic nie zmieniło. Ale pewne strony należy ukryć przed Googlem, żeby on nie marnował czasu. Bo jeżeli Google ma np. powiedzmy, że 10 wejść na waszą stronę, no to fajnie by było, żeby wszedł na te wszystkie, które są tutaj, tak, żeby wszedł na to, na to, na to, na to, na to, na to, a żeby nie wchodził na to. Czasami jest tak, że Google ma na waszą stronę bardzo ograniczoną ilość zasobów i ma powiedzmy chwilkę czasu, to fajnie by było, żeby skupił się na tych najważniejszych rzeczach, a te rzeczy pominął. Jeżeli nie pokażemy mu, które są ważne, a które nieważne, to on możliwe, że wejdzie po prostu na te wszystkie nieważne. Tu się zgubi i stwierdzi, że nasza strona jest po prostu słaba i nie będzie w przyszłości więcej odwiedzał. Tak, oczywiście, to jest ekstremalne, natomiast chcę to pokazać. Także nie pozwalają Google’owi wchodzić na strony, które nie są ważne z perspektywy generowania ruchu.
A oprócz tego możemy za pomocą zarządzania indeksowaniem wyeliminować problemy z kanibalizacją czy duplikacją treści. Jeżeli np. na tej stronie i na tej stronie mamy podobną treść albo praktycznie taką samą z jakichś powodów, to bardzo fajnie by było tym zarządzić i po prostu powiedzieć, że hej, to jest kopia tej strony i tej kopii w ogóle nie indeksuję. Ewentualnie po prostu zrobimy zabiegi, o których będziemy mówić wcześniej, no bo nie możemy pokazywać duplikacji treści, bo to też będzie się gubił. Po co ma 3 razy odwiedzać taką samą treść? Bez sensu. I znowu marnujemy przestrzeń na to. Więc w tym przypadku to będzie zasadne.
I zarządzanie indeksowaniem po pierwsze wpływa na podwyższenie autorytetu domeny, po drugie rozwiązuje problem z kanibalizacją i duplikacją treści, może rozwiązać ten problem. No i celem tego wszystkiego jest to, żeby ponad 95%, czyli praktycznie wszystkie adresy, były te, które generują ruch i są jakościowe z perspektywy Google’a, fraz kluczowych i tak dalej.
Techniczne sposoby na blokowanie indeksowania
Jeśli już zaplanujemy sobie to wszystko, później będę mówić o tym, jak to dokładnie zrobić, żebyście mieli to krok po kroku mniej więcej rozpisane, to skupmy się na razie na jednej podstronie. Powiedzmy, że mamy tę podstronę, która musi być jakoś zarządzana, tak? Coś z nią musimy zrobić. Czyli na tapet bierzemy jedną podstronę i w jaki sposób planujemy to, żeby zablokować ją przed indeksowaniem.
I taką podstawową rzeczą, którą możemy zrobić, jest po prostu oznaczenie strony, że chcemy, że nie chcemy jej indeksować. Tak. Jeżeli używacie jakiegoś CMS-a, na przykład WordPressa lub innego, to wszędzie możecie do danej poszczególnej podstrony oznaczyć ją jako „nie chcę jej indeksować”. Tak. To może różnie wyglądać. Będzie jakiś przycisk, jakiś checkbox „indeksuj / nie indeksuj” i tak dalej. To trzeba sobie sprawdzić w ramach tego CMS-a. Natomiast to co się zawsze stanie po kliknięciu przycisku, to w kodzie źródłowym strony zobaczycie taki wpis, gdzie po prostu pojawia się taki atrybut w metadanych, gdzie parametr robots oznaczony jest jako noindex i follow. Tak. Na razie pomijamy to follow. Nie musimy się na tym się skupiać. Chodzi o to, że pokazujemy, że Google wchodzi na tą stronę, ale widzi taki parametr, więc w ogóle się nie przejmuje i idzie dalej. Nie skupia się nad tym. On czasami je zeskanuje, czasami nie. To już wszystko zależy. Natomiast ogólnie rzecz biorąc, od tej strony do indeksu i to jest to, o co nam chodzi.
W drugiej kolejności możemy taką stronę zablokować w pliku robots.txt. Tak, każda Wasza strona ma, a powinna mieć w zasadzie, taki plik robots.txt, który pojawia się w głównej domenie pod adresem WaszaDomena.pl/robots.txt. Tak, ten plik wygląda tak lub inaczej w zależności od tego. Tutaj są różnego rodzaju reguły, które blokują roboty przed wchodzeniem na stronę. Oczywiście niektóre roboty to respektują, niektóre nie, to już na to pomijam. Natomiast chodzi o to, że pokazujemy jakie adresy w ogóle będą zablokowane.
Kolejną rzeczą, która może rozwiązywać problemy z indeksowaniem jest taki parametr canonical, który podajemy tak samo jak noindex w kodzie strony. Natomiast bardziej chciałbym pokazać jak on działa, bo pewnego rodzaju strony mogą się duplikować lub mieć taką samą zawartość. Tak, mamy taką sytuację, że mamy główną stronę, która jest pod jakimś adresem i wokół niej pojawiają się strony, które mają to samo, samą zawartość, tylko są inaczej napisane. Na przykład w tym przypadku mamy wersję mobilną tej strony. Tak? Czyli ta sama treść, tylko wersja mobilna. I jeszcze czasami zdarza się taka sytuacja, że pod jednym adresem jest wersja mobilna. Tak? Może tak być. Czasami mamy jakiś bardzo podobny adres URL, gdzie jest ten sam tekst wklejony na przykład, tak. Ewentualnie mamy jakiegoś PDF’a z tą stroną, która ma dokładnie tą samą treść. Tak? Ewentualnie mamy dokładnie tą samą stronę, tylko ona zawiera jakiś parametr i te wszystkie rzeczy tak naprawdę to jest to samo i za pomocą tego parametru pokazujemy Google’owi „Hej, to jest duplikat innej strony, tak?”. Czyli wskazujemy ten oryginalny, pokazujemy oryginał i mówimy, że „hej, jesteś w tej chwili na kopii”. Dzięki temu sobie indeksuje tylko ten główny, tak?
Dodatkowym rozwiązaniem może być też wykonanie przekierowań. Tak. Czyli jest taka sytuacja, że nie używamy canonicala. Natomiast dla tych adresów, które są kopiami, wykonujemy przekierowania. Oznacza to, że gdy mamy dwa podane adresy, adres jeden, adres dwa i nie chcemy, żeby oba były w indeksie, to zwyczajnie ten pierwszy przekierowujemy na to. I jeżeli osoba wchodzi na tą stronę, tak naprawdę na nią nie trafia, tylko automatycznie użytkownik jest przekierowany na tą stronę właściwą. Tak, to wcześniejsza w ogóle nie istnieje, jakby z punktu widzenia fizycznego, dzięki czemu po pewnym czasie Google przestanie ją indeksować i skupi się tylko na tej właściwej. Tak, oczywiście przekierowanie musi być ustawione na stałe o kodzie 301.
Kolejną opcją jest taką, że jeżeli nie chcemy jakiegoś strony indeksować, możemy po prostu zwrócić jej błąd 404 lub 410, po prostu, że strona zniknęła. Tak, ale tym sposobem blokujemy się przed tym, że tej strony nie można odwiedzić w ogóle. Tak, to nie do końca jest polecane. Najczęściej wolałbym, żeby to wszystko było wykonywane za pomocą właśnie przekierowań 301, ewentualnie za pomocą błędu 410.
Jak zaplanować strategię indeksowania krok po kroku?
A teraz powiem, jak do tego podejść, żeby sobie to wszystko zaplanować. Żeby zaplanować sobie indeksowanie, potrzebujemy narzędzia. Tym narzędziem będzie Screaming Frog. To jest narzędzie, które pozwala skalować, czyli zeskanować stronę, adres po adresie i zobaczyć, co tam się znajduje. Jeżeli nie macie jeszcze strony i chcecie ją dopiero zaplanować, to musimy sobie wypisać wszystkie adresy, adres po adresie i ich tytuły zaplanowane i tak dalej. I na bazie tego będziemy dalej pracować.
Jeżeli sobie przejdziemy do tego narzędzia, to jest skan naszej strony, który wykonałem dosłownie przed chwilą. Narzędzie możecie sobie pobrać. Jeżeli Wasza strona ma poniżej 500 adresów, to zeskanujecie ją za darmo. Ewentualnie trzeba będzie zapłacić za takie narzędzie. To narzędzie działa tak, że wpisujecie sobie adres Waszej strony internetowej i to narzędzie, udając tak naprawdę robota Google, w uproszczeniu skanuje stronę tak jak ten robot, tylko że ma na to więcej czasu i próbuje zeskanować wszystko. I po pewnym logowaniu, zeskanowaniu strony widzimy listę wszystkich adresów.
I naszym planem jest tak naprawdę przejść adres po adresie i zastanowienie się, czy daną stronę chcemy indeksować, czy nie. I tutaj po prostu stronę główną oczywiście indeksujemy, tak? Idąc dalej mamy stronę z kursem SEO, który jest oczywiście zaindeksowana, bo chcemy, żeby ludzie na niego trafiali i popierali ten kurs za darmo.
Natomiast idąc dalej mamy stronę o nas i tak dalej, i tak dalej. Ale pierwszą stronę, która jest zablokowana przed indeksowaniem jest strona o naszej ofercie Google Ads. Tak, ona jest na stronie, da się na nią wejść, ona jest widoczna bardzo dobrze. Nawet nie chcę, bo nie da się z poziomu naszej strategii być… mieć taką stronę ofertową oraz wpis na blogu Google Ads. Tak, my zrezygnowaliśmy z indeksowania oferty. Nie pokazujemy tego Google’owi, natomiast ludzie trafiają na artykuł. Artykuł generuje ruch. Jeżeli ktoś uzna, że nasza wiedza jest okej, to trafia na stronę oferty lub za pomocą jakiegoś marketingu i tak dalej. Więc strony ofertowe po prostu postanowiliśmy zablokować.
To co jeszcze zablokowaliśmy, to po prostu… oczywiście takie rzeczy jak polityka prywatności jest zablokowana przed aneksowaniem. Oferta SEO jest zablokowana i tak dalej, ale oprócz tego blokujemy coś takiego jak case study. Case study, a na naszej stronie mamy opisane case study naszych klientów, co zrobiliśmy, jak to wpłynęło na wyniki i tak dalej. I my docelowo nie chcemy tego pokazywać, bo gdybym ja chciał zaindeksować taką stronę, no to musiałbym jakieś frazy kluczowe mieć z tyłu głowy, które będzie szukać, żeby zaindeksować takie case study. Jedno konkretne, musiałbym mieć po prostu z tyłu głowy, że ktoś wie, kto jest moim klientem i wpisuje w Google coś na zasadzie: „jak firma OCTAMEDIA poradziła sobie jako agencja OCTAMEDIA poradziła sobie z klientem X?”. Tak? No nikt tego nie szuka, więc jak gdyby to ludzie, którzy trafią na stronę z innych miejsc, z innych artykułów i tak dalej, mogą zobaczyć taki stary przy okazji, ale nikt tego nie szuka, więc my takich rzeczy nie indeksujemy.
Więc z perspektywy jak gdyby każdego adresu URL musicie sobie zaplanować, czy chcecie go indeksować, czy nie. Trzeba przejść po prostu poszczególne adresy i podjąć decyzję: indeksujemy, nie indeksujemy i tak itd. Oczywiście te adresy będą grupowe, bo jak podjąłem decyzję, że wszystkie case study nie indeksuje, to od razu wiem, że nie indeksuje i nie muszę się na tym skupiać. Tak, wszystkie wpisy blogowe indeksują. Oczywiście mogą być jakieś wyjątki. Natomiast co do zasady to są raczej grupy adresów.
Oczywiście takie strony jak jakieś regulaminy, koszyki itd. też blokujemy. Także z perspektywy tego indeksowania musicie sobie zrobić listę, czyli przeskanować swoją stronę i podjąć decyzję co wrzucacie zindeksowania, a co zostawiacie. I to jest najważniejsza taka tabelka. Jeżeli takiej tabelki nie macie, bo strony jeszcze nie macie, to wypisujecie sobie wszystkie przyszłe adresy, które mają powstać i po prostu oznaczacie na zielono te, które chcecie indeksować, na czerwono te, których nie chcecie, a potem używacie podczas budowania strony albo robots.txt albo tagów noindex.
To, co z góry możecie zaplanować, że będzie zablokowane, to możemy sobie wypisać taką listę, bo ona będzie najczęściej podobna. Tak, na pierwszym miejscu będą wszelkiego rodzaju strony techniczne. Tak? Czyli nazwijmy to techniczne, jakiś koszyk? Tak. Nikt nie indeksuje koszyka, bo nikt nie wpisze „koszyk i sklep X”. Może jest taka sytuacja, jeżeli taki będzie wyjątek, no to trzeba na to się przygotować. Ale technicznie żadnych koszyków, żadnych polityk prywatności, jakichś stron ustawień i tak dalej, gdzie możemy jakieś ciasteczka, cokolwiek, to po prostu tego nie indeksuje, no bo to nie ma sensu.
Jeżeli jakieś mamy case study, no to też nie polecam tego indeksować, bo to nic nie wnosi. To tylko zmienia tematykę strony. Bardzo często mamy taką sytuację… to nazwijmy to jako numer 3, portfolio. Tak, portfolio. I teraz bardzo dużo firm, które robią strony internetowe, pokazuje swoje portfolio, że zrobiły taką stronę, taką branżę i tak dalej. I z mojej perspektywy, a z perspektywy Google’a, jeżeli macie mało rozbudowaną ofertę, wtedy to wasza strona nie jest stroną, ofertą, tylko katalogiem różnego rodzaju firm, którym zrobiliśmy stronę internetową, a to nie jest to samo i przez to nie macie widoczności w Google na frazy typu tworzenie stron internetowych i tak dalej.
Czwartą rzeczą, którą na pewno nie chcemy indeksować, są wszelkiego rodzaju aktualności, takie biznesowe i nie tylko, nazwijmy to aktualności, bo nikogo to nie obchodzi. Po prostu zwyczajnie. Jeżeli napisaliście artykuł o tym, że macie na przykład teraz wesołe czwartki albo macie jakieś coś innego, dzieje się w firmie, no to jednak to są rzeczy, które możemy wysłać newsletterze, na Facebooku i tak dalej. Czyli docieramy do kogoś z jakimś przekazem. I oczywiście te aktualności mogą być na stronie, bo możemy mieć taki feed aktualności, co u nas, że byliśmy na takich targach i tak dalej. Byliśmy tutaj, zrobiliśmy to i teraz mamy, pomagamy zwierzętom i tak dalej. Oczywiście wszystko jest fajnie, natomiast tych aktualności nie indeksuje, bo nikt tego nie będzie szukał w googlu. Tak, zastanówcie się przeglądając swoje aktualności i spróbujcie znaleźć sobie frazę kluczową, którą miałby ktoś wpisać, żeby na taką aktualność trafić. Jeżeli takiej frazy nie ma, to po prostu nie chcemy być widoczny.
I to jest tylko jeden z małych tematów budowania lub poprawiania strony, bo można ją w ten sposób poprawiać. Natomiast na tym etapie chciałbym Was odesłać do odcinka, w którym pokazuję jedenaście kroków, jak krok po kroku przejść do zbudowania takiej idealnej strony pod pozycjonowanie. Z tego odcinka dowiecie się, jak zaplanować oraz wdrożyć taką strategię budowania strony internetowej, która będzie idealna pod pozycjonowanie, a do tego będzie generować klientów. Dlatego już teraz zapraszam Was do tego odcinka. Mam nadzieję. Do zobaczenia! Cześć
