Teoretycznie dla handlu nie ma nic lepszego, niż duży ruch i to samo tyczy się sprzedaży w sklepach elektronicznych. Handel online kwitnie i sklepy internetowe stają się coraz lepiej zaprojektowane, coraz skuteczniejsze. Warto jednak wiedzieć, w jaki sposób nie dopuścić do zaindeksowania jakiejś konkretnej strony czy podstrony przez wyszukiwarki internetowe, albowiem nie każdy zakamarek domeny jest tym, do którego sklep powinien odwoływać. Blokowanie indeksacji Google jest więc bardzo przydatne jeśli właścicielowi witryny zależy na tym, aby ukryć daną podstronę przed zbyt nadmierną ekspozycją w przypadkowych wynikach wyszukiwania.
Wskazówki dla robotów wyszukiwarki
Za największą porcję indeksowania, czyli wpisywania kolejnych stron i podstron z uruchamianych domen do indeksu wyszukiwarki Google, odpowiadają tzw. boty, czyli specjalne algorytmy przeszukujące WWW w poszukiwaniu nowych adresów, których wcześniej nie rozpoznały. Działają one na tyle wymiernie, że indeksowanie witryny www często nie wymaga niczyjego specjalnego starania i użytkownik nowego bloga czy forum internetowego nie musi martwić się, czy boty Google odnajdą jego witrynę i umożliwią jej odnalezienie – nawet jeśli na ostatnich stronach z wynikami.
Dlatego aby uniknąć zaindeksowania tylko części swojej strony czy części stron prowadzonych na danej domenie, warto posługiwać się prostymi komendami, które w jasny sposób wysyłają sygnał do automatycznych algorytmów, aby nie indeksowały tej wskazanej sekcji:
- użycie w sekcjidanej podstrony konkretnego tagu meta:
- utworzenie pliku robots.txt z konkretnymi zapisami „user-agent” i „disallow” pozwalają na wskazanie konkretnych zasobów niepodlegających indeksowaniu lub wskazanie konkretów robotów, które nie powinny indeksować witryny;
- zastosowanie tag rel=”canonical” w celu dokładnego wskazania robotom indeksującym treści, które obowiązkowo powinny podlegać indeksowaniu;
Strony wykluczone z indeksowania
Skoro wiadomo już, w jaki sposób szybko i skutecznie przeprowadzić na swoich domenach wykluczenie strony z indeksowania, warto posiąść jeszcze wiedzę na temat tego, które podstrony, katalogi czy witryny w ogóle warto zablokować, aby uniknąć błędu polegającego na wyłączeniu zbyt znacznego obszaru domeny ze skanowania przez roboty indeksujące, co mogłoby negatywnie zaważyć na wynikach odwiedzin przez nowych gości.
Katalog stron, które obowiązkowo lub prawie zawsze zastosować ograniczenia dla botów indeksujących nie jest długi i składa się z najbardziej oczywistych kategorii podstron:
- regulaminy, polityki sprzedażowe, ramowe warunki umowy, polityka cookies itp.
- podstrony i skrypty umożliwiające logowanie do panelu klienta, odzyskiwanie hasła czy formularz rejestracyjny – nie powinny znajdować się w wynikach wyszukiwania, ponieważ nie niosą większej wartości dla użytkownika i raczej zniechęcają do pozostania na adresie;
- aktualne zamówienie, koszyk czy ulubione produkty, to strony wchodzące w skład praktycznie każdego sklepu internetowego, powinny być jednak widoczne wyłącznie dla robiących zakupy i dlatego warto również dla nich przeprowadzić blokowanie indeksacji google;
- sklepy internetowe często posiadają wewnętrzną wyszukiwarkę produktów ze swoim własnym interfejsem i sposobem prezentacji wyszukiwanych treści, więc ich wyświetlanie w wynikach wyszukiwania Google nie służy poprawie funkcjonalności;
- niektóre witryny wymagają stworzenia dodatkowych podstron wyłącznie z grafikami czy innymi odnośnikami, do których odwołują się strony z realną zawartością – nie powinny być one indeksowane;
- kopie stron (backupy) lub strony puste oczekujące dopiero na wrzucenie na nie materiałów i treści.
Naturalnie czasami wykluczenie strony z indeksowania nie może mieć miejsca, jeśli np. dany sklep internetowy postanowi chociażby archiwizować swoje zamknięte oferty dla klientów, którzy chcieliby złożyć zapytanie o zamówienie towaru w trybie indywidualnym.
Bezpieczne wykluczanie podstron z indeksowania
Samodzielne wyłączanie poszczególnych podstron z indeksowania przez wyszukiwarki internetowe nie jest trudne. Wystarczy skuteczne zastosowanie komend wymienionych powyżej, jednak problematyczne może być szybkie i wygodne wprowadzanie tych restrykcji w przypadku domeny składającej się z licznych podstron czy kategorii. Jeśli witryna posiada całe multum podstron wymagających takiego wykluczenia, warto sprawdzić, czy system CMS do zarządzania treściami witryny nie posiada funkcjonalności blokowania poszczególnych treści dla botów indeksujących.
W większości systemów CMS można to zrobić za pomocą jednego kliknięcia. Niekiedy jednak domyślne ustawienia tej wtyczki spersonalizowane są w sposób, który wyłącza indeksowanie witryn www dla całej domeny lub kategorii produktów, nie zaś jedną podstronę – tak jak chciałby tego administrator czy moderator. Warto przed rozpoczęciem takiego procesu dokładnie zapoznać się ze wszystkimi komunikatami, jakie są prezentowane przez system. W razie wątpliwości, przed podjęciem decyzji o wyrażeniu konkretnych aprobat dla tej funkcji, warto odwołać się także do dostępnych tutoriali, poradników czy sekcji FAQ.
