Analiza plików logów to badanie surowych logów dostępu serwera WWW w celu sprawdzenia, jak dokładnie roboty wyszukiwarek i boty zakupowe wchodzą w interakcję z serwisem – o które strony proszą, jak często i czy po drodze napotykają błędy. W przypadku katalogów opartych na feedzie to jeden z niewielu sposobów, by potwierdzić, co faktycznie widzi Googlebot lub robot marketplace’u, zamiast polegać na tym, co według feedu powinno tam być. Wyróżnia się na tle większości narzędzi analitycznych, ponieważ rejestruje każde żądanie otrzymane przez serwer, w tym żądania botów, które nigdy nie pojawiają się w standardowych raportach ruchu.
Dlaczego analiza plików logów ma znaczenie
Feed produktowy może mieć idealną strukturę, podczas gdy strony docelowe, do których prowadzi, są po cichu niedostępne dla robotów – zablokowane przez błędnie skonfigurowaną regułę robots.txt, zwracające błędy serwera lub przekierowujące przez łańcuchy, z których roboty rezygnują w połowie. To właśnie analiza plików logów ujawnia te problemy, ponieważ pokazuje rzeczywiste kody statusu HTTP i częstotliwość indeksowania, jakie serwer zwraca botowi, niezależnie od tego, co twierdzi mapa witryny lub feed. Ma to bezpośredni wpływ na wyniki w wyszukiwaniu organicznym: strona produktu, do której robot nie może dotrzeć lub na której wielokrotnie napotyka błędy, w końcu wypadnie z indeksu, niezależnie od tego, jak dobrze zoptymalizowana jest jej treść. W dużych katalogach analiza logów ujawnia też marnowanie budżetu indeksowania – bota, który większość wizyt poświęca na mało wartościowe adresy URL z filtrami zamiast na strony produktów, które naprawdę wymagają indeksowania.
Jak działa analiza plików logów
Logi serwera rejestrują każde żądanie wraz ze znacznikiem czasu, user agentem wysyłającym żądanie, żądanym adresem URL i zwróconym kodem odpowiedzi. Narzędzia do analizy logów filtrują te surowe dane do znanych user agentów robotów (Googlebot, Bingbot i boty konkretnych marketplace’ów), a następnie agregują je we wzorce: które ścieżki URL są indeksowane najczęściej, które zwracają błędy 404 lub 500 i jak zmieniała się częstotliwość indeksowania w czasie. Dane te są często porównywane z wynikami benchmarkingu feedu, aby sprawdzić, czy problemy z indeksowaniem korelują z odrzuceniami lub spadkami pozycji w określonych kategoriach produktów, i trafiają do szerszych dashboardów analityki feedu jako kolejne źródło danych obok kliknięć i konwersji.
Przykład
<item>
<g:id>SKU-20956</g:id>
<title>Merino Wool Hiking Socks - 2 Pack</title>
<g:link>https://example-shop.com/products/merino-wool-hiking-socks</g:link>
<g:availability>in stock</g:availability>
</item>Analiza plików logów dla adresu URL takiego jak ten w polu link pokazałaby, czy Googlebot faktycznie dociera do tej strony i otrzymuje odpowiedź 200, czy też wielokrotnie trafia na przekierowanie lub błąd, co wyjaśniałoby, dlaczego oferta nie pozycjonuje się mimo dobrze przygotowanego wpisu w feedzie.
Powiązane pojęcia
Analiza plików logów jest najcenniejsza w połączeniu z benchmarkingiem feedu, ponieważ błędy indeksowania często wyjaśniają luki w wynikach, które sam benchmarking może jedynie zasygnalizować, ale nie zdiagnozować, oraz z szerszym monitorowaniem wyszukiwania organicznego, ponieważ dostępność dla robotów jest w ogóle warunkiem pozycjonowania. Włączona do regularnego przeglądu analityki feedu wychwytuje kategorię problemów – po stronie serwera, a nie feedu – których żadna optymalizacja tytułów czy cen nie naprawi sama.
