Co to jest analiza plików dziennika i dlaczego jest ważna dla SEO?

Analiza plików dziennika SEO pomaga zrozumieć zachowanie robota indeksującego w witrynie i zidentyfikować potencjalne techniczne możliwości optymalizacji SEO.

Pozycjonowanie bez analizy zachowania robotów jest jak latanie na ślepo. Być może przesłałeś witrynę w konsoli wyszukiwania Google i ją zindeksowano, ale bez przestudiowania plików dziennika nie zorientujesz się, czy Twoja witryna jest poprawnie indeksowana lub odczytywana przez boty wyszukiwarek, czy nie.

Dlatego zebrałem wszystko, co musisz wiedzieć, aby analizować pliki dzienników SEO i identyfikować z nich problemy oraz możliwości SEO.

Co to jest analiza plików dziennika?

Analiza plików dziennika SEO to proces rozpoznawania wzorców interakcji botów wyszukiwarek ze stroną internetową. Analiza logów jest częścią technicznego SEO.

Audyt plików dziennika jest ważny dla SEO, aby rozpoznać i rozwiązać problemy związane z przeszukiwaniem, indeksowaniem, kodami stanu.

Co to są pliki dziennika?

Pliki dziennika śledzą, kto odwiedza witrynę i jakie treści przeglądają. Zawierają informacje o tym, kto zażądał dostępu do strony internetowej (znanej również jako „Klient”).

Postrzegane informacje mogą być powiązane z botami wyszukiwarek, takimi jak Google lub Bing, lub odwiedzającym witrynę. Zazwyczaj zapisy pliku dziennika są gromadzone i utrzymywane przez serwer sieciowy witryny i zwykle są przechowywane przez określony czas.

Co zawiera plik dziennika?

Zanim poznasz znaczenie plików dziennika dla SEO, musisz wiedzieć, co znajduje się w tym pliku. Plik dziennika e zawiera następujące punkty danych:-

  • Adres URL strony, o który prosi odwiedzający witrynę
  • Kod stanu HTTP strony
  • Żądany adres IP serwera
  • Data i godzina trafienia
  • Dane agenta użytkownika (bota wyszukiwarki) zgłaszającego żądanie
  • Metoda żądania (GET/POST)

Pliki dziennika mogą wydawać się skomplikowane, jeśli spojrzysz na nie najpierw. Mimo to, gdy poznasz cel i znaczenie plików dziennika dla SEO, będziesz je efektywnie wykorzystywać do generowania cennych informacji na temat SEO.

Cel analizy plików dziennika pod kątem SEO

Analiza plików dziennika pomaga rozwiązać niektóre z ważnych technicznych problemów SEO, co pozwala stworzyć skuteczną strategię SEO w celu optymalizacji witryny.

Oto kilka kwestii SEO, które można przeanalizować za pomocą plików dziennika:

#1. Częstotliwość indeksowania witryny przez Googlebota

Boty wyszukiwarek lub roboty indeksujące powinny często indeksować Twoje ważne strony, aby wyszukiwarka wiedziała o aktualizacjach Twojej witryny lub nowej treści.

Wszystkie ważne strony dotyczące produktów lub informacji powinny pojawić się w dziennikach Google. Strona produktu dla produktu, którego już nie sprzedajesz, a także brak którejkolwiek z najważniejszych stron kategorii to wskaźniki problemu, który można rozpoznać za pomocą plików dziennika.

W jaki sposób bot wyszukiwarki wykorzystuje budżet indeksowania?

Za każdym razem, gdy robot wyszukiwarek odwiedza Twoją witrynę, ma ograniczony „budżet na indeksowanie”. Google definiuje budżet indeksowania jako sumę szybkości indeksowania witryny i zapotrzebowania na indeksowanie.

Przeszukiwanie i indeksowanie witryny może być utrudnione, jeśli zawiera wiele adresów URL o niskiej wartości lub adresów URL, które nie zostały poprawnie przesłane w mapie witryny. Indeksowanie i indeksowanie kluczowych stron jest łatwiejsze, jeśli budżet indeksowania jest zoptymalizowany.

Analiza plików dziennika pomaga zoptymalizować budżet indeksowania, co przyspiesza działania SEO.

#2. Problemy i stan indeksowania zoptymalizowanego pod kątem urządzeń mobilnych

Indeksowanie zoptymalizowane pod kątem urządzeń mobilnych jest teraz ważne dla wszystkich witryn i preferuje je Google. Analiza pliku dziennika pokaże Ci, z jaką częstotliwością smartfon Googlebot indeksuje Twoją witrynę.

Ta analiza pomaga webmasterom optymalizować strony internetowe pod kątem wersji mobilnych, jeśli strony nie są poprawnie indeksowane przez Googlebota na smartfony.

#3. Kod stanu HTTP zwracany przez strony internetowe na żądanie

Ostatnie kody odpowiedzi zwracane przez nasze strony internetowe można pobrać z plików dziennika lub za pomocą opcji pobierania i renderowania żądania w Google Search Console.

Analizatory plików dziennika mogą znaleźć strony z kodami 3xx, 4xx i 5xx. Możesz rozwiązać te problemy, podejmując odpowiednie działania, na przykład przekierowując adresy URL do właściwych miejsc docelowych lub zmieniając kod statusu 302 na 301.

Google docenia strukturę Twojej witryny na podstawie jej głębokości indeksowania i wewnętrznych linków. Przyczyną niewłaściwego indeksowania witryny może być zła struktura połączeń i głębokość indeksowania.

Jeśli masz jakiekolwiek problemy z hierarchią lub strukturą witryny lub strukturą wzajemnych powiązań, możesz skorzystać z analizy pliku dziennika, aby je znaleźć.

Analiza plików dziennika pomaga zoptymalizować architekturę witryny i strukturę połączeń.

#4. Odkryj strony osierocone

Strony osierocone to strony internetowe w witrynie, do których nie prowadzą linki z żadnej innej strony. Takim stronom trudno jest zaindeksować lub pojawić się w wyszukiwarkach, ponieważ nie są one łatwo wykrywane przez boty.

Osierocone strony mogą być łatwo wykryte przez roboty, takie jak Screaming Frog, a ten problem można rozwiązać, łącząc te strony z innymi stronami w witrynie.

#5. Przeprowadź audyt stron pod kątem szybkości strony i doświadczenia

Jakość strony i kluczowe wskaźniki sieciowe są obecnie oficjalnie czynnikami rankingowymi, a teraz ważne jest, aby strony internetowe były zgodne z wytycznymi Google dotyczącymi szybkości stron.

Powolne lub duże strony można wykryć za pomocą analizatorów plików dziennika, a strony te można zoptymalizować pod kątem szybkości strony, co pomoże w ogólnym rankingu w SERP.

Analiza plików dziennika pomaga uzyskać kontrolę nad sposobem indeksowania witryny i sposobem obsługi witryny przez wyszukiwarki

Teraz, gdy mamy jasność co do podstaw plików logów i ich analizy, przyjrzyjmy się procesowi audytu plików logów pod kątem SEO

Jak wykonać analizę pliku dziennika

Przyjrzeliśmy się już różnym aspektom plików dziennika i znaczeniu SEO. Teraz nadszedł czas, aby poznać proces analizy plików i najlepsze narzędzia do analizy plików dziennika.

Aby uzyskać dostęp do pliku dziennika, potrzebny jest dostęp do pliku dziennika serwera witryny. Pliki można analizować w następujący sposób:

Ręczny dostęp do plików dziennika obejmuje różne kroki.

  • Zbierz lub wyeksportuj dane dziennika z serwera internetowego, a dane powinny zostać przefiltrowane pod kątem botów wyszukiwarek lub robotów indeksujących.
  • Przekonwertuj pobrany plik na czytelny format za pomocą narzędzi do analizy danych.
  • Ręcznie analizuj dane za pomocą programu Excel lub innych narzędzi do wizualizacji, aby znaleźć luki i możliwości SEO.
  • Możesz także użyć programów filtrujących i wierszy poleceń, aby ułatwić sobie pracę

Ręczna praca na danych plików nie jest łatwa, ponieważ wymaga znajomości Excela i zaangażowania zespołu programistów. Mimo to narzędzia do analizy plików dziennika ułatwiają pracę SEO.

Przyjrzyjmy się najlepszym narzędziom do inspekcji plików dziennika i zrozum, w jaki sposób te narzędzia pomagają nam analizować pliki dziennika.

Analizator plików dziennika Screaming Frog

Techniczne problemy SEO można zidentyfikować za pomocą przesłanych danych z pliku dziennika i zweryfikowanych przez boty wyszukiwarek Analizator plików dziennika Screaming Frog. Możesz również wykonać następujące czynności:

  • Aktywność robotów wyszukiwarek i dane do optymalizacji pod kątem wyszukiwarek.
  • Odkryj częstotliwość indeksowania witryny przez boty wyszukiwarek
  • Dowiedz się o wszystkich technicznych kwestiach SEO oraz o uszkodzonych linkach zewnętrznych i wewnętrznych
  • Analiza adresów URL, które zostały zindeksowane najmniej i najwięcej w celu zmniejszenia strat i zwiększenia wydajności.
  • Odkryj strony, które nie są indeksowane przez wyszukiwarki.
  • Wszelkie dane można porównywać i łączyć, w tym dane łącza zewnętrznego, dyrektywy i inne informacje.
  • Wyświetl dane o adresach URL odsyłających

Narzędzie do analizowania plików dziennika Screaming Frog jest całkowicie bezpłatne dla jednego projektu z limitem 1000 wierszy dziennika zdarzeń. Musisz uaktualnić do wersji płatnej, jeśli potrzebujesz nieograniczonego dostępu i pomocy technicznej.

JetOctopus

Jeśli chodzi o niedrogie narzędzia do analizy logów, JetOctopus jest najlepszy. Ma siedmiodniowy bezpłatny okres próbny, nie wymaga karty kredytowej i połączenie za pomocą dwóch kliknięć. Częstotliwość indeksowania, budżet indeksowania, najpopularniejsze strony i nie tylko można zidentyfikować za pomocą Analizator logów JetOctopuspodobnie jak inne narzędzia z naszej listy.

Za pomocą tego narzędzia możesz zintegrować dane z pliku dziennika z danymi Google Search Console, co daje wyraźną przewagę nad konkurencją. Dzięki tej kombinacji możesz zobaczyć, jak Googlebot wchodzi w interakcję z Twoją witryną i co możesz ulepszyć.

W analizatorze logów indeksowania

Ponad 500 milionów wierszy dziennika jest przetwarzanych przez Analizator logów Oncrawl, narzędzie przeznaczone dla średnich i dużych witryn. W czasie rzeczywistym monitoruje dzienniki serwera internetowego, aby zapewnić prawidłowe indeksowanie i indeksowanie stron.

Oncrawl Log Analyzer jest zgodny z RODO i bardzo bezpieczny. Zamiast adresów IP program przechowuje wszystkie pliki dziennika w bezpiecznej i segregowanej chmurze FTP.

Oprócz analizatora plików dziennika JetOctopus i Screaming Frog, Oncrawl ma kilka innych funkcji, takich jak:

  • Obsługuje wiele formatów dzienników, takich jak IIS, Apache i Nginx.
  • Narzędzie łatwo dostosowuje się do zmieniających się wymagań dotyczących przetwarzania i przechowywania
  • Segmentacja dynamiczna to potężne narzędzie do wykrywania wzorców i połączeń w danych poprzez grupowanie adresów URL i linków wewnętrznych na podstawie różnych kryteriów.
  • Wykorzystaj punkty danych z nieprzetworzonych plików dziennika do tworzenia praktycznych raportów SEO.
  • Pliki dziennika przesyłane do przestrzeni FTP można zautomatyzować z pomocą personelu technicznego.
  • Można monitorować wszystkie popularne przeglądarki, w tym roboty indeksujące Google, Bing, Yandex i Baidu.

Analizator logów OnCrawl ma jeszcze dwa ważne narzędzia:

Robot SEO Oncrawl: Dzięki robotowi Oncrawl SEO Crawler możesz indeksować swoją witrynę z dużą prędkością i przy minimalnych zasobach. Poprawia zrozumienie przez użytkownika, w jaki sposób kryteria rankingu wpływają na optymalizację pod kątem wyszukiwarek (SEO).

Dane dotyczące indeksowania: Dane Oncrawl analizują wszystkie czynniki SEO, łącząc dane z indeksowania i analiz. Pobiera dane z plików indeksowania i dziennika, aby zrozumieć zachowanie indeksowania i zaleca budżet indeksowania, aby nadać priorytet zawartości lub ranking stron.

Analizator plików dziennika SEMrush

The Analizator plików dziennika SEMrush to mądry wybór dla prostego, opartego na przeglądarce narzędzia do analizy logów. Analizator ten nie wymaga pobierania i może być używany w wersji online.

SEMrush przedstawia dwa raporty:

Hity stron: odsłony stron informują o interakcji robotów indeksujących z zawartością Twojej witryny. Daje dane stron, folderów i adresów URL z maksymalnymi i minimalnymi interakcjami z botami.

Aktywność Googlebota: raport Aktywność Googlebota zapewnia codzienne statystyki związane z witryną, takie jak:

  • Rodzaje indeksowanych plików
  • Ogólny kod stanu HTTP
  • Liczba żądań skierowanych do Twojej witryny przez różne boty

Loggly z SolarWinds

Loggly SolarWinds bada dostęp i logi błędów serwera WWW, a także tygodniowe wskaźniki witryny. Możesz zobaczyć swoje dane dziennika w dowolnym momencie i ma funkcje, które ułatwiają przeszukiwanie dzienników.

Niezawodne narzędzie do analizy plików dziennika, takie jak SolarWinds Loggly, jest wymagane do efektywnego wyszukiwania plików dziennika na serwerze sieciowym w celu uzyskania informacji o powodzeniu lub niepowodzeniu żądań zasobów od klientów.

Loggly może dostarczyć wykresy przedstawiające najrzadziej przeglądane strony i obliczać średnią, minimalną i maksymalną prędkość ładowania strony, aby pomóc w optymalizacji optymalizacji witryny pod kątem wyszukiwarek.

Statystyki indeksowania Google Search Console

Konsola wyszukiwania Google ułatwił użytkownikom pracę, zapewniając przydatny przegląd swoich praktyk. Obsługa konsoli jest prosta. Twoje statystyki indeksowania zostaną następnie podzielone na trzy kategorie:

  • Kilobajty pobrane dziennie: Wskazuje kilobajty pobierane przez Googleboty podczas odwiedzania witryny. Zasadniczo wskazuje to na dwa ważne punkty: jeśli na wykresie pokazane są wysokie średnie, oznacza to, że witryna jest indeksowana częściej lub może to również wskazywać, że bot zajmuje dużo czasu na indeksowanie witryny i nie jest lekka.
  • Strony indeksowane według dnia: informuje o liczbie stron indeksowanych każdego dnia przez Googlebota. Odnotowuje również stan aktywności indeksowania, niezależnie od tego, czy jest niski, wysoki czy średni. Niska szybkość indeksowania wskazuje, że witryna nie jest poprawnie indeksowana przez Googlebota
  • Czas poświęcony na pobranie strony (w milisekundach): wskazuje czas potrzebny Googlebotowi na wysyłanie żądań HTTP podczas indeksowania witryny. Mniej czasu, jaki Googlebot musi poświęcić na wysyłanie żądań, będzie lepsze pobieranie strony, ponieważ indeksowanie będzie szybsze.

Wniosek

Mam nadzieję, że wiele z tego przewodnika wyniosłeś na temat analizy plików dziennika i narzędzi używanych do audytu plików dziennika pod kątem SEO. Audyt plików dziennika może być bardzo skuteczny w ulepszaniu technicznych aspektów SEO witryny.

Google Search Console i SEMrush Log File Analyzer to dwie opcje darmowego i podstawowego narzędzia do analizy. Alternatywnie, sprawdź Screaming Frog Log File Analyzer, JetOctopus lub Oncrawl Log Analyzer, aby lepiej zrozumieć, w jaki sposób boty wyszukiwarek współdziałają z Twoją witryną; możesz użyć mieszanych narzędzi do analizy plików dziennika premium i bezpłatnych dla SEO.

Możesz także przyjrzeć się zaawansowanym robotom indeksującym witryny, aby poprawić SEO.