live24h.eu obsługuje dwa boty. Ta strona jest przeznaczona dla operatorów stron, którzy chcą przypisać pobranie w swoich logach serwera albo skontaktować się z nami.
- live24h-seo-monitor sprawdza dyrektywy SEO na własnych adresach URL naszych klientów, na ich zlecenie.
- Fetcher monitoringu cen pobiera publicznie dostępne strony produktów, które klienci wyraźnie skonfigurowali do obserwacji.
Dla obu botów obowiązuje to samo: pobieramy wyłącznie strony publicznie dostępne, nigdy treści za loginem lub paywallem. Nie obchodzimy środków ochronnych i nie podszywamy się naszymi pobraniami pod dostęp człowieka.
Możesz skontaktować się z nami pod bot-support@live24h.eu . Prośby o dodanie do allowlisty i zgłoszenia od właścicieli witryn rozpatrujemy zwykle w ciągu jednego dnia roboczego.
live24h-seo-monitor (monitoring SEO)
live24h-seo-monitor to nasz bot do monitoringu SEO. Na zlecenie naszych klientów pobiera ich własne adresy URL i sprawdza dyrektywy SEO takie jak robots.txt, meta robots, X-Robots-Tag i <link rel="canonical">.
User-agent
live24h-seo-monitor/1.0 (+https://live24h.eu/bot)
Co robi ten bot
- Pobieramy URL tylko wtedy, gdy nasz klient wyraźnie dodał go do monitoringu.
- Szanujemy rate-limity i automatycznie zwalniamy przy HTTP 429 / 403.
- Stosujemy
robots.txtz perspektywy skonfigurowanego user-agenta. - Nie crawlujemy Twojej witryny: jeden URL na check plus jedno pobranie
/robots.txtna hosta (z cache). - Domyślnie sprawdzamy dostarczoną odpowiedź HTML, bez wykonywania JavaScriptu. Renderowanie JavaScriptu dla pojedynczych checków nasi klienci włączają od planu Business, w ramach miesięcznego kontyngentu.
- Pracujemy bez zapisanych danych sesji.
Czego nie robi ten bot
- Brak skanowania witryn ani przechodzenia linków.
- Brak obchodzenia CAPTCHA ani wyzwań anti-bot.
- Brak podszywania się naszymi pobraniami pod dostęp człowieka.
Allowlisting WAF
Poniższe instrukcje dotyczą wyłącznie live24h-seo-monitor, czyli sprawdzania Twoich własnych adresów URL na Twoje zlecenie. Jeśli Twój WAF blokuje lub ogranicza tego bota, masz kilka opcji.
Cloudflare
- Panel Cloudflare → Twoja zone → Security → WAF → Custom rules.
- Dodaj regułę:
(http.user_agent contains "live24h-seo-monitor")→ Akcja: Skip.
AWS WAF
Utwórz ManagedRuleGroupOverride, który wyklucza live24h-seo-monitor z rate-limitingu i reguł bot.
Akamai
W Akamai Bot Manager → Custom Bot Categories zezwól live24h-seo-monitor.
Imperva
Dodaj regułę allow-list dla user-agenta live24h-seo-monitor.
Ogólne
Dodaj wyjątek w WAF dla user-agenta live24h-seo-monitor.
Kontakt i wyłączenie
Jeśli potrzebujesz pomocy z dodaniem tego bota do allowlisty lub uważasz, że powoduje on problemy na Twojej stronie, skontaktuj się z nami pod bot-support@live24h.eu .
- Jeśli jesteś klientem live24h, zaloguj się do dashboardu, otwórz check SEO dla URL i kliknij Wyłącz lub Usuń.
- Jeśli nie jesteś klientem i chcesz, aby nasz bot przestał pobierać jeden z Twoich URL, napisz do bot-support@live24h.eu z odpowiednim adresem URL. Sprawdzamy każde zgłoszenie i reagujemy odpowiednio: jeśli odpowiadasz za tę domenę, po weryfikacji wyłączamy te adresy z monitoringu.
Monitoring cen
Fetcher monitoringu cen pobiera publicznie dostępne strony produktów, które nasi klienci jawnie skonfigurowali do obserwacji, i odczytuje z nich dane produktowe, takie jak cena, cena przekreślona i dostępność.
Jak rozpoznać nasze pobrania
Fetcher przedstawia się jako zautomatyzowany agent i nie podszywa się pod przeglądarkę ani pod człowieka. Inaczej niż przy monitorze SEO nie publikujemy tutaj używanego identyfikatora: ta strona jest publiczna, a identyfikator może się w każdej chwili zmienić.
Jeśli chcesz wiedzieć, czy konkretne pobranie pochodzi od nas, wyślij nam wyciąg z logów z czasem, żądanym adresem i user agentem na podany niżej adres. Powiemy Ci wiążąco, czy było to nasze pobranie.
Jak się z nami skontaktować
Jeśli nie chcesz, aby ten fetcher pobierał strony Twojej domeny, napisz na bot-support@live24h.eu (wystarczy domena lub dotknięte adresy URL). Sprawdzamy każde zgłoszenie i reagujemy odpowiednio: od dostosowania częstotliwości pobierania po zawieszenie wskazanych adresów.
Oceniamy dodatkowo Twój plik robots.txt. Jeśli osobna grupa wymienia identyfikator, który widzisz w logach, rozpoznajemy to i traktujemy jak zgłoszenie do wsparcia botów, z tą samą weryfikacją i tymi samymi możliwymi reakcjami. Wiadomość na bot-support@live24h.eu
jest szybszą i pewniejszą drogą, ponieważ możemy Ci na nią odpowiedzieć i wyjaśnić pytania.
Jak ten fetcher pobiera
- Pobiera wyłącznie konkretnie wskazane strony produktów: bez crawlowania witryny, bez podążania za linkami.
- Interwały pobierania zależą od planu i są ograniczone; dodatkowo obowiązuje budżet uprzejmości na domenę.
- Jeśli kilku klientów obserwuje tę samą stronę produktu w tym samym kontekście, dzielą jedno pobranie (deduplikacja). Zasada ta utrzymuje liczbę zapytań do Twojej strony na niskim poziomie.
- Każde pobranie jest ściśle ograniczone (przekierowania, rozmiar strony, czas trwania) i przebiega bez zapisanych danych sesji.
- Zapisywane są rozpoznane dane produktowe (cena, dostępność) z krótkimi fragmentami tekstu jako dowodem rozpoznania, nie cała strona.
Czego nie robi ten fetcher
- Żadnych pobrań za loginami ani paywallami; żadnego obchodzenia CAPTCHA ani środków anty-botowych.
- Żadnego podszywania się naszymi pobraniami pod dostęp człowieka.