Czym jest AdsTxtCrawler?
Krótka odpowiedź: AdsTxtCrawler firmy OneTag Limited przeszukuje pliki ads.txt, aby zweryfikować obecność wpisu onetag.com.
AdsTxtCrawler jest obsługiwany przez OneTag Limited w celu przeszukiwania plików ads.txt od wydawców. Robi to, aby zweryfikować obecność wpisu onetag.com. Zachowanie bota jest specjalnie zaprojektowane do tego zadania.
Identyfikacja User-Agent
Następujące ciągi user-agent identyfikują AdsTxtCrawler w logach Twojego serwera:
AdsTxtCrawler/1.0; +https://github.com/InteractiveAdvertisingBureau/adstxtcrawler
Reguły robots.txt dla AdsTxtCrawler
Respektuje robots.txt: Nie
Ten bot nie zobowiązuje się do przestrzegania robots.txt
AdsTxtCrawler oficjalnie nie przestrzega dyrektyw robots.txt. Jedynym niezawodnym sposobem kontroli dostępu jest blokowanie po stronie serwera (filtrowanie IP, reguły user-agent w konfiguracji serwera) w połączeniu z monitoringiem logów.
Potrzebujesz ciągłej weryfikacji ponad 500 botów? Can AI See It automatyzuje ten proces.
Zachowanie crawlera
Częstotliwość:Not Documented
Wzorzec żądań:Not Documented
Cytaty z oficjalnej dokumentacji
"OneTag is required to crawl ads.txt files from our publishers to verify the presence of the onetag.com line"
Indeks aktywności crawlera
Względna aktywność crawlera AdsTxtCrawler w ciągu ostatnich 28 dni. Wyższe wartości oznaczają zwiększoną intensywność crawlowania w porównaniu z bazą okresu.
Pokaż dane aktywności (ostatnie 7 dni)
| Data | Indeks aktywności |
|---|---|
| May 25, 2026 | 88.7 |
| May 26, 2026 | 77.4 |
| May 27, 2026 | 80.2 |
| May 28, 2026 | 70.2 |
| May 29, 2026 | 65.6 |
| May 30, 2026 | 79.7 |
| May 31, 2026 | 66.3 |
Źródło: Cloudflare Radar
Dlaczego warto śledzić ruch AdsTxtCrawler?
Weryfikuj zachowanie crawlera systemu reklamowego. AdsTxtCrawler ocenia Twoje strony pod kątem targetowania reklam, oceny jakości i zgodności z polityką.
Optymalizuj dostarczanie reklam. Jeśli AdsTxtCrawler nie ma właściwego dostępu do pewnych stron, targetowanie i przychody z reklam mogą ucierpieć. Monitoring logów potwierdza dostępność.
Weryfikacja w logach
Aby zweryfikować ruch AdsTxtCrawler w logach serwera:
- Szukaj w logach dostępu ciągów user-agent wymienionych powyżej
- Sprawdź, czy adresy IP pasują do udokumentowanych zakresów (jeśli podane przez OneTag Limited)
- Zweryfikuj, czy wzorzec crawlowania odpowiada udokumentowanemu zachowaniu
- Użyj odwrotnego wyszukiwania DNS do dodatkowej weryfikacji, jeśli dostępne
Note: Obserwowane zachowanie w środowiskach produkcyjnych może różnić się od oficjalnej dokumentacji. Monitoring logów serwera zapewnia jedyną niezawodną weryfikację rzeczywistego zachowania botów.
Nieudokumentowane informacje
Następujące informacje nie są oficjalnie udokumentowane dla AdsTxtCrawler:
- crawl frequency
- request pattern
- IP verification method
- JavaScript rendering details
Oficjalna dokumentacja
Zobacz oficjalną dokumentację AdsTxtCrawler →
Informacje pochodzą z oficjalnej dokumentacji. Treść wygenerowana z pomocą AI.