# Unser Crawler

> Eindeutig identifiziert, mit begrenzter Anfragerate und in einer Zeile blockierbar.

Quelle: https://citetune.com/de/crawler

## Wie wir uns ausweisen

Jede Anfrage trägt einen stabilen User-Agent, der auf diese Seite verweist, sodass Sie uns in Ihren Logs ohne Raten erkennen.

## Was wir abrufen

Öffentliche Seiten der gescannten Domain, bis zu einem Budget pro Scan. Wir melden uns nie an, senden nie ein Formular und rufen nie eine Seite ab, die die robots.txt sperrt.

## So blockieren Sie uns

Sperren Sie unseren User-Agent in der robots.txt. Wir lesen sie vor jedem Crawl neu und hören sofort auf; Sie können uns auch bitten, ein gespeichertes Ergebnis zu löschen.