English translation follows; the German text below is authoritative.
HangarfieldBot — so erfassen wir Angebote von Händler-Websites
- Kennung:
HangarfieldBot/1.0 (+https://hangarfield.com/crawler)— wir verwenden keine anderen oder verschleierten Kennungen. - Regeln, die wir uns auferlegt haben: robots.txt wird bei jedem Abruf neu gelesen und befolgt, auch
Disallowfür alle Bots · Vorbehalte gegen automatisierte Nutzung (Meta-Tags, TDMRep, ai.txt) werden befolgt · höchstens ein Abruf pro Sekunde je Website, jedes Angebot höchstens einmal täglich · keine Logins, keine Captchas, keine Umgehung von Schutzmaßnahmen · keine Konten bei Quellen · Abruf nur von Servern in der EU · keine Portale und Kleinanzeigenmärkte, nur Websites von Händlern selbst. - Was wir übernehmen und was nicht: siehe Datenschutzerklärung, Abschnitt 2.4.
- Quellenliste: hangarfield.com/crawler/quellen — jede ausgewertete Website mit Beginn der Erfassung.
- Widersprechen: hangarfield.com/quelle/{id} (Link steht in der Information, die jeder Händler erhält) oder E-Mail an kontakt@hangarfield.com mit Ihrer Domain — Umsetzung binnen 5 Minuten bzw. bei E-Mail binnen 48 Stunden. Dauerhaft ausschließen geht auch per robots.txt:
User-agent: HangarfieldBot/Disallow: /.