Rechtliches
Unsere Abrufe bei Shop-Websites
Zum Auflisten von Rabatten gehört, beim Server eines Shops eine Seite abzurufen, und jeder einzelne dieser Abrufe hinterlässt eine Zeile in irgendeinem Zugriffsprotokoll. Diese Seite ist für den geschrieben, der diese Zeile liest, und am Ende steht ein Formular, das den nächsten Abruf gar nicht erst zustande kommen lässt.
Zuletzt aktualisiert:
Der Header im Log
- User-Agent
dealsforme-fetch/2026.09 (dealsforme.ai; to stop these requests see https://dealsforme.ai/en/legal/fetching)- Gruppe in der robots.txt
User-agent: dealsforme-fetch
Jeder auf dieser Seite beschriebene Abruf sendet genau diesen User-Agent.
Zwei Anlässe für einen Abruf
Der erste ist eine Quelle auf unserer Liste. Nach Zeitplan wird eine Quelle erst gelesen, wenn sie für sich geprüft und freigegeben wurde; ein geplanter Job wird jede Stunde wach und liest jede freigegebene Quelle, die laut ihrem eigenen Zeitplan an der Reihe ist. Ab und zu liest außerdem jemand bei uns eine Quelle von Hand, um zu prüfen, wie sie gelesen wird. Außer freigegebenen Quellen wird keine Website regelmäßig gelesen. Der zweite ist ein eingereichter Link: Schickt uns ein angemeldeter Besucher einen Deal, rufen wir genau diese eine Adresse ab, um zu sehen, ob sie antwortet. Links auf dieser Seite folgen wir nicht.
robots.txt
Jede Adresse aus einer freigegebenen Quelle, Übersichts- wie Detailseiten, wird zuerst mit deiner robots.txt abgeglichen. Wir befolgen die Gruppe für dealsforme-fetch; fehlt sie, die Gruppe für unseren früheren Namen DealsForMeBot; fehlen beide, die Gruppe *. Ein Crawl-delay, der länger ist als unser eigener Abstand, wird eingehalten. Unsere Kopie der Datei nutzen wir 24 Stunden lang, bevor wir sie neu anfordern. Lässt sich die Datei gar nicht abrufen, lesen wir von diesem Host nach Zeitplan nichts bis zum nächsten Versuch 24 Stunden später; ein Fehlerstatus wie 404 gilt als Datei ohne Regeln. Die Prüfung eines eingereichten Links schaut nicht in die robots.txt — für diesen Abruf ist die Nicht-abrufen-Liste unten der Weg, uns zu stoppen.
Tempo
Abrufe an denselben Host starten im Abstand von mindestens 2 Sekunden. Jeder wird nach 15 Sekunden abgebrochen; bei einem eingereichten Link liegt die Grenze bei 8 Sekunden und höchstens 3 Weiterleitungen. Genutzt werden nur die ersten 2 MB einer Antwort. Auf 429 oder 503 versuchen wir dieselbe Adresse bis zu 4 Mal erneut, warten dabei nacheinander 1, 2, 4, 8 Sekunden und starten nie früher als 2 Sekunden nach dem vorigen Versuch. Nach der letzten Ablehnung hören wir auf: Eine Quelle wird wieder gelesen, wenn ihr Zeitplan das nächste Mal an der Reihe ist, und ein eingereichter Link gilt als nicht erreichbar.
Welche Felder in unsere Datensätze gelangen
Aus einer freigegebenen Quelle: die Felder, die wir zu jedem gelisteten Deal lesen — etwa Titel, Adresse, Bildadresse, Preis, früherer Preis, Währung und Rabatt —, so wie die Seite sie angibt, und unsere Kopie deiner robots.txt. Aus einem eingereichten Link: ob er geantwortet hat, sein Statuscode und die Adresse, bei der er zuletzt ankam.
Die Nicht-abrufen-Liste
Steht eine Domain auf der Liste, geht keiner der auf dieser Seite beschriebenen Abrufe mehr an sie oder ihre Subdomains: kein geplanter Lesevorgang, keine Linkprüfung, keine Anfrage nach der robots.txt und keine Weiterleitung von einer anderen Adresse. Die Liste wird unmittelbar vor jedem Abruf nachgeschlagen, ein neuer Eintrag wirkt also ab dem nächsten. Sie stoppt Abrufe und sonst nichts: Deals deines Shops, die hier schon veröffentlicht sind, entfernt sie nicht. Sollen auch die verschwinden, nutze das Notizfeld.
Nachweis, dass die Domain dir gehört
Du nennst uns eine Domain und eine E-Mail-Adresse. Liegt die Adresse auf dieser Domain oder auf der Domain darüber (shop.example für eu.shop.example), schicken wir ihr einen Einmal-Link, der 24 Stunden gilt. Was dieser Link öffnet, ist eine Seite mit einer einzigen Schaltfläche; erst der Druck darauf setzt die Domain auf die Liste. Eine Adresse auf einer anderen Domain oder bei einem Freemail- oder Internetanbieter beweist nichts über den Shop, deshalb wartet eine solche Anfrage, bis jemand bei uns entscheidet. Zu jeder Anfrage speichern wir die genannte Domain und die Domain darüber (eu.shop.example neben shop.example — das Tageskontingent zählt die obere), die E-Mail-Adresse und ob sie die Domain belegt hat, deine Notiz, die Sprache der Seite, von der du sie geschickt hast — in dieser Sprache kommen der Link per E-Mail und unsere Antwort —, den Zeitpunkt und einen Einweg-Hash deiner IP-Adresse. Daneben steht der Zustand der Anfrage selbst: wie weit sie ist, wann die Domain tatsächlich auf die Liste kam, wann jemand bei uns entschieden hat, falls es dazu kam, und ein Einweg-Hash des Einmal-Links samt der Stunde, zu der er aufhört zu wirken. Den Link selbst speichern wir nie.
Eine Domain auf die Liste setzen
Eine Domain pro Formular, Subdomains inklusive. Eine Adresse auf der Domain selbst bekommt den Einmal-Link; jede andere Adresse schickt die Anfrage an einen Menschen bei uns.