Dieselbe URL, elf Minuten Abstand, erst abgewiesen und dann ausgeliefert. Das ist hier der nützliche Befund: Das Blockieren ist zeitweilig, ein zweiter Versuch ist also mehr wert als ein Umweg. Der unbequemere Befund ist, dass die Zeile, die wir bekamen, keine Produktzeile ist - und diese Seite erklärt warum, bevor Sie darauf aufbauen.
Das ist der Befund, der zählt. Am 3. Juli 2026 übermittelten wir eine Produkt-URL um 03:43 und bekamen blocked (needs residential proxy); wir übermittelten dieselbe URL um 03:54 und bekamen ok. Elf Minuten. Sonst änderte sich nichts. Wo eine Blockade in diesem Katalog sonst dauerhaft wirkt, ist sie es hier nachweislich nicht - und das macht einen zweiten Versuch zur richtigen Antwort, nicht eine Ersatzquelle.
Wir weisen lieber darauf hin, als es durchrutschen zu lassen. Diese ok-Zeile füllte fünf Felder und ließ zehn leer - kein Identifikator, keine Marke, keine Beschreibung, kein Bestand, kein Bild. Ihr name ist der URL-Slug, samt Bindestrichen, und kein Produkttitel. Eine Zeile, die sich nach ihrer eigenen Adresse benennt, ist eine Zeile, die kein Produkt gefunden hat, und diese Seite behandelt sie so.
Wir haben nachgesehen, und die Erklärung ist eindeutig. Diese Adresse liefert überhaupt keine Produktseite: Sie antwortet mit einer dauerhaften Weiterleitung auf eine Suchergebnisseite zum selben Slug. Das Ziel ist eine Auflistung vieler Produkte - deshalb hat die Zeile einen Slug als Namen und deshalb sind neun ihrer Spalten leer. Die Zahl in ihrer Preisspalte erscheint auf jener Suchseite; dass sie der Preis der vom Slug benannten Maschine ist, steht nicht fest, und wir stellen sie nicht so dar.
Die robots.txt der Seite ließ sich für uns sauber lesen und enthält keinen pauschalen Ausschluss für allgemeine Crawler. Mit einem richtigen Matcher geprüft ist der Produktpfad jedoch erlaubt und der Suchpfad verboten - und die erlaubte URL leitet auf die verbotene weiter. Die in unserem eigenen Servicekatalog hinterlegte Beispieleingabe ist genau diese Such-URL. Wir weisen auf den Widerspruch hin, statt das Beispiel als Empfehlung zu wiederholen.
Zwei unserer vier Zeilen kamen mit blocked (intermittent - retry) zurück - der Dienst sagt Ihnen, was zu tun ist, und nicht nur, was passiert ist. Zusammen mit dem Elf-Minuten-Versuch oben ergibt das ein stimmiges Bild: Eine Blockade ist hier ein Moment und kein Urteil. Zählen Sie blockierte Zeilen je Lauf, wiederholen Sie sie, und gleichen Sie über status ab statt über die Zeilenzahl.
Abgerechnet wird nach tatsächlich gelieferten Zeilen, und das macht den Rat zum Wiederholen billig umzusetzen: Drei unserer vier Läufe brachten nichts hervor und hätten nichts gekostet. Das ist auch der Grund, warum diese Seite nicht mit einer Anmeldeschaltfläche beginnt. Eine Zeile, die sich als Beschreibung einer Suchseite herausstellt, ist kein Ergebnis, das wir verkaufen werden.
Aus einem echten Export gelesen, in Blattreihenfolge. Wo hier steht, dass eine Spalte einen Wert trug, beschreibt das die einzige Zeile mit ok - eine Zeile, der wir aus dem in der Anmerkung unten dargelegten Grund misstrauen.
url, und nichts löste auf ein Produkt auf.sku_code.ok, einmal blocked (needs residential proxy) und zweimal blocked (intermittent - retry). Das letzte ist eine Anweisung, und der Elf-Minuten-Versuch oben sagt, dass es eine gute ist.Siebzehn Spalten je Zeile · CSV, JSON oder Excel
Das Nützlichste auf dieser Seite ist eine Warnung vor ihren eigenen Daten. Unsere eine erfolgreiche Zeile trägt einen Namen, der der URL-Slug ist, einen Preis, eine Währung - und zehn leere Spalten. Wir haben geprüft, warum, und die Antwort lautet: Die übermittelte Adresse ist keine Produktseite, sie antwortet mit einer dauerhaften Weiterleitung auf eine Suchergebnisseite zum selben Slug. Eine Suchseite hat keinen einzelnen Produkttitel, deshalb fiel der Name auf den Slug zurück, und keinen einzelnen Identifikator, keine Beschreibung, keine Marke, keinen Bestandswert und kein Bild, deshalb sind jene Spalten leer. Die Preiszahl erscheint zwar auf jener Suchseite, aber eine Suchseite listet viele Produkte, nichts belegt sie also als Preis der vom Slug benannten Maschine - und diese Seite stellt sie deshalb nie als solchen dar. Es gibt eine zweite, verwandte Warnung: Die robots.txt der Seite erlaubt den Produktpfad und verbietet den Suchpfad, die URL, die Sie abrufen dürfen, leitet also auf eine weiter, die Sie nicht crawlen sollen. Die in unserem eigenen Servicekatalog hinterlegte Beispieleingabe ist genau diese Such-URL. Übermitteln Sie echte Produkt-URLs, lesen Sie zuerst status, und wiederholen Sie alles Blockierte.
Das Elf-Minuten-Ergebnis ist die praktische Lehre. Eine Blockade ist hier ein Moment und kein Urteil, bauen Sie also einen zweiten Versuch in den Zeitplan ein und zählen Sie blockierte Zeilen je Lauf. Wiederholungen kosten nichts, wenn sie scheitern, denn abgerechnet wird nach gelieferten Zeilen.
Wenn ein zurückgegebener name wie ein URL-Slug aussieht - klein geschrieben, mit Bindestrichen, passend zur Adresse -, hat der Lauf kein Produkt erreicht. Das ist eine einzeilige Prüfung, die in Ihren Importer gehört, und bei diesem Dienst hätte sie unsere eigene beste Zeile erwischt.
Eine Adresse, die dauerhaft auf eine Suchseite weiterleitet, liefert Suchseiten-Daten, und die robots.txt der Seite bittet allgemeine Crawler, diesen Suchpfad zu meiden. Lösen Sie Ihre Eingabe-URLs auf, bevor Sie sie einreihen, statt danach die Ergebnisse zu deuten.
Wenn die Frage lautet, was Industrie- und Gebäudebedarf kostet, und nicht, was dieser Händler konkret verlangt, decken unsere Dienste für Uline, Gemplers und Fastenal dasselbe Feld auf denselben siebzehn Spalten ab, und jene Seiten nennen echte Füllzahlen aus echten Läufen.
Einmalig, bei der Anmeldung. Keine Karte, und nichts, was danach gekündigt werden müsste.
Abgerechnet nach tatsächlich gelieferten Zeilen, und das macht den Rat zum Wiederholen auf dieser Seite billig: Drei unserer vier Läufe brachten nichts hervor und hätten nichts gekostet.
Guthaben verfällt nicht im Monatsrhythmus, ein auf Wiederholungen gebauter Zeitplan lässt zwischen den Versuchen also nichts still versickern.
LIVESCRAPER10.Das entgegengesetzte Ergebnis auf demselben Schema: fünfzehn von siebzehn Spalten gefüllt, und jeder Wert an der Live-Anzeige bestätigt.
Eine Kategorie-URL lieferte 99 bepreiste Zeilen, ohne dass etwas blockiert wurde - das klarste funktionierende Beispiel dieser Familie.
Die andere Seite in diesem Katalog, die zeitweiliges Blockieren ehrlich dokumentiert - zwei Läufe abgewiesen an einem Tag, an dem andere zwei Dutzend bepreiste Zeilen lieferten.
Der vollständige Katalog, mit allen weiteren Lieferanten, die wir auf diesem Schema abdecken.
Preise und Artikelnummern auf einer öffentlichen Katalogseite sind gewöhnliche Geschäftstatsachen. Sorgfalt verdient hier nicht die Erlaubnis im Allgemeinen, sondern ein bestimmter Pfad - und eine Weiterleitung, die ihn überschreitet.
Ein Preis, ein Produktname und eine Katalognummer sind Tatsachen über zum Verkauf angebotene Waren, gelesen von einer Seite, die jedem Besucher ausgeliefert wird. Nichts in den siebzehn Spalten beschreibt eine Person: kein Name, keine E-Mail-Adresse, keine Telefonnummer, kein Konto - die datenschutzrechtlichen Fragen, die unsere personenbezogenen Dienste prägen, stellen sich hier also nicht.
Zwei Dinge sind für diese Seite spezifisch. Erstens das Blockieren, das real und nachweislich zeitweilig ist: Dieselbe URL wurde abgewiesen und elf Minuten später ausgeliefert, und zwei unserer Zeilen tragen einen Status, der wörtlich zu einem zweiten Versuch rät. Wir machen eine Blockade in der Statusspalte sichtbar und hören dort auf, statt sie zu umgehen, und uns wäre lieber, Sie planten einen zweiten Versuch ein, als anzunehmen, die Quelle sei geschlossen. Zweitens, und heikler: Die robots.txt der Seite ließ sich für uns sauber lesen und enthält keinen pauschalen Ausschluss, ihre allgemeine Gruppe verbietet aber den Suchpfad, während sie Produktpfade erlaubt - und die von uns übermittelte Produkt-URL antwortet mit einer dauerhaften Weiterleitung auf ebendiesen Suchpfad. Eine Adresse, die Sie anfragen dürfen, kann also dort landen, wo Sie nicht crawlen sollen. Wir berichten das, statt die Weiterleitung als Erlaubnis zu behandeln, und würden empfehlen, Ihre Eingabe-URLs aufzulösen, bevor Sie sie einreihen. Die in unserem eigenen Servicekatalog hinterlegte Beispieleingabe ist genau diese Such-URL, und genau deshalb weisen wir darauf hin, statt sie zu wiederholen.
Unsere eigenen Bedingungen sind dieselben wie bei jedem anderen Dienst hier. Nur öffentlich zugängliche Seiten, nichts hinter einem Login, keine Tracker Dritter auf der Datenebene, und Exporte werden nach 30 Tagen automatisch gelöscht. Abgerechnet wird nach gelieferten Zeilen, ein blockierter Versuch ist also keine Rechnung.
ok - und der blockierte und der erfolgreiche übermittelten dieselbe URL, elf Minuten auseinander, am 3. Juli 2026. Die Blockade ist also ein Moment und kein Urteil. Zwei der blockierten Zeilen tragen sogar einen Status, der blocked (intermittent - retry) lautet.name ist der URL-Slug statt eines Produkttitels. So sieht ein Lauf aus, der keine Produktseite erreicht.status ab statt über die Zeilenzahl. Abgerechnet wird nach tatsächlich gelieferten Zeilen, die gescheiterten Versuche kosten also nichts - und genau das macht einen Wiederholungsplan hier zur billigen Antwort.Das Blockieren ist hier zeitweilig - dieselbe URL scheiterte und funktionierte elf Minuten später -, ein zweiter Versuch ist also mehr wert als ein Umweg. Stellen Sie nur sicher, dass die URL auf ein Produkt auflöst, denn unsere tat es nicht. Ein blockierter Lauf kostet nichts.
GlobalIndustrial verkauft Industrie-, Fördertechnik- und Gebäudeausstattung, und unser Export dazu enthält vier Läufe - einen erfolgreichen und drei blockierte. Das Nützlichste in diesem kleinen Datensatz ist ein zeitlicher Zufall, der sich als keiner erweist. Am 3. Juli 2026 übermittelten wir um 03:43 eine URL in Produktform, und der Lauf kam blockiert zurück, mit dem Hinweis auf einen Residential-Proxy. Wir übermittelten dieselbe URL um 03:54, und sie kam erfolgreich zurück. Elf Minuten, sonst änderte sich nichts. Zwei unserer anderen Zeilen tragen einen Status, der wörtlich besagt, die Blockade sei zeitweilig und die Anfrage solle wiederholt werden. Zusammengenommen ergibt das ein stimmiges und umsetzbares Bild: Auf dieser Seite ist eine Blockade ein Moment und kein Urteil, und ein Wiederholungsplan schlägt einen Umweg.
Die unbequemere Hälfte der Geschichte ist die erfolgreiche Zeile selbst, und wir stellen das Problem lieber voran, als es zu begraben. Diese Zeile füllte fünf von siebzehn Feldern - die übermittelte Adresse, die Adresse noch einmal, einen Preis, eine Währung und einen Namen - und ließ zehn leer. Es gab keinen Identifikator, keine Marke, keine Beschreibung, keinen Bestandswert und kein Bild. Und der Name ist kein Produkttitel: Es ist der URL-Slug, klein geschrieben und mit Bindestrichen, identisch mit dem Ende der von uns übermittelten Adresse. Eine Zeile, die sich nach ihrer eigenen URL benennt, ist eine Zeile, die nie ein Produkt gefunden hat.
Wir haben geprüft, warum, und die Erklärung ist eindeutig. Am 12. August 2026 lieferte diese Adresse überhaupt keine Produktseite. Sie antwortete mit einer dauerhaften Weiterleitung auf eine Suchergebnisseite zum selben Slug - eine Auflistung vieler Produkte, ein halbes Megabyte Markup, der Suchbegriff dutzendfach vorhanden. Das erklärt jede Merkwürdigkeit der Zeile: Eine Suchseite hat keinen einzelnen Titel, deshalb fiel der Name auf den Slug zurück; keinen einzelnen Identifikator, keine Marke, Beschreibung, keinen Bestandswert und kein Bild, deshalb sind jene Spalten leer. Die Preiszahl erscheint tatsächlich auf jener Suchseite. Aber eine Seite, die viele Produkte listet, belegt nicht, zu welchem eine Zahl gehört, deshalb geben wir sie nirgends auf dieser Seite als Preis der vom Slug benannten Maschine wieder. Wenn Sie eines von dieser Seite in Ihren eigenen Importer mitnehmen, dann diese Prüfung: Ein name, der wie ein URL-Slug aussieht, bedeutet, dass der Lauf kein Produkt erreicht hat.
Eine Sache verdient es noch, ausgesprochen statt beschönigt zu werden. Die robots.txt der Seite ließ sich für uns sauber lesen und enthält keinen pauschalen Ausschluss für allgemeine Crawler - mit einem richtigen Gruppen-Matcher gelesen erlaubt sie aber den Produktpfad und verbietet den Suchpfad, und die von uns übermittelte URL in Produktform leitet auf ebendiesen Suchpfad weiter. Eine Adresse, die Sie abrufen dürfen, kann also auf einer landen, die Sie nicht crawlen sollen - ein guter Grund, Eingabe-URLs vor dem Einreihen aufzulösen statt erst nach dem Lesen der Ergebnisse. Die in unserem eigenen Servicekatalog für diesen Scraper hinterlegte Beispieleingabe ist zufällig genau diese Such-URL, und eben deshalb weisen wir auf den Widerspruch hin, statt sie als Empfehlung wiederzugeben. Abgerechnet wird nach tatsächlich gelieferten Zeilen, sowohl die blockierten Versuche als auch die Wiederholungen kosten also nichts, wenn sie scheitern. Nur öffentlich zugängliche Seiten, keine Tracker Dritter auf der Datenebene, Exporte werden nach 30 Tagen automatisch gelöscht, und Ihre ersten 500 Zeilen sind gratis, ohne Kreditkarte.