Fügen Sie eine OLX-Such-URL aus jedem Land ein, in dem die Plattform läuft - olx.ro, olx.pl, olx.kz, olx.in - und erhalten Sie die Anzeigen als Zeilen zurück: Titel und Beschreibung, den Preis mit der Währung, in der er angegeben ist, wo der Artikel ist, wer verkauft und ob es ein Gewerbe ist, alle Bilder und einen Link zum Angebot.
Die Eingabe ist genau die OLX-Suche, die Sie gerade ansehen - auf der Länderseite, auf der Sie sie ansehen.
Eine Zeile pro Anzeige, jeweils mit der Abfrage gekennzeichnet, aus der sie stammt - so lässt sich ein Lauf über mehrere Länder weiterhin auf Ihre Eingabeliste zurückführen.
OLX betreibt viele nationale Seiten, und dies liest sie alle über ein Formular. Fügen Sie eine rumänische und eine polnische Suche in aufeinanderfolgende Zeilen ein - beide kommen in derselben Form zurück.
Stadt, Region und Bezirk bekommen jeweils eine eigene Spalte, mit IDs neben den Namen, statt als eine Zeichenkette anzukommen, die Sie erst zerlegen müssen. Die kombinierte Zeichenkette ist weiterhin da, falls Sie sie wollen.
Eine eigene Spalte kennzeichnet, ob die Anzeige ein Privatverkauf oder ein Händler ist - genau die Trennung, die entscheidet, ob eine Preisreihe einen Verbrauchermarkt oder einen professionellen misst.
Jede Zeile trägt die Anzeige so, wie die OLX-Ergebnisse sie zeigen: Titel und Beschreibung, den Preis und seine Währung, den in Teile zerlegten Ort, den Verkäufer und sein Kontoalter, alle Bilder und einen Link zum Angebot.
Die Spaltenliste unten ist die Kopfzeile echter Läufe und keine Spezifikation. Lesen Sie die Notiz darunter, bevor Sie darauf aufbauen - diese Ausgabe hat drei Eigenheiten, über die Leute stolpern, und eine davon beschädigt still einen Preisvergleich, wenn Sie die Währung aus dem Land ableiten, in dem Sie gesucht haben.
Entnommen der Kopfzeile echter Läufe, identisch mit der Spaltenliste der Plattform. JSON und Arbeitsmappe führen dieselben Namen, kein Format ist hier schmaler als ein anderes.
business - die beiden laufen in keiner Richtung zuverlässig parallel.yes und no.YYYY-MM-DD. Ein grober Anhaltspunkt dafür, wie etabliert jemand ist.url in jeder von uns gesehenen Zeile - die beiden sind ein Duplikat-Paar, nehmen Sie eines und ignorieren Sie das andere.yes und no."; ", um die Liste zu erhalten.YYYY-MM-DD. Ein echtes Datum - keine Rechnerei gegen Ihr Laufdatum nötig.listing_url.images.150 000 km · 2022. Sie variiert je Kategorie und trägt angehängte Leerzeichen, trimmen Sie also vor dem Parsen.Drei Eigenheiten dieser Ausgabe bringen Leute zu Fall. Erstens und am teuersten: currency muss je Zeile gelesen werden. Eine einzelne Suche auf einer nationalen Seite kam mit Preisen in mehr als einer Währung zurück - eine Preisreihe, die die Währung aus der Domain annimmt, mischt still Einheiten. Zweitens: images ist eine Zeichenkette, verbunden durch Semikolon und Leerzeichen, kein Array - trennen Sie an "; ", und beachten Sie, dass image nur ihr erster Eintrag ist. Drittens: url und listing_url waren in jeder von uns gesehenen Zeile identisch, ebenso die kombinierte location und die aufgeteilten Stadt- und Regionsspalten - mehrere der achtundzwanzig sind also dieselbe Tatsache doppelt. Und noch etwas vor dem Parser: details ist Freitext, der die Form je Kategorie wechselt und angehängte Leerzeichen trägt, und company_name folgt der business-Kennzeichnung in keiner Richtung zuverlässig.
Ein Limit pro Abfrage entscheidet, was ein Lauf kostet und wie viel in der Datei landet. Es wird vor dem Start des Jobs gewählt - zusammen damit, wie Sie die Liste der Suchen übergeben.
Ein paar Beispiele, wie Teams Kleinanzeigendaten nutzen, um eine Frage zu beantworten, die sie tatsächlich haben.
OLX deckt viele Länder mit einer Ausgabeform ab, dieselbe Suche über mehrere nationale Seiten ergibt also ein grenzüberschreitendes Preisbild in einer Datei. Rechnen Sie über die Währungsspalte um statt über die Domain, und der Vergleich hält.
Die Gewerbe-Kennzeichnung teilt eine Kategorie in einen Verbrauchermarkt und einen professionellen. Die beiden verhalten sich beim Preis und beim Lagerumschlag unterschiedlich, und zusammengemittelt verschwinden beide.
Stadt, Region und Bezirk kommen als eigene Spalten mit angehängten IDs, geografische Aggregationen beginnen also nicht mit Zeichenketten-Chirurgie. Joinen Sie über die normalisierten Namen, und lokale Schreibweisen sind kein Problem mehr.
Kein Abo, kein Mindestumsatz, keine wiederkehrende Rechnung. Ihre ersten 500 Zeilen gehen auf uns - danach zahlen Sie nach Verbrauch, zum selben Pauschalsatz wie bei jedem anderen Scraper hier.
Für jedes neue Konto, einmalig. Keine Kreditkarte erforderlich. Limits pro Abfrage, Datei-Upload und alle Exportformate inbegriffen.
Ungefähr 2 $ je 1.000 Anzeigen. Der Vorab-Schätzer zeigt Zeilenzahl und Guthabenkosten, bevor ein Lauf startet - keine Überraschungsrechnungen, keine Recheneinheiten zum Umrechnen.
Volumenpreise, dedizierte Worker und ein SLA für laufendes Monitoring oder sehr große historische Abzüge. Nennen Sie uns Ihre Zahlen, und wir erstellen ein Angebot.
LIVESCRAPER10 an der Kasse.Polens anderer Marktplatz, und einer, mit dem OLX direkt konkurriert. Beide über dieselbe Kategorie laufen zu lassen, ist der Weg, das Angebot einer Plattform nicht mit dem ganzen Markt zu verwechseln.
Dieselbe Aufgabe auf einem lokalen US-Marktplatz - Titel, Preisvorstellung, Ort und Bundesstaat sowie ein Link zu jeder Anzeige. Nützlich, wenn Sie vergleichen, wie sich eine Kategorie über Regionen hinweg verhält.
Kurze Antwort: ja, für die öffentlichen Anzeigeninhalte - und diese Ausgabe enthält mehr Verkäuferdetails als die meisten, was Planung verdient.
Anzeigen auf OLX werden veröffentlicht, um gefunden zu werden. Titel, Beschreibung, Preis, Ort, Bilder und der Anzeigename des Verkäufers werden jedem angezeigt, der die Suche ausführt, angemeldet oder nicht. Öffentlich sichtbare Anzeigendaten für Preisrecherche zu sammeln, ist seit Langem gängige Praxis, und nichts hier berührt ein Login oder eine Bezahlschranke.
Dieses Schema führt mehr über den Verkäufer als ein reiner Preis-Scrape: einen Anzeigenamen, eine Konto-ID, ein Konto-Erstellungsdatum, eine Gewerbe-Kennzeichnung sowie Spalten für einen Handelsnamen und eine Telefonnummer. OLX ist in der EU sehr groß, die DSGVO gilt also für das, was Sie nachgelagert damit tun, nicht dafür, dass es veröffentlicht war. Daraus folgt zweierlei. Wenn es Ihnen um Preise und Angebot geht, verwerfen Sie die Verkäuferspalten beim Import, und die Frage ist nicht mehr Ihre. Und wenn Sie sie behalten, behandeln Sie die Telefonspalte grundsätzlich als personenbezogene Daten, unabhängig davon, was ein einzelner Lauf zurückgibt.
OLX’ eigene Nutzungsbedingungen schränken automatisierten Zugriff ein, das ist also ebenso eine Frage der Bedingungen wie eine rechtliche - wenn Sie eine vertragliche Beziehung zur Plattform haben, prüfen Sie sie. Wir betreiben keine Tracker Dritter auf der Datenebene, und Ihre Exporte löschen sich nach 30 Tagen automatisch.
Die Fragen, die wir am häufigsten hören. Noch etwas? Sprechen Sie uns an - Menschen schreiben die Antworten, keine Bots.
500 einmalige kostenlose Zeilen auf jedem neuen Konto - ohne Ablaufdatum. Danach 0,002 $ je Zeile nach Verbrauch - keine hinterlegte Karte, bis Sie es sagen.
Livescrapers OLX Scraper macht aus Marktplatz-Suchen Anzeigendaten. Sie übermitteln olx.*-Such-URLs aus jedem Land, in dem die Plattform läuft - eine pro Zeile getippt oder als CSV-, XLSX-, TXT- oder Parquet-Datei hochgeladen -, begrenzen bei Bedarf die Zeilen pro Abfrage und laden die Ergebnisse als saubere CSV-, Excel- oder JSON-Datei herunter.
Jede Zeile trägt die Anzeige so, wie die OLX-Ergebnisse sie zeigen, über achtundzwanzig Spalten: die ID, Titel und Beschreibung, den Preis und die Währung, in der er angegeben ist, das Datum der Aufgabe, alle Bilder, einen Link zum Angebot, Stadt, Region und Bezirk als getrennte Spalten mit Anzeige- und normalisierten Namen sowie Anzeigename, Konto-ID, Kontoalter und Gewerbe-Kennzeichnung des Verkäufers. All das steht in der Arbeitsmappe ebenso wie im JSON.
Pricing-Teams führen eine Suche über mehrere nationale Seiten aus, um ein grenzüberschreitendes Bild in einer Datei zu bauen. Strategieteams nutzen die Gewerbe-Kennzeichnung, um eine Kategorie in ihre private und ihre professionelle Hälfte zu teilen, die sich unterschiedlich verhalten und zusammengemittelt in die Irre führen. Forschende nutzen die aufgeteilten Ortsspalten, um das Angebot vom Bezirk zur Region zu aggregieren, ohne Zeichenketten zu zerlegen.
Drei Eigenheiten dieser Ausgabe sollten Sie kennen, bevor Sie darauf aufbauen. Die Währung muss je Zeile gelesen werden - eine Suche auf einer einzelnen nationalen Seite lieferte mehr als eine Währung, sie aus der Domain abzuleiten ergibt also falsche Zahlen. Die Spalte images ist eine durch Semikolon verbundene Zeichenkette statt eines Arrays. Und mehrere Spalten sind dieselbe Tatsache doppelt: url und listing_url stimmten in jeder von uns gesehenen Zeile überein, ebenso image und der erste Eintrag von images. Starten Sie kostenlos: Ihre ersten 500 Zeilen kosten nichts und brauchen keine Kreditkarte, danach sind es pauschal 0,002 $ je Zeile.